-
岗位职责: 1. 参与数据中台的设计与开发,解决海量数据面临的挑战; 2. 负责Flink/ES/clickhouse/hadoop的功能、性能和扩展,参与产品需求讨论、技术方案确定,解决并实现业务需求; 3. 参与数据中台组件选型搭建和组件优化,提升平台的数据接入、数据治理、数据分析、数据服务能力,并提升整体系统的性能及稳定性。 任职要求: 1. 本科以上学历,2年以上互联网大数据处理经验; 2. 熟悉Linux操作系统,熟悉Java、Scala开发常用语言框架,有扎实的Java基础及良好的编码能力; 3. 熟悉大数据开源技术,包含(不限于)Hadoop/Flink/Spark/Kafka/Es分布式框架/计算/存储/检索等相关技术; 4. 了解大数据行业解决方案应用架构,有大型分布式高并发、高负载、高可用性系统设计开发经验优先,有海量数据下开发及组件优化相关经验者优先 5. 具有高度的抽象设计能力,善于思考,能独立分析和解决问题,能独立了解数据需求,并可以转化成分析产品设计并实现; 6、责任心强,具备良好的团队合作精神和较强的学习能力。 加分项: 1.有过大型日志处理系统的开发经验者优先 2.网络&数据安全相关经验优先
-
岗位职责: 1. 负责大数据实时、离线、异构数据的同步和传输生态的研发,提供灵活高效的接入能力; 2. 负责大数据接入组件的性能、效率、稳定性分析与优化。 任职要求: 1. 熟悉Flume/DataX/Logkit/Kafka等大数据接入技术和相关组件,有1年以上大数据接入研发经验; 2. 具备扎实的计算机基础,熟悉分布式系统研发,有云原生技术经验优先; 3. 精通Java/Scala研发语言,具有良好的编程研发能力; 4. 能够深刻理解业务,善于利用技术实现相关业务价值;
-
岗位职责: 1. 负责大数据平台的建设、数据SaaS应用开发; 2. 参与大数据平台系统架构设计,持续提升系统性能和稳定性,协助解决系统开发过程中的技术难题; 3. 跟进行业动态与技术发展,调研大数据领域前沿技术。 岗位要求: 1. 本科及以上学历,计算机、软件工程、数理统计等相关专业; 2. 三年及以上Java后端开发经验,一年以上大数据开发相关经验; 3. 熟悉Java、Scala等至少一种开发语言,掌握主流后端开发框架,如SpringBoot、Mybatis、SpringCloud等; 4. 熟悉Hadoop、Hbase、Hive、Spark、Doris等大数据相关技术,有大数据批处理优化经验更佳; 5. 熟悉Linux操作系统,熟练使用shell脚本,有Docker、K8S等容器云相关工具使用经验; 6. 工作踏实认真、责任心强,具备良好的学习能力,能够承受工作压力,具备良好团队协作精神及沟通能力。
-
职位职责: 1、对业务问题进行合理抽象和设计,设计和开发高质量的底层数据体系,驱动业务快速健康发展; 2、在数据仓库内实施收集,清洗和规约等工作; 3、提供面向业务的数据服务,完成数据指标的统计,多维分析和展现; 4、根据业务和产品情况,抽象业务逻辑,搭建和开发大数据平台; 5、参与数据平台架构设计,核心开发任务。 职位要求: 1、熟悉SQL/HQL/PLSQL之一,有SQL性能调优经验者优先; 2、熟悉Mysql/Oracle等至少一种关系型数据库; 3、了解数据仓库,学习过主题建模、维度建模理论者优先; 4、了解MapReduce/Hive,熟悉Hadoop生态者优先; 5、有电信,金融等行业应用经验者优先; 6、具备优秀的逻辑思维能力,对解决挑战性问题充满热情,善于解决问题和分析问题; 7、责任心强,具备良好的沟通技能,团队合作能力。
-
职位职责: ByteIntern:面向2025届毕业生(2024年9月-2025年8月期间毕业),为符合岗位要求的同学提供转正机会。 团队介绍:字节数据BP团队以数据高效赋能业务为使命,在字节内部深入各业务线,以数据建设为基础,业务目标为导向,提供专业,稳定,高效的数据服务和架构方案。 1、参与字节跳动抖音电商、生活服务等业务离线和实时数据仓库建设工作; 2、面向PB级超大规模数据问题,每天处理千亿增量的用户行为数据; 3、为大数据的全生命周期提供服务,覆盖数据产生,传输,建模,统计分析,实验评估,可视化的全流程; 4、构建设计良好的数据流、数据仓库、调度系统、查询引擎,数据服务、分析系统、流程规范,数据工具/产品,降低数据的使用门槛,保证系统稳定高效运行,以实现数据的最大价值。 职位要求: 1、2025届本科及以上学历在读,具备大数据开发相关技能,计算机等相关专业优先; 2、熟悉数据仓库实施方法论、了解数据仓库体系; 3、会使用SQL,掌握Java、Python、R、Scala、C/C++ 中任意一门编程语言; 4、善于沟通,对数据敏感,责任心强、积极主动; 5、每周可以实习4天以上,连续实习3个月以上。
-
工作职责: 1、负责数据中台/数据仓库的模型架构设计和研发; 2、负责大型金融机构企业数据仓库模型设计,将源系统离散的数据按照各类主题进行建模,通过数据集成和质量管控,解决企业的数据使用问题; 3、参与数据治理工作,推动数据治理体系落地,参与数据标准,元数据管理,数据质量监控等数据管理工作; 4、理解并合理抽象业务需求,发挥数据价值,参与数据仓库/数据集市/数据应用等的设计与数据建模,与业务,BI团队紧密合作; 任职资格: 1,3年以上数据中台/数据仓库/数据平台相关经验;具备乙方或者大型实体企业内部的数据建模项目经验,优先考虑;**本科或以上学历; 2,具备数据中台/数据仓库和数据建模能力;熟悉建模理论与方法,熟悉维度建模,能够按照需求正确划分主题,产出概念模型,业务模型,逻辑模型等;熟悉数据仓库总线矩阵设计和数据仓库项目的实施流程 3、具有1年以上的数据仓库建模经验,了解IBM和teradata的FS-LDM的建模方法,并有至少1个以上的的金融企业数据仓库建模实际落地经验;熟悉保险行业业务更佳; 4,具备团队管理能力,有项目管理经验;个人具有良好的数据分析、逻辑推理能力,良好的学习能力与团队精神,工作热情努力、积极主动、高效负责。 5、了解大数据开发技术,包括Hadoop,Hive,Spark,Flink,Kafka等大数据框架原理及应用,有阿里大数据生态Maxcompute、dataworks项目经验的优先考虑。对常见数仓技术体系:Kylin、Doris、Clickhouse、Hive、Spark、Flink、Kafka等,有其中一个或多个有实际研发经验;
-
岗位职责 1)负责招行大数据平台基础数据模型和衍生数据模型的设计和开发,包括逻辑模型、物理模型; 2)负责银行零售、批发相关板块数据的基础模型建设工作,保障数据质量和数据时效,建设招商数据中台。 岗位要求 1)本科及以上学历,计算机相关专业,1年以上数据仓库相关工作经验; 2)熟悉DB2、Oracle、MySQL、Teradata、SQL Server、Gauss、Hadoop 至少一种数据库,熟悉SQL等编程语言,熟悉数据仓库开发流程和相关理论知识; 3)熟悉常用操作系统如 Windows、Linux、AIX 等的日常操作,熟悉基本的shell命令; 4)具备数据仓库相关系统分析、设计和开发经验者优先;有银行业务系统或互联网公司开发经验者优先;有数仓ETL开发和模型设计开发经验者优先; 5)有良好的代码和文档编写能力,工作态度积极,责任心强,有良好的合作精神,沟通能力强。
-
工作职责: 1)、数据ETL工作; 2)、参与数据产品设计工作:数据分析挖掘:与医疗业务专家配合,承担数据仓库构建、模型构建、数据标签、知识库、画像分析等相关数据产品等设计工作; 3)、数据挖掘分析工作; 4)、数据产品研发工作。 任职要求: 1)、具有深厚的统计学、数据挖掘等相关知识,熟悉数据仓库和数据挖掘的相关技术,精通建模方法并有过独立的建模实践; 2)、熟悉软件产品研发流程:精通SAS,R,SPSS等统计分析软件,具有海量数据挖掘、分析相关项目实施经验,参加过完整的数据挖掘项目并有成功案例; 3)、精通Kettle、pentaho等工具的使用或开发; 4)、熟悉Python、TIDB、关系型数据库、大数据Hadoop生态编程及数据库操作者优先录用。
-
岗位职责: 1)负责电池云端安全预警算法开发及性能优化,包括但不限于电池状态估计、电池异常检测及热失控预警等,实现电池全生命周期安全监控和远程诊断; 2)运用机器学习、深度学习进行电池大数据挖掘和性能预测,预估电池剩余可用容量和老化趋势等; 3)负责电池大数据的数据清洗、特征提取及算法实现; 4)负责电池算法部署的整体框架设计 岗位要求: 1)本科或以上学历,数学/电化学/软件工程/自动控制/汽车等相关专业; 2)2年及以上大数据分析/机器学习算法开发经验; 3)熟练SPARK/Hadoop等大数据分布式平台,熟练使用Python/R/SQL等开发工具、数据分析工具; 4)熟悉大数据分析、机器学习、数据统计的基本方法; 5)具备较强的沟通协作能力、逻辑分析能力和持续学习能力
-
1.负责公司的离线数仓和实时数仓的设计、建模和开 发,参与数据模型评审; 2. 负责数据仓库建设,离线任务和实时任务开发,海 量数据下的性能调优,以及复杂业务场景下的需求交 付; 3. 参与制定离线和实时大数据处理流程,负责数据模 型的性能优化,提供统一、可靠的离线和实时数据服 务; 4. 参与大数据平台相关管理工作,如数据开发规 范、优化数据链路、数据质量及稳定性保障等建设; 5. 通过数据仓库的建设和治理,沉淀数据仓库建设标 准,能够针对业务场景探索提供大数据解决方案; 任职要求 计算机相关专业,本科及以上学历; 2.3年以上数据仓库或大数据开发,丰富的离线或者 实时数据体系建设经验; 3. 熟悉Linux平台,精通Java/Python等至少一门语 言,熟练掌握Hive/Hadoop/Spark/Flink/HBase等 大数据研发工具; 4.了解各种不同类型数据库的内部原理,如mysql,es, mongodb, hive, hbase等; 5.熟练掌握一门或多门编程语言,并有大型项目建设 经验者优先,重点考察Java、Python;熟悉Linux系 统常规shell处理命令,灵活运用shel做的文本处理和 系统操作; 6.熟悉数据流调度的常用方法,并有相关产品的使用 7. 精通数据建模及ETL设计开发,对数据仓库、数据 平台、数据分析等有深刻理解,具备丰富的海量数据 加工处理和优化经验; 8. 能根据业务需求进行高效的数据建模和逻辑抽象, 输出合理的数据建设解决方案;
-
职位描述: 1. 基于信贷风控领域特定数据的处理和应用需求,参与公司数据仓库的设计与搭建,主导数据建模标准制定和实施; 2. 负责公司数据应用项目的开发、SLA制定与数据治理,统一数据口径和数据血缘管理; 职位要求: 1. 从事数据仓库领域3年以上,熟悉数据仓库模型设计与ETL开发经验,掌握维度建模设计方法,具备海量数据加工处理相关经验; 2. 熟悉数据仓库领域知识体系和技能,对数据采集、数据融合、数据质量、数据应用链路有深入理解; 3. 具备一定数据模型和数据架构的基础,熟悉大数据生态、包括但不限于Hadoop/Hive/Hbase/Spark/Kafka/Flink/Presto/Doris/ES等; 4. 精通SQL,有一定的SQL性能调优经验,熟悉SQL开发; 5. 精通Python语言,熟悉常用的numpy/pandas数据分析处理类库; 6. 具有信贷或大数据风控相关经验者优先,有业务sense,能够通过梳理设计业务模型发现业务问题,并驱动业务目标实现; 7. 对数据挖掘和机器学习有所了解,包括常用的机器学习算法和数据建模过程的优先; 8. 有较强的责任心和owner意识,较好的学习和适应能力,积极乐观并有良好的团队协作能力。
-
岗位职责: 1、负责实时任务的开发与维护,参与实时数仓的搭建 2、负责数据平台相关的开发与维护 3、负责Flink、数据湖等技术领域的探索研究 岗位需求: 1、***本科及以上学历,计算机相关专业; 2、精通Flink,并可以熟练使用FlinkSQL进行实时任务开发; 3、精通Java,熟悉Spring、SpringBoot、Mybatis等流行框架; 4、3年以上大数据相关系统研发和性能优化经验,电商行业经验优先; 5、对大数据相关组件:Flink、Hadoop、Spark、Hive、HBase、Kafka等架构与底层实现有深入理解,具备相应的定制和研发能力;熟悉iceberg优先; 6、工作有计划性,责任心和执行能力强,有优秀的沟通能力及团队精神。
-
·有数据开发经验,离线开发,实时开发 ·java后端开发,做过分布式系统开发,能进行系统设计,接口开发,问题排查 数据应用方面经验,画像标签系统,推荐系统等 (加分项) ·建模能力,能对电商,订单等核心模型做数据模型设计,解决分析,应用等场景的问题
-
1、大数据系统的数据链路/架构设计和大数据集群平台建设; 2、参与企业数仓建设与优化、数据存管用的建设,新技术引进,架构优化改造升级等工作,支撑公司业务; 3、负责数据团队建设工作,依据公司业务发展战略,规划数据团队的发展方向; 4、完成公司业务线或产品运营等部门的数据应用需求; 5、参与公司推荐搜索等业务相关项目的数据开发侧工作,包括但不限于主导离线和实时数仓建设,实时数据库和数据湖应用,和推荐、搜索、业务组、产品运营等跨部门协作。 职位要求 1、强悍的代码编程能力,掌握数据结构与算法,编程语言Java/Python/Scala均可。 2、精通离线计算引擎Hive和Spark、实时计算引擎Flink,有Spark和Flink源码的钻研经历。 3、对Kafka和Hbase有架构级别的掌握程度,有生产调优经验。 4、有Flink CDC/SeaTunnel等数据集成组件的使用经验,有大型数据中台或自研计算引擎开发经验者优先。 5、有实时数仓架构级的建设经验,对Flink Table Store/Hudi/Iceberg/Detal Lake 任一数据湖产品有成熟的生产应用经验。 6、熟练使用Presto/Doris/ClickHouse/Starrocks等任两款OLAP引擎或数据库。 7、关注大数据前沿动态,对新技术新组件有浓厚兴趣或涉足,开源社区或项目贡献者加分。 8、英语水平好、有AWS云应用经验加分。
-
工作职责 1、参与海量终端设备指标数据采集和分析以及相关热点分析预测算法和模型研究; 2、从事大数据分析平台系统的统一规划、设计、研发及部署落地,为后续技术优化演进和业务运营提供更加高效的数据系统支持; 3、参与整体架构规划、性能优化、稳定性保障建设、数据安全建设、技术难题攻坚。 4、参与线上大数据运营分析平台日常更新与维护。 任职资格 1、计算机或者数学相关专业,具有扎实的数据结构和算法功底,具备3年以上大数据应用开发分析经验; 2、对大数据体系有深入的认识,具备大数据计算和分析相关产品(如大型告警监控,业务指标采集分析等)项目应用研发经验; 3、具备海量终端告警监控指标和业务数据计算和分析经验,对常见的指标预测算法模型有深入研究; 4、熟悉开源分布式系统,对 Hadoop/Spark/Flink/HBase/openTSDB/kafka/elk/influxdb中的某项或多项有深入了解及实际的开发及优化经验; 5、从事过多年的Java开发语言的经验,并且基础知识扎实,理解io、多线程等基础内容及常用的开源框架,可以深入代码一线; 6、具备宽广的技术视野和优秀的学习能力,热爱软件技术工作; 7、具备优秀的沟通能力和团队合作精神。
热门职位