岗位职责： 1.承担建设基于Hadoop/Spark生态的大数据离线/实时处理平台； 2.参与业务数据.生产日志的抽取.转储.检索等相关工作； 3.跟进大数据前沿技术的发展，将合适的技术方案适时引入业务场景。 任职要求： 1.3年以上计算机.统计.数学等相关本科或以上学历； 2.掌握Hadoop.HBae.Hive.Kafka.Flume.Spark等大数据技术； 3.掌握数据挖掘，python，机器学习经验者优先； 4.有较强的学习能力，勤奋踏实，责任心强，有较强的沟通协调能力，有一定创新能力；

岗位职责： 1、分析业务需求，建设数据库仓库，对业务部门提供数据支持； 2、参与数据源分析，完成大数据平台与各业务系统的数据对接； 3、完成基于大数据技术平台基础上的数据仓库设计和ETL开发； 4、调研相关技术，优化大数据开发流程，规划大数据平台应用。 任职标准： 1、3年以上数据仓库相关工作经验, 有互联网、电商行业数据仓库建设经验； 2、精通Hive-sql编写和优化，精通常用etl工具，至少熟悉java、python、shell等语言中一种； 3、精通大数据背景下数据仓库模型设计，熟练掌握OLAP的维度建模设计方法； 4、有数据平台（数据开发、治理、资产等）相关建设经验； 5、责任心强，有较强沟通能力和团队合作精神； 6、有spark streaming、flink等实时数据开发经验； 7、有统计学数学知识，海量数据处理、数据分析和挖掘经验者优先

岗位职责: 1. 参与数据中台的设计与开发，解决海量数据面临的挑战； 2. 负责Flink/ES/clickhouse/hadoop的功能、性能和扩展，参与产品需求讨论、技术方案确定，解决并实现业务需求； 3. 参与数据中台组件选型搭建和组件优化，提升平台的数据接入、数据治理、数据分析、数据服务能力，并提升整体系统的性能及稳定性。 任职要求: 1. 本科以上学历，2年以上互联网大数据处理经验； 2. 熟悉Linux操作系统，熟悉Java、Scala开发常用语言框架，有扎实的Java基础及良好的编码能力； 3. 熟悉大数据开源技术，包含（不限于）Hadoop/Flink/Spark/Kafka/Es分布式框架/计算/存储/检索等相关技术； 4. 了解大数据行业解决方案应用架构，有大型分布式高并发、高负载、高可用性系统设计开发经验优先，有海量数据下开发及组件优化相关经验者优先 5. 具有高度的抽象设计能力，善于思考，能独立分析和解决问题，能独立了解数据需求，并可以转化成分析产品设计并实现； 6、责任心强，具备良好的团队合作精神和较强的学习能力。 加分项： 1.有过大型日志处理系统的开发经验者优先 2.网络&数据安全相关经验优先

一、职位职责： 1、全面负责用户&商品画像和标签平台的架构设计与核心研发，确保平台的高可用性和扩展性； 2、深入理解公司各重点产品及业务需求，通过数据挖掘和分析，发掘潜在价值点，制定画像平台的长期发展策略，拓展画像在多场景下的应用； 3、领导画像产品的持续优化，推动画像标签应用平台的建设和技术创新，确保其在市场中的竞争力和领先性； 4、与跨部门团队紧密合作，推动用户画像技术在公司内部和外部生态系统中的推广和应用，提升公司整体数据应用能力。 二、职位要求： 1、精通Java语言及其生态系统，具备5年以上相关开发经验，能够在复杂场景下提供高效、稳定的解决方案； 2、深刻理解分布式系统、缓存、消息队列等技术原理，具备大规模分布式系统的设计和优化经验； 3、计算机基础扎实，对技术有极高的热情，具备解决复杂技术难题的能力，并愿意持续学习和应用新技术，应对业务挑战； 4、深入掌握大数据常用开源框架，如Hadoop、HBase、Flink、Spark、ClickHouse、Doris、Flink等，具备大规模数据处理的实战经验； 5、具备丰富的用户画像、数据应用开发经验，能够从业务角度出发，设计和实施数据驱动的解决方案； 6、有出色的领导力和团队合作能力，能够带领团队共同实现目标，并推动团队的技术成长和发展。

【必备技能】1、熟悉大数据研发生态，有基于hive、hbase做研发的工作经验等。 2、熟悉Oracle/mysql等数据库。 3、能读懂java、python、shell代码 【重要技能】1、熟悉大数据研发生态，有基于hive、hbase做研发的工作经验等。 2、熟悉Oracle/mysql等数据库。 3、能读懂java、python、shell代码 4、3年左右开发经验。

职位描述： 1. 从事工业数据的采集、传输、分析、集成等技术研究及开发应用； 2. 负责但不限于生产制造管理主题领域的指标体系、数据模型和治理逻辑设计，从业务应用的视角，构建数据驱动的运营管理平台方案； 3. 作为大数据专家角色，充分与内外部合作，负责项目数据类的方案架构设计和技术规划并确保最终落地， 4. 牵头项目关键架构设计和组织技术难点攻关； 5. 参与工业数据标准制订，并且推动团队应用标准； 任职要求 1. 计算机、软件工程及相关专业，本科及以上学历，至少3年以上大数据项目相关工作经验； 2. 掌握Hadoop、HBase、Kafka、Hive、Flink、Spark、datav等组件中至少2项的工作原理，熟悉Hadoop生态系统； 3. 精通Java，Python中的一种或多种语言，熟练掌握海量数据分析的相关模型、算法，有制造行业大数据分析模型经验者优先； 4. 熟悉数据库开发，精通面向对象设计、设计模式，熟练MySQL、Redis等数据库； 5. 有指标系统和数据可视化系统开发经验优先； 7. 具备开发项目管理经验。

"高级： 1、熟悉SQL语言，熟练掌握Hive、MPPDB等大数据开发技能，具备3年以上关系型、分布式数据库设计和开发经验； 2、具有较强的团队管理能力、沟通能力、协调能力。工作积极主动，责任心强。 3、熟悉常用ETL工具，比如sqoop和kettle。 4、熟悉linux操作系统命令，有编写shell脚本和perl脚本的能力. 5、有银行系统开发经验者优先。"

职位职责： 1. 负责抖音直播业务的离线与实时数据仓库的构建； 2. 负责数据模型的设计，ETL实施，ETL性能优化，ETL数据监控以及相关技术问题的解决； 3. 负责指标体系建设与维护； 4. 深入业务，理解并合理抽象业务需求，发挥数据价值，与业务团队紧密合作； 5. 参与大数据应用规划，为数据产品、挖掘团队提供应用指导； 6. 参与数据治理工作，提升数据易用性及数据质量。 职位要求： 1. 熟悉数据仓库实施方法论、深入了解数据仓库体系，并支撑过实际业务场景； 2. 熟练使用Hadoop及Hive，熟悉SQL、Java、Python等编程语言； 3. 善于沟通，对业务敏感，能快速理解业务背景，具备优秀的技术与业务结合能力。

岗位职责： （1）负责民生卡大数据管理、分析、挖掘，开展相关数据应用建模； （2）制定相关数据标准，包括元数据、数据质量、数据标准和流程管理等； （3）负责数据分析、加工、清洗、处理程序的开发，数据治理技术优化及开发； （4）通过技术手段，提升数据链路分析能力，维护血缘准确性、协助跟进日常数据质量问题； （5）对业务部门的数据分析需求给予实现与支持； （6）负责领导交办的其他工作。 任职资格： （1）计算机相关专业本科及以上学历，3年以上大数据开发工作经验； （2）熟练掌握Hadoop、Spark、Kafka等大数据处理技术和工具； （3）熟悉SQL，具备数据库设计、优化和性能调优能力； （4）熟悉Java或Python等至少一种编程语言，具备良好的编程习惯和代码规范； （5）具备良好的问题分析和解决能力，能独立承担项目开发任务； （6）具备良好的沟通能力和团队协作精神，能适应高强度的工作压力； （7）优秀的学习能力和创新意识，对大数据领域有浓厚的兴趣和热情。

【岗位职责】 1、负责基于hive、spark、flink技术的大数据平台需求分析、设计及开发工作； 2、负责基于datax、HQL、传统ETL 或基于spark、flink的大数据平台数据抽取、清洗、转换、加工等入仓的开发，优化大数据平台跑批作业； 3、负责使用Dolphinscheduler（海豚调度）批量配置跑批调度任务及调度优化工作； 4、负责使用flink采集并加工kafka、binlog等数据源。 【岗位要求】 1、能熟练使用大数据基础组件，不限于hdfs/kudu、hive、impala、yarn、Tez/spark、flink、hbase、sqoop、flume、datax、elasticsearch、kafka等，熟悉相关架构和原理，有一定的组件性能调优能力； 2、有CDH/CDP平台使用经验，熟悉基于Cloudera Manager的平台使用管理； 3、具有airflow/azkaban/xxl-job/Dolphinscheduler等一种基几种调度工具的开发使用经验，有Dolphinscheduler使用经验优先； 4、具备海量数据采集、加工、分析处理、高并发查询等数据平台的开发设计能力，并有具体的构建海量数据存储、离线/实时数仓等项目实施经验； 5、具有金融行业大数据平台实施项目经验； 6、了解常见的大数据产品和技术路线，如：ClickHouse、Doris、GBase、Kylin、Linkis、Flink CDC、Hudi/Iceberg等更优； 7、学习能力强，适应能力好，有强烈的责任心，主动关注数据发现问题并提出解决方案，具备良好的沟通能力及团队合作精神。

职位职责： 1、负责生活服务业务效率平台等方向大数据应用能力建设，包含数据专题分析、数据服务、数据诊断等； 2、针对业务场景梳理数据信息，提出一站式的数据解决方案； 3、负责数据产品架构设计和后端开发，设计和实现Web后端和关键数据服务； 4、负责数据产品的功能迭代和性能优化，提高效率，优化流程。 职位要求： 1、熟悉互联网产品和服务的开发过程，熟悉后端技术架构，具备良好的系统设计能力； 2、扎实的计算机基础，熟悉Golang语言优先，对技术有热情，愿意不断尝试新技术和业务挑战； 3、善于沟通，对业务敏感，能快速理解业务背景，具备优秀的技术与业务结合能力； 4、熟练使用ClickHouse、Presto、Doris等MPP查询引擎，具备数据组件化开发的能力，具备较好的数据分析意识，有良好的协作能力。

1. 熟悉Hadoop生态常用开源组件(如hdfs、hive、spark、flink、doris)的问题排查、性能和管理优化、部署升级、扩容缩容等，有过相关运维管理平台或自动化部署系统开发经验者优先； 2. 熟练使用shell、python、Java，有相关开发经验；熟悉大数据组件源码或有大数据开源组件开发经验者优先； 3. 良好的沟通合作能力，热爱技术并善于钻研，能主动思考，有解决疑难问题的毅力和决心

岗位描述： 1.负责大数据平台调度作业的日常监控、维护及协助优化； 2.负责建立大数据开发规范并持续完善，能够对技术风险、技术交付质量进行管控； 3.负责常规需求中底层数据开发及数据服务封装开发； 4.深入理解数据平台架构，发现并协助解决性能屏障； 5.新技术研究和应用，并推动适合的技术应用于生产。 任职要求： 1.本科及以上学历，计算机及软件工程相关专业； 2.2年以上大数据系统开发或运维经验，熟悉hadoop生态圈、CDH大数据平台； 3.熟悉数据规范流程及数据维度模型，精通sql、shell，了解spark、python、scala、flink； 4.具有较强的计算机网络、系统运维专业基础，熟悉掌握常用linux命令； 5.有体系化大数据平台运维工作经验优先考虑。

岗位职责： 1. 参与公司分布式实时计算引擎的开发设计工作，满足毫秒级延迟、百万级吞吐的处理要求。 2. 参与实时计算管理平台的开发设计工作，为公司提供统一的实时应用开发管理平台和服务，提升应用开发的效率，降低运维成本。 3. 参与公司核心实时业务系统的架构设计，包括实时推荐/实时报表/实时数据交换等核心业务。 任职资格 1.计算机相关专业硕士，3年以上大数据开发相关经关经验 2.要求熟悉Flink/Spark等分布式处理引擎，熟练使用kafka/rocketmq等消息中间件。 3. 精通java/scala等编程语言，精通数据结构和算法。 4. 对技术有热情，通过技术和团队合作来解决业务上的挑战。

工作内容: 1、负责自如大数据平台组件的运维 2、负责自如一站式大数据开发平台的建设 任职要求: 1、大学本科及以上学历，计算机或相关专业； 2、精通clichouse、hbase运维及封装 3、熟练掌握haoop、atlas、ranger、hive、flink、夜莺监控等大数据组件的运维，对大数据组件具备源码改造能力 4、熟练掌握Java、Python、shell，熟悉springboot； 5、有大数据项目开源社区贡献者优先