职位描述： 1、基础组件、基础设施的二次开发、L2支撑、交付； 2、围绕大数据组件服务平台开发，围绕组件进行串联部署、功能组合/抽象，给上层数据开发人员提供组件级平台服务 3、对Hadoop、Hbase、Hive、Flink等组件/系统进行持续研究、开发和交付，满足部署、集成、扩展、监控、高可用等生产需求； 4、根据理论与技术研究、产品对标和相关需求，持续产品规划与迭代； 5、根据现场信息搜集，分析、定位和解决现场问题，承担L3支撑 职位要求： 1、计算机相关专业，本科及以上学历； 2、3年及以上hadoop生态的基础设施开发经验，熟悉国内主流大数据平台； 3、熟练掌握Java，熟悉Linux开发环境及常用工具； 4、以下优先： (1)985/211（必备条件，不符合请勿投递，谢谢） (2)深入阅读过相关组件内核源代码 (3)深入理解分布式资源调度系统技术及原理 (4)深入理解linux系统能够独立排查及解决操作系统层问题 (5)有数据仓库经验者 (6)有运维经历者 (7)有C/C++开发经验 (8)有论文阅读、理论研究爱好与能力

1.熟悉Hadoop，有过大数据开发经验 2.熟悉大数据开源技术，对Spark,flink,Hive, Hdfs等分布式计算存储引擎有实战经验 3.**本科，双证齐全

岗位职责： 1、负责公司各产品线服务可靠、稳定、高效运行，提供K8S，Hadoop技术支持。 2、负责运维平台建设 通过技术手段提升工作效率； 3、负责公司各类基础设施监控、自动化、监控体系的持续建设与完善； 4、参与公司各类产品自动化实现，满足严格的质量与效率要求； 岗位要求： 1、***大学本科（计算机专业，获得***书、***书） 2、能熟练编写 Shell或Python脚本，有go/python/shell编程能力者优先 熟悉devops理念 3、熟悉自动化运维工具（saltstack/ansible/Jenkins）的原理及使用，有二次开发经验优先 4、具备kubernetes、docker、HDFS、spark、Hive运维经验者优先。 5、具备一定JAVA/GO开发经验优先。 6、具备良好的学习能力，能够快速掌握一门新的技术。

工作内容： 1.负责hadoop基础技术规划，编制相关规范文档； 2.负责Hadoop数据应用相关的数据存储、查询、计算、元数据管理的架构设计与实现； 3.负责hadoop的实际规划建设，包括环境与框架的规划搭建及部分核心编码工作； 4.负责hadoop相关技术发展方向的预研； 5.独立负责具体功能开发与实现、性能优化，保证系统健壮稳定及临时性数据处理工作的支持； 6.负责数据应用相关的数据存储、查询、计算、元数据管理等方面的架构设计。 岗位要求： 1.1年以上大数据开发经验，熟悉分布式的设计与应用。 2.熟悉hadoop大数据平台框架，包括不限于hadoop、hive、hbase等大数据生态平台组件的部署升级与调优。 3.熟悉hadoop、spark、flink、hbease、es等相关计算机存储框架的底层理论，并能应用至实际开发当中。 4.熟悉至少一款ETL工具，例如kettle、logstash等。 5.熟悉关系型及非关系型数据库的使用及优化，包括但不限于Oracle、PG、hive、clickhouse等。 6.熟悉各类大数据处理组件，sqoop、flume、kafka、azkaban等。 7.根据计划完成模块的编码开发工作，保证开发质量。 8.有良好的沟通能力，积极为项目建设提供建设性意见。 9.本科及以上学历，计算机相关专业，有银行工作、财务会计、管理会计业务经验优先。

1. 熟悉大数据云平台经验，再加Java开发 Java基础扎实，熟练掌握多线程编程，熟悉JVM，以及常规性能优化。 2. 熟悉spring，springboot，springcloud，nacos，mybatis，mybatis-plus等常⻅开源框架。 3. 熟悉redis，RocketMQ等常见中间件。 4. 熟练使用MySQL数据库，良好的数据库设计，SQL编写，索引性能分析能力。 5. 熟练掌握linux系统的使用。 6. 熟练掌握EKL系统的使用。 7. 有良好的逻辑思维能力，沟通能力，有责任心能独立完成需求。 1、本3专4，计算机/互联网/通信相关专业 2.熟悉java开发常用框架组件，能熟练运用到具体项目中 3.配合项目完成研发计划，有独立完成需求的能力

岗位职责： 1、数据收集与预处理：数据收集：负责从各种数据源（如数据库、文件系统、网络等）中收集数据，确保数据的全面性和多样性。数据预处理：对数据进行清洗、整理、转换和归约等操作，以提高数据的质量和可用性。这包括处理缺失值、异常值、重复值等问题，以及将数据转换为适合挖掘的格式。 2、数据挖掘与分析：数据挖掘：运用统计学、机器学习和数据挖掘技术，对预处理后的数据进行深入分析和挖掘，以发现模式和趋势。这包括分类、聚类、关联规则挖掘、回归分析、时间序列分析等多种方法。数据分析：通过数据挖掘技术发现数据中的隐藏模式、关联规则和趋势，提取有用的信息和知识。这些分析结果可以用于业务预测、市场趋势分析、用户行为研究等多个方面。 3、模型构建与优化：模型构建：根据业务需求和数据特点，选择合适的机器学习算法或深度学习模型，构建数据分析模型。这些模型可以用于分类、预测、推荐等多个场景。模型优化：对构建的模型进行评估和优化，提高模型的准确性和性能。这包括调整模型参数、选择更合适的算法、优化特征工程等方面。 4、数据可视化与报告：数据可视化：利用数据可视化工具（如Tableau、Power BI等）将挖掘和分析的结果以直观、易懂的方式呈现出来。这有助于用户更好地理解数据和分析结果，发现数据中的规律和趋势。报告撰写：撰写数据挖掘和分析报告，向决策者和相关人员解释和说明分析结果，并提出相应的建议和决策支持。这些报告可以包括数据摘要、分析结果、模型性能评估等多个部分。 任职要求： 1、教育程度：计算机、数学、统计学相关专业；本科及以上学历。 2、工作经验：具备5年及以上专业工作经验。 3、知识：熟悉常用数据统计、分析和建模方法；熟练掌握各类算法包括分类算法、聚类算法、关联规则挖掘、异常监测等；熟练使用Python、Sql等语言； 熟悉大数据技术栈和工具，如Hadoop、Flink、Kafka等。 4、技能：熟悉数据作业流程，包括指标体系定义、数据清洗ETL、数据分析挖掘、数据可视化与展示；熟悉各种类型的统计方法，比如概率分布、相关性、回归、随机过程等；能够使用机器学习算法建立数学模型；熟悉常用大数据计算引擎flink；熟悉TensorFlow、PyTorch等深度学习框架。 5、核心能力素质：分析判断能力、解决问题能力、执行能力、沟通能力、文字能力、抗压能力、业务知识、工作主动性、责任意识、团队协作、严谨细致、服务意识、敬业精神、正直诚信。

岗位职责： （1）参与制定兴业银行系统架构整体规划； （2）参与兴业银行系统架构管控，审核系统架构合规性； （3）负责兴业银行系统技术可行性研究、架构设计、整体实施方案设计等工作。 岗位要求： （1）具备应用架构、数据架构、技术架构、安全架构设计能力中的一个或多个； （2）具备宏观架构设计思维，具有主导大型复杂系统架构设计和开发编码经验。了解银行业务概貌，具备银行大型系统开发经验者优先； （3）具备良好的技术前瞻性研究能力，具备优秀的技术方案设计能力和文档能力，能独立完成重要信息系统整体方案的设计； （4）精通Java或C语言，熟悉Hadoop、MySQL、TDSQL、OpenGauss等一种或多种。 工作地点：上海、福州、成都

岗位职责： （1）负责兴业银行大数据应用服务的研发工作，进行数据服务方案设计、开发及上线后运营维护； （2）根据应用情况和研究情况进行提炼优化，形成稳定可复用的数据服务产品。 岗位要求： （1）精通Python/Scala/Java等至少一种编程语言，能够针对大数据环境进行高效编程； （2）熟练使用Hadoop生态体系中的核心组件，能够进行集群部署、配置和优化；掌握Mapreduce、Spark批处理框架；掌握Storm/Flink/Spark Streaming等至少一个流处理框架，能够实现实时或准实时数据流处理。 工作地点：上海

【岗位职责】 1.协助进行国家重点项目中的ETL、指标计算、数据治理等的研发工作； 2.协助进行数据中台设计和研发，为知识图谱、人物建模、搜索推荐等提供高质量数据，开发灵活可扩展的处理流程以及直观易用的数据界面； 3.协助进行全球多语言技术数据的抓取/补全； 4.协助进行数据正确性/完整性自动化检查； 5.协助进行自动抓取入库流程框架开发； 6.数据统计框架开发； 7.相关数据文档的撰写。 【岗位要求】 1.硕士，计算机/数学相关方向专业，可确保每周3天实习； 2.熟练掌握python编程，了解常用的数据处理库如pandas等； 3.熟悉mysql数据库，能够熟练编写sql语句并优化； 4.有数据清洗、数据处理、数据自动化监测经历者优先； 5.熟悉一种或多种主流开源大数据平台组件者优先，如Flume、Kafka、Hadoop、Hive、Spark、Flink； 6.了解数据分析/挖掘常用方法者优先，如序列分析、关联分析、异常点挖掘、分类、聚类等； 7.有编程竞赛获奖经历者优先，如 ACM、中国大学生程序设计大赛、蓝桥杯、CCF 相关竞赛或 CCF 等级考试相关、PAT 等级考试； 8.良好的团队合作，较强的沟通能力、学习能力，对解决具有挑战性问题充满激情。

岗位职责： 1、负责公司内部自研中间件、公共组件、技术框架以及其它自研技术系统的质量保障工作。 2、独立参与产品需求和技术评审，设计并执行测试方案和测试用例，与各方密切配合一同推动项目进度。 3、运用各种白盒、黑盒测试技术，从功能、性能、可靠性、兼容性等全方位保障被测对象的质量。 4、编写自动化测试工具，探索新的测试方法，提高测试效率与质量。 5、完成组内安排的其它工作。 岗位要求： 1、本科及以上学历，计算机、通信等相关专业，3年以上测试开发或开发经验。 2、掌握全面计算机基础知识，包括：操作系统原理，计算机网络技术，数据结构，设计模式，计算机组成原理，软件工程等。 3、熟练掌握Java，可以独立review各类Java程序，编写Java测试代码，有java单元测试经验者优先。 4、熟悉各种常见的中间件、技术框架、网络通信协议，以及对应的优缺点和使用过程中存在的风险，包括但不限于：redis，hadoop，es，rabbitmq，palsur，grpc，istio。 5、精通测试流程，能把控整体项目进度和开发质量。掌握各种白盒黑盒测试方法，能独立完成性能、可靠性、兼容性等专项测试。 6、拥有较强的学习能力和问题解决能力，有良好的团队沟通和协作能力，较强的自驱力、执行力强、工作责任心强，以及有较强的抗压能力。 7、热爱技术，有钻研精神。在面对各种技术问题时能积极主动且有耐心地进行深入的研究学习。 8、熟悉微服务架构及其各组件者优先，例如：Spring Cloud，ServiceMesh，k8s，istio等。

工作职责: 1、负责保险数据中台整体架构设计与优化，负责主导数据中台/数据仓库/数据集市的模型架构设计； 2、构建数据治理体系，包括制定数据标准管理规范，元数据管理，主数据、数据质量监控等数据管理工作； 3、负责团队内数据建模方法体系的构建和理论指导、能够带领团队提高技术水平，培养团队人才； 4、理解并合理抽象业务需求，发挥数据价值，带领团队完成数据仓库/数据集市/数据应用等的设计与数据建模，与业务，BI团队紧密合作。 任职资格: 1、**本科及以上学历，5年以上数据中台/数据仓库/数据平台相关经验，具备乙方或者大型实体企业内部的数据建模项目经验； 2、具备数据仓库和数据建模能力，熟悉建模理论与方法、维度建模、不同行业的模型主题域，能够按照需求正确划分主题，产出概念模型，业务模型，逻辑模型等； 3、具有数据仓库建模经验，熟悉IBM和teradata的FS-LDM的建模方法，并有金融企业数据中台/数据仓库建模实际落地经验； 4、个人具有良好的数据分析、逻辑推理能力，良好的学习能力与团队精神，工作热情努力、积极主动、高效负责； 5、熟悉大数据开发技术，包括Hadoop,Hive,Spark,Flink,Kafka等大数据框架原理及应用，对常见数仓技术体系：Kylin,Doris,Clickhouse,Hive,Spark,Flink,Kafka等，有一定实际研发经验。 6、具有良好的沟通能力和抗压能力，有项目协调/团队管理的经验。 加分项： 1、熟悉数据仓库总线矩阵设计和数据仓库项目的实施流程； 2、熟悉保险行业相关业务，具备项目协调/团队管理的经验； 3、有阿里大数据生态Maxcompute、dataworks项目经验；

工作职责: 1、充分理解业务需求及痛点，利用数据挖掘、数据分析、机器学习等技术挖掘业务价值，解决业务需求； 2、负责风控、定价等板块具体的数据挖掘项目，包括但不限于数据加工、数据分析、特征工程、构建模型等工作，并就对应项目阶段性成果进行汇报与分享，为业务发展提供支持； 3、参与构建用户全生命周期营销管理，构建以用户运营为核心的高质量的标签体系； 4、与业务团队构建良好的合作关系，积极沟通交流，推动合作项目成功。 任职资格: 1、3年以上数据分析/数据挖掘/机器学习等相关领域经验；**本科或以上学历；熟悉保险业务优先考虑； 2、熟练使用Python/Scala/Java中一门或多门语言；熟悉Spark/Hadoop/Hive等大数据处理技术，有阿里大数据生态Maxcompute、Dataworks、PAI项目经验的优先考虑；熟练使用Sql进行数据处理； 3、熟悉机器学习基本理论、数据分析常用方法论等相关理论知识，了解概率论与统计学基础； 4、有多类数据挖掘项目的实施落地经验，全链路打通并工程化部署，且能不断优化，进而产生业务效果； 5、自我驱动，能主动深入了解业务，适应业务变化；有良好的个人表达和组织沟通能力，推进项目开展。

岗位职责： 1. 大数据组件开发。 2. 基于Python 体系下的数据质量引擎开发； 3. 基于Java及Linkis开源框架的质量引擎开发； 4. 大数据资产应用的开发、部署、调优； 5. 数据稽核引擎开发，数据共享交换能力对接。 任职要求： 1. 本科及以上学历，计算机相关专业； 2. 3年以上互联网或软件行业工作经验，熟悉Linux环境；熟悉Linux和Python开发； 3. 熟悉Spring,Spring boot,Spring Cloud等框架、熟悉Eclipse或IntelliJ IDEA开发工具等使用 以下满足其一即可： 4. 熟悉Hadoop,MapReduce,Hbase,Flink等大数据部署、运维、开发； 5. 熟悉数据治理理论概念、架构，有元数据、数据质量、数据标准、主数据等相关数据治理经验； 6. 有分布式相关项目（分布式存储/分布式计算/高性能并行计算/分布式cache）经验； 7. 对数据库的架构、扩展特点非常熟悉，能熟练进行SQL优化、集群部署、数据同步等。

职位职责： 1、负责字节跳动国际支付的数据流和相关数据服务； 2、面向超大规模数据问题，每天处理千亿增量的用户数据； 3、负责流式数据的实时传递，清洗，转换，计算，并对外提供查询服务； 4、参与数据治理工作，提升数据易用性及数据质量； 5、理解并合理抽象业务需求，发挥数据价值，与业务团队紧密合作。 职位要求： 1、熟悉Linux操作系统及开发环境； 2、扎实的计算机软件基础知识：数据结构，操作系统等; 3、熟悉 C/C++、Java、Python 等任意一门编程语言； 4、对数据敏感，认真细致，善于从数据中发现疑点； 具备以下条件者优先： 1、研究过开源项目； 2、参加过 ACM 或者其他类型的软件开发大赛； 3、熟悉大数据处理工具/框架中的一项或多项，包括但不限于Hadoop, Mapreduce, Hive, Storm, Spark, Druid, kafka, hbase，ES等。

岗位职责: - 负责AI大模型相关算法的设计与实现 - 利用算法改善微博用户产品体验 岗位要求: - 2年以上工作经验，有大型互联网行业从业经验优佳； - 机器学习、计算机、数学、统计学等相关专业本科及以上学历； - 在机器学习、数据挖掘、信息检索、推荐系统、计算广告等一个或多个领域有扎实的理论知识 - 熟练掌握常用深度学习框架，如Pytorch、TensorFlow等； - 熟悉Python/C++/Java中的一种或多种编程语言 - 熟悉Linux/Unix系统； - 熟悉Hadoop/Spark/Hive - 良好的逻辑思维能力，在复杂业务场景下能够分解和抽象问题，提供优秀、完整、可行的解决方案； - 工作认真，细心，有条理；积极性高，求知欲强；具有较强的沟通能力及团队合作精神 具备以下条件优先考虑: - 良好的英文文档及论文的阅读能力 - 气象专业或者熟悉天气大模型及原理，如Graphcast，华为盘古等