-
职位描述: 1、基础组件、基础设施的二次开发、L2支撑、交付; 2、围绕大数据组件服务平台开发,围绕组件进行串联部署、功能组合/抽象,给上层数据开发人员提供组件级平台服务 3、对Hadoop、Hbase、Hive、Flink等组件/系统进行持续研究、开发和交付,满足部署、集成、扩展、监控、高可用等生产需求; 4、根据理论与技术研究、产品对标和相关需求,持续产品规划与迭代; 5、根据现场信息搜集,分析、定位和解决现场问题,承担L3支撑 职位要求: 1、计算机相关专业,本科及以上学历; 2、3年及以上hadoop生态的基础设施开发经验,熟悉国内主流大数据平台; 3、熟练掌握Java,熟悉Linux开发环境及常用工具; 4、以下优先: (1)985/211(必备条件,不符合请勿投递,谢谢) (2)深入阅读过相关组件内核源代码 (3)深入理解分布式资源调度系统技术及原理 (4)深入理解linux系统能够独立排查及解决操作系统层问题 (5)有数据仓库经验者 (6)有运维经历者 (7)有C/C++开发经验 (8)有论文阅读、理论研究爱好与能力
-
1.熟悉Hadoop,有过大数据开发经验 2.熟悉大数据开源技术,对Spark,flink,Hive, Hdfs等分布式计算存储引擎有实战经验 3.**本科,双证齐全
-
岗位职责: 1.负责反欺诈系统大数据相关架构的搭建 2.参与集群的部署及搭建,监控与优化 3.参与新技术的调研及预研工作 4.参与当前大数据架构的业务功能开发及优化 技能要求: 1.精通hadoop部署框架及原理,并有落地的部署场景经验 2.熟练掌握flink或者spark之一的应用,并有落地的部署及开发场景经验 3.熟练掌握java开发语言,python脚本或者shell脚本 4.熟练掌握linux的基本知识 5.掌握elasticsearch以及实时数据湖技术的优先
-
岗位职责: 1、负责公司各产品线服务可靠、稳定、高效运行,提供K8S,Hadoop技术支持。 2、负责运维平台建设 通过技术手段提升工作效率; 3、负责公司各类基础设施监控、自动化、监控体系的持续建设与完善; 4、参与公司各类产品自动化实现,满足严格的质量与效率要求; 岗位要求: 1、***大学本科(计算机专业,获得***书、***书) 2、能熟练编写 Shell或Python脚本,有go/python/shell编程能力者优先 熟悉devops理念 3、熟悉自动化运维工具(saltstack/ansible/Jenkins)的原理及使用,有二次开发经验优先 4、具备kubernetes、docker、HDFS、spark、Hive运维经验者优先。 5、具备一定JAVA/GO开发经验优先。 6、具备良好的学习能力,能够快速掌握一门新的技术。
-
工作内容: 1.负责hadoop基础技术规划,编制相关规范文档; 2.负责Hadoop数据应用相关的数据存储、查询、计算、元数据管理的架构设计与实现; 3.负责hadoop的实际规划建设,包括环境与框架的规划搭建及部分核心编码工作; 4.负责hadoop相关技术发展方向的预研; 5.独立负责具体功能开发与实现、性能优化,保证系统健壮稳定及临时性数据处理工作的支持; 6.负责数据应用相关的数据存储、查询、计算、元数据管理等方面的架构设计。 岗位要求: 1.1年以上大数据开发经验,熟悉分布式的设计与应用。 2.熟悉hadoop大数据平台框架,包括不限于hadoop、hive、hbase等大数据生态平台组件的部署升级与调优。 3.熟悉hadoop、spark、flink、hbease、es等相关计算机存储框架的底层理论,并能应用至实际开发当中。 4.熟悉至少一款ETL工具,例如kettle、logstash等。 5.熟悉关系型及非关系型数据库的使用及优化,包括但不限于Oracle、PG、hive、clickhouse等。 6.熟悉各类大数据处理组件,sqoop、flume、kafka、azkaban等。 7.根据计划完成模块的编码开发工作,保证开发质量。 8.有良好的沟通能力,积极为项目建设提供建设性意见。 9.本科及以上学历,计算机相关专业,有银行工作、财务会计、管理会计业务经验优先。
-
1. 熟悉大数据云平台经验,再加Java开发 Java基础扎实,熟练掌握多线程编程,熟悉JVM,以及常规性能优化。 2. 熟悉spring,springboot,springcloud,nacos,mybatis,mybatis-plus等常⻅开源框架。 3. 熟悉redis,RocketMQ等常见中间件。 4. 熟练使用MySQL数据库,良好的数据库设计,SQL编写,索引性能分析能力。 5. 熟练掌握linux系统的使用。 6. 熟练掌握EKL系统的使用。 7. 有良好的逻辑思维能力,沟通能力,有责任心能独立完成需求。 1、本3专4,计算机/互联网/通信相关专业 2.熟悉java开发常用框架组件,能熟练运用到具体项目中 3.配合项目完成研发计划,有独立完成需求的能力
-
岗位职责: (1)负责兴业银行大数据应用服务的研发工作,进行数据服务方案设计、开发及上线后运营维护; (2)根据应用情况和研究情况进行提炼优化,形成稳定可复用的数据服务产品。 岗位要求: (1)精通Python/Scala/Java等至少一种编程语言,能够针对大数据环境进行高效编程; (2)熟练使用Hadoop生态体系中的核心组件,能够进行集群部署、配置和优化;掌握Mapreduce、Spark批处理框架;掌握Storm/Flink/Spark Streaming等至少一个流处理框架,能够实现实时或准实时数据流处理。 工作地点:上海
-
岗位职责: (1)参与制定兴业银行系统架构整体规划; (2)参与兴业银行系统架构管控,审核系统架构合规性; (3)负责兴业银行系统技术可行性研究、架构设计、整体实施方案设计等工作。 岗位要求: (1)具备应用架构、数据架构、技术架构、安全架构设计能力中的一个或多个; (2)具备宏观架构设计思维,具有主导大型复杂系统架构设计和开发编码经验。了解银行业务概貌,具备银行大型系统开发经验者优先; (3)具备良好的技术前瞻性研究能力,具备优秀的技术方案设计能力和文档能力,能独立完成重要信息系统整体方案的设计; (4)精通Java或C语言,熟悉Hadoop、MySQL、TDSQL、OpenGauss等一种或多种。 工作地点:上海、福州、成都
-
职位职责: 1、负责字节跳动国际支付的数据流和相关数据服务; 2、面向超大规模数据问题,每天处理千亿增量的用户数据; 3、负责流式数据的实时传递,清洗,转换,计算,并对外提供查询服务; 4、参与数据治理工作,提升数据易用性及数据质量; 5、理解并合理抽象业务需求,发挥数据价值,与业务团队紧密合作。 职位要求: 1、熟悉Linux操作系统及开发环境; 2、扎实的计算机软件基础知识:数据结构,操作系统等; 3、熟悉 C/C++、Java、Python 等任意一门编程语言; 4、对数据敏感,认真细致,善于从数据中发现疑点; 具备以下条件者优先: 1、研究过开源项目; 2、参加过 ACM 或者其他类型的软件开发大赛; 3、熟悉大数据处理工具/框架中的一项或多项,包括但不限于Hadoop, Mapreduce, Hive, Storm, Spark, Druid, kafka, hbase,ES等。
-
职位职责: 1、负责飞书的数据分析相关工作,有机会能够独立负责关键业务模块,拥有广阔的发展空间; 2、基于对企业办公和协同类工具产品的深刻理解,通过监控关键数据和深入分析,参与业务决策;发现潜在问题与机遇,并提供可靠的数据支持,为产品决策提供坚实基础; 3、全面分析各项影响产品体验提升与用户增长的因素,针对功能体验设计数据增长模型,设计指标量化指引优化方向; 4、有机会参与到飞书商业化模型的设计中,包括但不限于成本拆分、定价模型、售卖策略等等。 职位要求: 1、本科及以上学历,理工科专业背景优先考虑; 2、具备数据分析、数据科学、商业分析等相关领域工作经验,熟练掌握数理统计方法; 3、熟练使用SQL语句,熟悉大数据相关技术应用(如Hadoop、Hive等),擅长Python编程者加分; 4、具备出色的商业敏感度和逻辑推理能力,能够对复杂问题进行框架性思考和系统化分解; 5、具备高度的责任心和自驱力,有能力从业务全局出发,独立挖掘潜在问题,拥有良好的沟通和团队协作能力。
-
岗位职责: - 负责AI大模型相关算法的设计与实现 - 利用算法改善微博用户产品体验 岗位要求: - 2年以上工作经验,有大型互联网行业从业经验优佳; - 机器学习、计算机、数学、统计学等相关专业本科及以上学历; - 在机器学习、数据挖掘、信息检索、推荐系统、计算广告等一个或多个领域有扎实的理论知识 - 熟练掌握常用深度学习框架,如Pytorch、TensorFlow等; - 熟悉Python/C++/Java中的一种或多种编程语言 - 熟悉Linux/Unix系统; - 熟悉Hadoop/Spark/Hive - 良好的逻辑思维能力,在复杂业务场景下能够分解和抽象问题,提供优秀、完整、可行的解决方案; - 工作认真,细心,有条理;积极性高,求知欲强;具有较强的沟通能力及团队合作精神 具备以下条件优先考虑: - 良好的英文文档及论文的阅读能力 - 气象专业或者熟悉天气大模型及原理,如Graphcast,华为盘古等
-
岗位职责: 1、负责系统需求分析与设计,完成核心代码编写,接口规范制定,架构设计,有很强的质量和规范意识 2、解决项目中技术难题;参与新技术学习与研究,向其他开发人员提供技术支持 技能要求 1、计算机相关专业,大学本科以上学历,6年以上JAVA开发经验; 2、熟练使用Spring、SpringMVC、SpringBoot、SpringCloud、dubbo、ELK等主流技术框架; 3、了解Jenkins、docker、K8s等工具进行容器化部署; 4、熟练操作Linux,熟悉Git、SVN等版本管理工具; 5、熟练掌握tomcat、nginx、Redis、MQ等常用中间件,并能够对其进行优化; 6、了解Javascript、CSS、Html、Html5、Ajax、JQuery、VUE、React等前台技术; 7、熟练使用MySQL、Oracle等数据库,熟练编写SQL语句及sql优化; 8、熟悉软件设计流程和软件工程规范,具备良好而规范的设计、编写技术文档的能力; 9、对技术有激情,喜欢钻研,能快速接受和掌握新技术,有较强的独立、主动的学习能力,良好的沟通表达能力和团队协作能力; 10、有大数据方面工作经验如hadoop、storm、spark、hbase等技术的优先;
-
职位职责: 1、参与用户增长算法平台的设计与研发; 2、负责分布式大数据系统开发;高性能服务框架设计与开发 3、参与项目的架构设计、评审、技术攻坚及优化 职位要求: 1、精通java/scala语言中至少一种; 2、熟悉分布式、缓存、消息等机制; 3、扎实的计算机基础,对技术有热情,愿意不断尝试新技术和业务挑战; 4、熟悉大数据常用开源框架,例如hadoop/hbase/flink/spark/clickhouse等; 5、有实时流计算、分布式大数据系统开发经验者优先。
-
岗位职责: -持续构建完善高可用高效高性能的推荐系统,对推荐效果提升提供强有力支撑; 岗位要求: -计算机及相关专业本科及以上学历,具有扎实的代码功底,熟悉常用的算法和数据结构 -精通Java语言和框架,熟悉了解Python语言,具有良好的编程习惯,熟悉Linux开发环境,掌握设计模式 -熟悉Hadoop/Hive/HBase/Spark/Flink/ES等计算框架,有实际应用和开发经验; -掌握多线程及高性能的设计编码及性能调优,有高并发应用开发经验,对服务治理体系有充分的理解和应用 -具备推荐、广告、搜索开发经验者优先;
-
任职要求: 1、精通Unix/Linux操作系统下Java或Scala开发,有良好的编码习惯,有扎实的计算机理论基础; 2、熟练掌握大数据处理技术栈,有丰富的Hadoop/Spark/SparkStreaming/Storm/Flink的实际项目使用经验; 3、熟练掌握HDFS/HBase/Hive/S3等分布式大数据存储技术。 岗位职责: 1、4年以上大数据项目经验;具有实际的代码编写经验; 2、有电信大数据平台经验者优先; 3、热衷于追求技术完美与创新。