数据的价值，决定了存储系统的价值。面对爆炸性增长的非结构化数据，以及复杂多变的业务需求，我们需要创造性的思维，从零开始思考和设计新一代的分布式文件系统。 在 SmartX 你将有机会与最优秀的存储工程师一起工作，构建新一代的分布式文件系统，使得应用系统随时随地都可以安全且高效的存储和访问数据。 分布式文件系统研发工程师 - 北京 - 社招/校招 岗位职责： - 参与设计和开发新一代分布式文件系统，通过创新思维解决元数据管理、数据管理等关键领域的技术难题； - 撰写细致的设计文档，并对其他同事的代码进行审查； - 与测试、产品、售前和售后部门密切配合，不断提升产品质量和竞争力。 岗位要求： - 热爱编程，熟练掌握 Rust/ C/ C++； - 熟悉 CIFS、Samba、NFS、S3 等存储协议； - 具备多线程程序和性能调优的经验； - 熟练掌握 Linux 操作系统的使用； - 有存储、操作系统等相关项目的经验； - 具备良好的团队协作和沟通能力。 在 SmartX 工作，你将拥有： - 全新 MacBook 办公设备（或 Thinkpad 自选） + 大屏显示器 - 弹性工作，上下班不打卡，周末双休 - 全额五险一金＋年度免费体检 + 商业医疗保险 - 餐补 + 团建基金 + 零食饮料 + 日常团队活动（1024程序员节，冬至一起煮饺子，端午一起包粽子等等） - 12 天带薪年假 + 12 天带薪病假 - 扁平管理，没有老大x总，只有助你成长和答疑解惑的伙伴和技术大牛带你飞

关于我们： 1. MetaGPT 已在 GitHub 上获得 4w+ Stars，是全球领先的多智能体框架； 2. 团队拥有世界尖端的AI落地经验，获 NeurIPS / KDDCup 多个世界**，工作发表于 TPAMI、ICLR、KDD、CVPR、AAAI 等顶会顶刊； 3. 我们致力于通过多智能体实现自然语言编程，希望你具有 Critical Thinking，热爱解决难题； 4. 你将与一群充满热情的小伙伴一起，深入研究 LLM Agent，直面前沿难题，贡献开源、撰写论文，高速提升； 岗位职责： 1. 参与公司通用的中台技术体系的构建； 2. 参与后台基础建设工作，包括新技术的调研、基础工具的设计与开发； 3. 负责高质量的设计和编码，承担有挑战的技术攻坚； 任职要求： 1. 1-3年后端开发经验，计算机/软件工程等相关专业**本科以上学历； 2. 计算机基础扎实，有良好的数据结构与算法功底，有良好的代码设计能力和编码规范； 3. 熟练掌握Linux环境编程，熟悉Python，有python tornado、flask等后端技术者优先； 4. 能完成后端架构、接口的实现与设计，对ceph/hdfs等分布式文件系统、kubernetes等容器生态链、分布式服务、高可用系统等有接触或者经验的优先； 5. 责任心强，热爱技术，有良好的协作能力和逻辑思维，善于分析和闭环解决问题； 6. 有智能体的规划、工具、指令遵循、RAG、经验、需求理解、环境、人机交互、多智能体协同、构建数据、benchmark，优化效果等认知； 7. 加分点：Python 能力、开源贡献、LLM 微调、RL 经历、相关论文。

（一）数据采集与整合 1. 设计和开发数据采集系统，从多种数据源（如网页、数据库、文件系统、传感器等）获取数据，确保数据的准确性、完整性和及时性，以满足大模型的训练和优化需求。 2. 针对不同结构（结构化、半结构化和非结构化）的数据制定相应的采集策略，能够处理海量数据的采集任务。 3. 负责将采集到的各类数据进行整合，建立统一的数据存储和管理体系，消除数据孤岛现象，保障数据的一致性。 （二）数据预处理与清洗 1. 对采集到的原始数据进行预处理，包括但不限于数据格式转换、编码处理、数据归一化等操作，以便于后续的数据处理和模型训练。 2. 开发数据清洗程序，识别和处理数据中的噪声、缺失值、异常值等问题，提高数据质量，为大模型提供高质量的输入数据。 3. 建立数据质量监控机制，持续跟踪数据质量指标，及时发现并解决数据质量下降的问题。 （三）数据标注与管理 1. 对于需要人工标注的数据，设计数据标注方案并组织标注工作，确保标注的准确性和一致性。 2. 建立数据标注平台或工具，提高标注效率，同时方便对标注数据进行管理、审核和版本控制。 3. 管理标注数据的存储和分发，与大模型开发团队紧密合作，确保标注数据能够及时、准确地用于模型训练和评估。 （四）数据存储与优化 1. 设计和优化大模型的数据存储架构，根据数据的特点（如数据量、访问频率、数据类型等）选择合适的存储技术（如关系型数据库、非关系型数据库、分布式文件系统等）。 2. 负责数据存储系统的性能优化，包括数据库索引优化、存储容量规划、数据读写性能提升等方面，以满足大模型对数据快速访问的需求。 3. 确保数据存储的安全性和可靠性，制定数据备份、恢复和灾难应对策略，防止数据丢失或损坏。 （五）数据管道构建与维护 1. 构建高效的数据管道（Data Pipeline），实现数据从采集到存储、预处理、标注再到模型训练的自动化流程，提高数据流转效率。 2. 监控数据管道的运行状态，及时处理管道中的故障和堵塞问题，确保数据的稳定流动。 3. 对数据管道进行持续优化，根据业务需求和数据规模的变化，调整管道的架构和参数，提高数据处理的效率和可扩展性。 （六）与团队协作 1. 与大模型算法开发团队、前端开发团队、测试团队等密切合作，理解各方对数据的需求，提供数据支持并协同解决项目中的数据相关问题。 2. 参与数据工程团队内部的技术交流和分享活动，促进团队整体技术水平的提升

工作职责： 1、参与区块链操作系统的设计和核心模块开发； 2、参考Linux内核，构造和设计高性能区块链操作系统； 3、研发树轮链，研究并发执行的链资源调度系统； 4、研究链架构和执行层，并实施开发； 5、进行系统调试、性能分析和问题排查，确保系统稳定性和高性能； 6、与跨职能团队合作，推动项目的实施和交付。 技能要求： 1、重点院校本科或硕士学历。5年以上相关工作经验，具备Linux系统开发与优化的实践经验； 2、深入理解Linux操作系统的原理及内核架构，精通Linux内核裁剪和定制开发； 3、深入理解分布式操作系统原理和实际项目经验； 4、精通文件系统开发，熟悉多种文件系统类型，尤其是虚拟文件系统和分布式文件系统； 5、掌握数据一致性协议、分布式缓存、数据复制与分片技术； 6、有系统性能分析与优化经验，能够通过调整文件系统参数、内核配置等手段提升节点存储引擎的整体性能； 7、精通C、C++、Rust等编程语言，具备良好的编程习惯，能够编写高效、稳定的系统代码； 8、熟练使用Linux开发调试工具链，如GDB、Perf、strace、Valgrind等，能够快速定位和解决性能瓶颈和系统错误； 9、熟练使用Git、CI/CD工具链，具备高效的代码管理和持续集成能力； 10、了解星际文件系统（IPFS）或其他分布式文件系统，有相关开发经验者优先； 11、对区块链技术有深入了解，熟悉主流区块链平台（如ETH、Hyperledger Fabric）及其存储机制者优先； 12、具备良好的团队合作精神，拥有较强的学习能力，问题解决能力和抗压能力。

京东文件存储团队服务于京东商城各个业务方，主要产品有：京东图片系统，对象存储系统，和分布式文件系统(chubaofs论文已经被sigmod2019大会接受，并进入cncf基金会),诚邀架构师，软件开发工程师加盟，与京东存储专家一道，自研业界领先的存储系统。薪酬不限  1.熟悉分布式存储理论，对分布式存储有浓厚的兴趣  2.熟悉go,c编程  3.熟悉分布式存储软件优先(hdfs,ceph等) 

校招岗位描述： 如果你对基础技术感兴趣，你可以参与基础软件的设计、开发和维护，如分布式文件系统、缓存系统、Key/Value存储系统、数据库、Linux操作系统等； 如果你热衷于高性能分布式技术，你可以参与***规模的分布式服务端程序的系统设计，为阿里巴巴的产品提供强有力的后台支持，在海量的网络访问和数据处理中，设计并设施最强大的解决方案； 如果你喜欢研究搜索技术，你可以参与搜索引擎各个功能模块的设计和实现，构建高可靠性、高可用性、高可扩展性的体系结构，满足日趋复杂的业务需求； 如果你对电子商务产品技术感兴趣，你可以参与产品的开发和维护，完成从需求到设计、开发和上线等整个项目周期内的工作； 如果你热衷于客户端开发，你可以参与为用户提供丰富且有价值的桌面或无线软件产品。 岗位要求： 或许，你来自计算机专业，机械专业，甚至可能是生物专业； 但是，你酷爱着计算机以及互联网技术，热衷于解决挑战性的问题； 或许，你痴迷于数据结构和算法，热衷于ACM，常常为看到“accept”而兴奋的手足舞蹈； 或许，你熟悉Unix/Linux/Win32环境下编程，并有相关开发经验，熟练使用调试工具，并熟悉某种脚本语言； 或许，你熟悉网络编程和多线程编程，对TCP/IP，HTTP等网络协议有很深的理解； 或许，你享受底层技术，在kernel的源代码中纵横驰骋； 或许，你并不熟悉C，C++，但是你不畏挑战，喜欢钻研，能够用你亮眼的成果证明自己超强的学习能力； 或许，你参加过大学生数学建模竞赛，“挑战杯”，机器人足球比赛等； 或许，你在学校的时候作为骨干参与学生网站的建设和开发； 但是，这些都是我们想要的。

校招岗位描述： 如果你想了解JAVA开发在阿里巴巴互联网生态系统中无与伦比的应用广度与深度； 如果你对基础技术感兴趣，你可以参与基础软件的设计、开发和维护，如分布式文件系统、缓存系统、Key/Value存储系统、数据库、Linux操作系统和Java优化等； 如果你热衷于高性能分布式技术，你可以参与高性能分布式服务端程序的系统设计，为阿里巴巴的产品提供强有力的后台支持，在海量的网络访问和数据处理中，设计并设施最强大的解决方案； 如果你喜欢研究搜索技术，你可以参与搜索引擎各个功能模块的设计和实现，构建高可靠性、高可用性、高可扩展性的体系结构，满足日趋复杂的业务需求； 如果你对电子商务产品技术感兴趣，你可以参与产品的开发和维护，完成从需求到设计、开发和上线等整个项目周期内的工作； 如果你对数据敏感，你可以参与海量数据处理和开发，通过sql、pl/sql、java进行etl程序开发，满足商业上对数据的开发需求； 如果你热衷于客户端开发，你可以参与为用户提供丰富而有价值的桌面或无线软件产品。

具体职责包括但不限于：   1、参与基础软件的设计、开发和维护，如分布式文件系统、缓存系统、Key/Value存储系统、数据库、Linux操作系统和Java优化等； 2、参与高性能分布式服务端程序的系统设计，为阿里巴巴的产品提供强有力的后台支持，在海量的网络访问和数据处理中，设计并设施最强大的解决方案； 3、参与搜索引擎各个功能模块的设计和实现，构建高可靠性、高可用性、高可扩展性的体系结构，满足日趋复杂的业务需求； 4、参与产品的开发和维护，完成从需求到设计、开发和上线等整个项目周期内的工作； 5、参与海量数据处理和开发，通过sql、pl/sql、java进行etl程序开发，满足商业上对数据的开发需求； 6、参与项目为用户提供丰富而有价值的桌面或无线软件产品。 【必备项】 1、热爱编程，熟悉掌握但不限于JAVA/C/C++/PHP/NET等编程语言中的一种或几种，有良好的编程习惯； 2、熟悉网络编程和多线程编程，对TCP/IP，HTTP等网络协议有一定的理解，并了解XML和HTML语言； 3、熟悉Unix/Linux/Win32环境下编程，熟练使用调试工具，并熟悉Perl，Python，shell等脚本语言； 4、热衷于数据库技术，能够熟练编写SQL脚本，参与过MySql或Oracle应用开发项目； 5、对数据结构、算法有一定了解； 6、学习能力强，对新事物保有好奇心，有良好的沟通能力和团队协同能力，善于独立思考并反思总结。 【加分项】 1、有互联网公司实习经验，参与过互联网软件等相关产品； 2、热衷于ACM，在校期间参与过大学生数学建模竞赛，“挑战杯”，机器人足球比赛等，或作为骨干参与过学生网站的建设和开发； 3、在相关领域国际会议、期刊发表论文，或相关学术会议组织的权威比赛中获奖。

职位责任： 1.负责对外驻场运维项目客户侧云平台和虚拟化平台日常运维工作，参与基础设施（操作系统、存储、云计算等）规划设计与建设工作； 2.负责提供操作系统、容器技术支持，负责日常运行维护、故障修复、性能调优等工作； 3.组织基础设施（操作系统、存储、云计算等）、数据库和中间件相关项目的项目计划、招标与实施。 任职要求： 1.电子计算机、软件开发、网络工程、电子信息技术等相关专业； 2.具有华为、阿里、腾讯等IAAS和PAAS云平台运维工作经验者优先； 3.具有Openstack、linux、hadoop、docker、分布式文件系统等技术运维经验者优先； 4.至少具备：操作系统（中标麒麟Linux、银河麒麟Linux、RedhatLinux、CentosLinux、SUSELinux等）、虚拟化、容器中某一专业领域相关知识，具备独立制定维护方案和独立问题排查分析能力； 5.具备良好的团队精神和沟通能力，能够承担较大的工作压力，工作细致耐心，能接受日常运行值班安排。

1、负责大数据平台的架构设计、环境和框架的搭建以及部分核心编码工作； 2、参与业务需求调研，根据需求及行业特点设计大数据解决方案并跟进具体实施项目，对业务需求进行分析建模并持续进行优化，包括但不限于推荐、排序、用户画像等； 3、负责大数据相关技术发展方向的预研，规划公司级数据平台，架构实时流与离线数据计算平台，主导数据系统需求对接、各信息化系统数据对接、软件供应商管理工作； 4、负责数据仓库建设，基于数据驱动构建企业级数据模型，根据架构设计进行各层数据模型开发； 5、完成领导交办的其他工作事项。 任职资格： 1、本科及以上学历，计算机相关专业，5年以上软件开发经验，3年以上大数据项目经验； 2、深刻理解大数据处理实时流计算、分布式计算、分布式文件系统、分布式存储等相关技术和实现方法，有架构和设计实践经验，精通Hadoop、Hive、Spark、Kafka、Elasticsearch、HBase、Storm、Sqoop、Zookeeper、Flume等大数据技术； 3、精通Java、Python、Scala等一种或多种编程语言，熟悉Linux、Shell、Kafka、Oracle、Mysql、Redis等相关技术； 4、熟悉数据仓库、大数据平台及数据挖掘架构设计经验； 5、具备优秀的团队意识和沟通能力，学习能力和主动性强，具有钻研精神，充满激情，乐于接受挑战。

岗位职责 1、参与公司核心功能的分析设计与技术实现工作 2、负责核心模块的开发，能够按时、按质完成系统功能开发任务 3、对系统在运行中出现的问题能够快速定位并有效解决 4、了解技术发展动向，不断学习和提高自己的技术水平，并有选择的进行运用 5、完成上级领导交办的其他工作 任职要求 1、计算机相关专业本科及以上学历,5年以上JAVA软件开发经验 2、熟练使用Spring Cloud微服务架构开发 3、java基础扎实，了解多线程，熟悉Spring 、SpringMVC、MyBatis、Vue 4、熟悉Linux、Docker、MQ 等技术 5、熟练运用 Mysql、sqlServer , redis 等，精通SQL编写以及优化 6、熟悉微服务架构，有微服务架构搭建与运维经验； 7、熟悉Linux系统常规操作； 8、熟悉Docker环境搭建与运维； 9、熟悉分布式文件系统搭建与运维； 10、熟悉服务器集群环境搭建； 11、有RabbitMQ、Raddis、Nacos、Nexus、Jenkins等实战工作经验等； 12、熟悉面向对象编程，具有良好的编程风格；了解软件开发流程，熟悉MVC模式；并有在MVC模式下进行中大型web开发经验。 13、具备较强的团队精神和合作精神，对工作有热情，能够在一定压力下工作

岗位职责 1、参与公司核心功能的分析设计与技术实现工作 2、负责核心模块的开发，能够按时、按质完成系统功能开发任务 3、对系统在运行中出现的问题能够快速定位并有效解决 4、了解技术发展动向，不断学习和提高自己的技术水平，并有选择的进行运用 5、完成上级领导交办的其他工作 任职要求 1、计算机相关专业本科及以上学历,5年以上JAVA软件开发经验 2、熟练使用Spring Cloud微服务架构开发 3、java基础扎实，了解多线程，熟悉Spring 、SpringMVC、MyBatis、Vue 4、熟悉Linux、Docker、MQ 等技术 5、熟练运用 Mysql、sqlServer , redis 等，精通SQL编写以及优化 6、熟悉微服务架构，有微服务架构搭建与运维经验； 7、熟悉Linux系统常规操作； 8、熟悉Docker环境搭建与运维； 9、熟悉分布式文件系统搭建与运维； 10、熟悉服务器集群环境搭建； 11、有RabbitMQ、Raddis、Nacos、Nexus、Jenkins等实战工作经验等； 12、熟悉面向对象编程，具有良好的编程风格；了解软件开发流程，熟悉MVC模式；并有在MVC模式下进行中大型web开发经验。 13、具备较强的团队精神和合作精神，对工作有热情，能够在一定压力下工作

职位描述： 1.参与设计和实现高性能分布式文件系统及其存储引擎等工作，支撑自动驾驶、AI训练平台等业务； 2. 参与开发对象存储网关、并行数据加速等系统，实现对象存储和高性能文件系统间数据高效流转和管理； 3. 吸收存储业界的新理论和成果，结合最新的软/硬件技术，如GPU Direct Storage、Burst Buffer等，灵活运用至业务实现降本增效。 职位要求： 1.本科及以上学历，5年以上系统软件，如分布式存储系统、数据库系统、大数据等大规模系统软件开发经验； 2. 熟练掌握系统编程和C/C++、Golang、Shell等编程语言； 3. 对存储系统、文件系统等有深入理解，有Ceph、Lustre、BeeGFS、Minio等存储系统经验更佳； 4. 有强烈的求知欲和学习能力，喜欢挑战性的技术工作； 5. 具备良好的沟通能力，高度的责任心和团队精神。 Base 北京理想汽车研发总部/上海星创科技中心

1.参与设计和实现高性能分布式文件系统及其存储引擎等工作，支撑自动驾驶、AI训练平台等业务； 2. 参与开发对象存储网关、并行数据加速等系统，实现对象存储和高性能文件系统间数据高效流转和管理； 3. 吸收存储业界的新理论和成果，结合最新的软/硬件技术，如GPU Direct Storage、Burst Buffer等，灵活运用至业务实现降本增效。 职位要求： 1.本科及以上学历，5年以上系统软件，如分布式存储系统、数据库系统、大数据等大规模系统软件开发经验； 2. 熟练掌握系统编程和C/C++、Golang、Shell等编程语言； 3. 对存储系统、文件系统等有深入理解，有Ceph、Lustre、BeeGFS、Minio等存储系统经验更佳； 4. 有强烈的求知欲和学习能力，喜欢挑战性的技术工作； 5. 具备良好的沟通能力，高度的责任心和团队精神。 Base 北京理想汽车研发总部/上海星创科技中心

● 岗位职责 ○ 结合隐私计算、访问控制、匿名化、大数据等多种技术，打造蚂蚁多源数据融合平台，让数据安全、合规、高效的流动，充分释放数据价值。 ● 职位要求 ○ 熟练掌握JAVA编程语言和相关主流框架，并了解其实现原理。 ○ 具备扎实的计算机专业知识基础，包括算法和数据结构、操作系统、计算机网络、数据库等； ○ 熟悉常用设计模式，具备复杂系统的抽象设计能力，对代码质量有追求。 ○ 良好的学习和沟通能力，有责任心，对技术有热情，有钻研精神； ○ 熟悉大数据技术栈优先，对大数据计算引擎（Hadoop/Spark/Flink等）、分布式文件系统、大数据平台与应用等有较好的理解。 ○ 熟悉隐私保护/隐私计算技术优先，如数据访问控制、匿名化、差分隐私、TEE等技术。 ○ 有隐私计算平台开发经验优先。