职位职责： 1、负责保护公司电商平台的数据安全，防范和打击爬虫及其他恶意行为，研究和掌握最新的反爬虫技术，制定和实施有效的反爬虫策略； 2、深入了解上下游业务形态，可独立发起治理专项，快速定位问题并形成落地策略及效果评估闭环； 3、分析和调查电商平台上的异常流量和可疑活动，从海量设备、行为数据中发掘有价值的信息； 4、可协助进行建模工作，如特征分析、数据可视化呈现等，为团队决策提供数据支持； 5、与产研团队高效合作，优化技术架构和端上安全能力，建立端管云三位一体的反爬体系，量化防控效果，驱动反爬能力的不断提高。 职位要求： 1、计算机、信息安全、统计、数学等相关专业； 2、3年相关反爬相关经验，具备网络安全、数据保护和风险管理方面的专业知识，有电商经验者优先； 3、熟练掌握SQL、Python等编程语言，具有扎实的数据分析能力及学习能力； 4、深入了解常见的爬虫技术和工具，具有丰富的反爬虫经验，熟悉 Web 安全、网络协议、漏洞扫描等相关技术； 5、具有较强的问题解决能力，能够快速分析和处理安全事件，具备良好的团队合作精神和沟通能力。

岗位职责： 1. 负责原有采集程序维护 2. 针对新的数据需求进行平**控调研以及采集策略制定 3. 能够完善现有采集系统，有进行数据可视化呈现的经验 4. 能够不断精进应对风控的采集技能。 岗位要求： 1. 熟悉python,js编程，熟悉安卓、ios开发流程更佳。 2. 有过硬的web端逆向能力，有过市面上常见的验证码对抗经验。 3. 掌握常见的python爬虫框架如scrapy等 4. 掌握常见的数据库（redis，mysql，hive，impala等） 3. 有国内电商相关数据采集经验，熟悉国内各电商平台业务逻辑。

岗位职责： - 根据项目需求，负责爬虫调研、评估、开发及维护等全流程工作。 - 参与爬虫系统的架构设计、开发与优化。 - 负责攻克反爬风控手段。 - 实时监控爬虫状态，及时处理爬虫异常。 岗位要求： - 本科及以上学历，3年以上工作经验。 - 熟练掌握scrapy，selenium等相关框架，python及爬虫基础扎实。 - 熟悉各类常见的风控措施，熟悉js逆向，app逆向加分，熟悉web前端知识，能解决常见反爬问题。 - 有良好的沟通能力，及较强的责任心。 - 过往工作经历有电商、在线旅游行业爬虫经验者优先。

1、负责爬取HTML页面所需数据，并对数据进行清洗、解析、归档、输出等； 2、负责设计和开发分布式的网络爬虫，数据的采集与爬取、调度、监控、自动化运行等； 3、负责实时监控爬虫的进度和警报反馈，提升爬虫系统稳定性、可扩展性。  4、负责js渲染抓取，反爬虫策略研究，验证码识别等采集支撑服务建设；  5、参与公司业务平台的数据的挖掘和分析，协助进行产品改进。 任职资格 1. 本科以上，计算机或相关专业毕业，扎实的Python基础，熟悉多线程编程环境，熟悉常见开源框架； 2、熟悉基于正则表达式、XPath、CssSelector、beautifulsoup等网页信息解析技术； 3、熟悉Scrapy、feapder等主流爬虫框架框架，能够解决封账号、封IP、验证码、网页限制爬取等问题，且有实际经验； 4、熟悉常见的反爬机制，并对反爬具有一定的应对措施策略且有一定研究，如协议破解、模拟点击等；  5、熟悉代理IP池、Headers认证和Cookie等；

工作职责： 1、负责数据爬取采集、数据ETL加工处理; 2、负责进行前沿技术研究，难点攻关； 3、实时监控爬虫任务的执行状况，及时处理异常情况 任职要求： 1、**本科及以上学历，1年以上爬虫开发经验； 2、熟练掌握python，掌握selenium、scrapy等相关框架，爬虫基础扎实； 3、熟悉掌握MongoDB，有过数据库调优和海量数据存储经验优先； 4、精通JS防护、混淆、逆向分析等技能，熟悉各种浏览器检测/反检测手段；

岗位职责： 1. 负责爬虫业务线的开发迭代，完成多平台信息和页面内容、接口的抓取工作； 2. 负责信息数据的抽取、清洗、整理等工作； 3. 负责爬虫系统的优化，监控和报警，提高爬虫脚本的稳定性和抓取效率。 任职要求： 1. 本科及以上学历，2年以上独立Python爬虫开发经验； 2. 熟练使用bs、re、xpath、jsonpath等数据提取模块； 3. 熟悉 Scrapy、 selenium / pyppeteer 等常用爬虫框架，熟悉反爬策略与应对方案； 4. 熟悉Linux开发环境，熟悉 MySql / Mongodb / Redis的基本原理，有数据清洗经验的优先； 5. 有django、flask、tornado等web框架（之一即可）的使用经验，有web项目经验的优先； 6. 有良好的沟通能力、理解能力、细节把控能力、多任务并行处理能力； 7. 有责任心，能够积极主动的发现和解决问题，化解风险。 如果您成为我公司员工，您将获得： 薪资：中电博亚将为员工提供行业内有竞争力的薪酬，确保优秀员工获得更多的认可和激励； 奖金：优秀的您将共享公司的经营业绩，奖金额度与公司年度收益及个人绩效挂钩； 基本保障福利：公司按照国家规定为员工缴纳社会保险及公积金（五险一金）； 额外补充福利：餐补、车补等日常津贴，下午茶零食咖啡无限量供应； 休假：相对弹性工作制；每周双休；除国家规定的法定节假日外，将给予额外的带薪年假和带薪病假。 我们虽然独树一帜，却并不冰冷； 我们虽然行事严谨，却并不死板； 我们不害怕年轻，只害怕创意枯竭； 我们不害怕失败，只害怕止步不前； 我们喜欢朝气蓬勃的你，一起用对游戏的热爱一起创造辉煌； 我们喜欢无所畏惧的你，前人没有走过的路就让我们来开辟； 那个关于游戏的梦想，你还记得吗？ 我们期待你的加入！

岗位职责： 1.参与数据安全相关系统/数据的开发和维护，保证系统的高可用性和稳定性； 2.参与AI相关数据处理和AI应用研发工作； 3.参与后台系统研效提升相关工作，协调并提升团队研发效率、质量。 岗位要求： 1.掌握Golang/python语言，具备开发能力，同时掌握c++者优先； 2.熟悉Linux操作系统、网络编程，具备调试能力、问题分析能力； 3.关注并了解AI算法和技术，对AI领域有探索热情； 4.具备强烈的进取心、求知欲及团队合作精神，有很强的责任心和较强的沟通协作能力；

特别提醒：人不在深圳的不要随便投递简历。谢谢。 1、负责业务端数据稳定抓取、存储； 2、沟通产品需求，建立机器学习模型并不断优化 3、能够独立完成系统模块开发； 4 年及以上实际开发经验，精通python语言开发，同时掌握其他语言优先； 5、精通爬虫和反爬技术，精通http底层协议，linux基本命令；精通深度抓取、动态网页技术抓取、浏览器模拟抓取、APP抓取等技术； 6、熟练使用mysql数据库、ES集群、redis、js逆向、正则提取； 7、熟悉机器学习，了解深度学习框架，有实际开发者优先； 8、有开发爬虫框架经验优先，熟悉反爬虫、验证码识别技术者优先； 9、逻辑清晰，专注技术有追求有热情，良好的团队合作精神及学习能力；

岗位职责： 1、负责设计、开发、维护爬虫系统； 2、参与多平台信息的抓取和分析； 3、建立完整的数据获取、解析、入库和监控流程，并不断优化迭代完善； 4、设计爬虫反屏蔽规则,提升网页抓取的效率和质量； 5、利用主流的大数据相关技术，对抓取后的网页数据进行清洗、存储等；并持续优化平台，以便满足各种爬取业务需求。 任职资格： 1、熟悉GO/RUST语言，熟练掌握js反混淆，有实操经验优先； 2、实操过akamai,datadom,cloudflare等国外cdn供应商防护优先； 3、熟悉linux开发环境，熟练掌握java或python编程语言，熟悉js语言； 4、熟悉 web/app 常见的反爬机制，精通各种反爬破解，包括但不限于：Js防护、混淆、逆向分析、App防破解、防逆向、加固技术等技能； 5、有电商类网站爬虫经验优先，有高频爬虫工作经验者优先。

岗位职责 1.负责公司现有爬虫产品的维护； 2.负责指定领域数据的定向抓取，深度提取.清洗和结构化； 3.解决封印.封账号.验证码.页面跳转等难点； 4.参与分布式爬虫和数据采集系统的架构设计和开发，快速响应业务变动； 5.研究优化算法，提升爬虫系统的效率.稳定性.可扩展性。 任职要求 1.精通python，熟悉Linux操作系统常用命令； 2.熟练python自动化,selenium网页自动化,会手机抓包 3.精通网页抓取原理及技术，熟悉HTTP协议，熟悉正则表达式.XPath.CSS选择器等，了解常用验证码识别技术； 4.能解决封帐号封ip等问题 5.熟悉常见的反爬策略对应的数据采集方案， 6.熟悉Redis，MySQL等数据库；熟悉rabbmitMQ 7.有良好的代码编写习惯，具有良好的沟通.协作能力，有责任心

职位描述 1、负责攻克高难度的反爬，诸如人机识别、JS逆向、Android逆向等 2、负责开发及维护超大规模站点，深入挖掘站点有价值的数据 3、参与爬虫通用组件、工具、系统的设计开发 职位要求 1、3年以上爬虫工作经验 2、具备丰富的Python爬虫经验，熟悉JS逆向、Android逆向，有攻克高难度站点经验 3、具备扎实的技术基础，如常见的网络协议、Linux操作系统、常用数据库等，可以独立分析解决新出现的技术问题 4、缜密的逻辑思维能力，热爱技术，喜欢钻研，注重代码质量 5、对前后端开发熟悉加分

工作职责： 1、独立负责网络爬虫系统的设计与开发； 2、负责和业务沟通抓取需求，满足业务的发展需要； 3、负责大数据产品所需网站的信息抓取、解析、清洗等研发与优化工作； 任职要求： 1. 计算机或相关专业，本科及以上学历； 2. 熟悉软件工程，熟悉常用数据结构和算法； 3. 熟悉Python语言 、掌握爬虫框架scrapy , 熟悉分布式爬虫管理框架Gerapy, 爬虫管理scrapyd ,分布式爬虫scrapy-redis 4. 熟悉Linux操作系统以及shell脚本； 5. 熟悉HTML，JavaScript，xpath，css selector，熟悉HTTP协议； 6. 英语水平达到CET6或以上； 7. 工作细心，认真负责，具备较强的学习能力； 8.了解Git版本管理工具。

Python科目现在也需要一名直播运营，需要懂IT 如果你: 喜欢与人沟通, 热爱讲师工作, 在大厂996干够了，拥有出色的Python技能及沟通能力; 渴望丰厚的奖金收入,专注自己的目标并坚持不懈; 具有良好的团队合作意识并具有强烈的责任感与客户服务意识;; 想要有更宽阔的长期职业发展; 欢迎加入我们! 1、熟悉分布式系统、多线程，精通scrapy、selenium框架以及原理 2、熟悉TCP/IP、HTTP、XPath、beautifulsoup4、正则表达式等相关技术 3、精通爬虫和反爬技术、精通JS逆向、APP逆向，精通http底层协议；精通深度抓取、动态网页技术抓取、浏览器模拟抓取、APP抓取等技术 4、沟通表达佳，有授课经验 有博客撰写习惯或者在企业内外部有技术分享经验者优先

岗位职责： 1、与业务团队沟通，明确爬虫项目的目标和需求，确定要抓取的数据范围、格式和用途，为产品业务提供数据支持。 2、编写高效、稳定的 Python 爬虫代码，挖掘并整合外部第三方数据，并对抓取到的数据进行的清洗和整理，增强数据分析的广度与深度； 3、优化爬虫程序的性能，提高抓取速度和效率； 4、建立和完善公司内部的知识图谱体系，提高数据的可访问性和价值。 任职资格： 1、**本科及以上，数学、统计学、计算机科学等相关专业优先，拥有5年以上金融或科技行业的相关工作经验。 2、精通python语言，具备扎实的编程功底，具有良好的程序设计能力； 3、精通爬虫原理，精通Scrapy、pyspider等主流爬虫框架框架；具有RPA项目经验； 4、精通常用的反扒技术，对互联网各种类型数据交互模式熟悉，知道如何处理需登录网站、动态网页等各种情况下的数据采集方法。 5、熟悉常见ip限制、滑块、UA限制、验证码反爬、登录限制、headers认证和cookie限制等反爬套路及破解方法，且有实际经验； 6、熟练使用MySQL、MongoDB，熟悉Hadoop、ElasticSearch等技术； 7、熟练使用Pandas, NumPy等进行数据清洗、处理，提供数据服务以及数据管理； 8、能独立完成爬虫系统的搭建和运维。

职位描述： 1、参与爬虫项目的架构设计、研发、编程工作，改进和提升爬虫效率； 2、设计爬虫策略和防屏蔽规则，提升网页抓取的效率和质量； 3、负责网页采集任务的分析及采集方案设计； 4、负责分布式爬虫策略持续优化。 任职要求： 1、熟悉Java、Python、Shell、R 等至少一门语言； 2、负责分析并采集网站数据，并按照要求对采集的数据进行整理； 3、具有较强的业务分析能力，较好的沟通表达和综合协调能力； 4、责任心强，有快速学习能力，对大数据方向感兴趣。 福利： 大数据行业 热门商圈 弹性工作 远程工作