-
数据抓取工程师 职位描述: 1、负责搭建数据抓取系统,根据数据源头进行数据抓取,对数据抓取的及时性负责; 2、负责对抓取数据进行解析、清洗,对数据一致性、准确性负责; 3、负责相关数据抓取服务的工程建设和指标建设,对数据生产链条的健壮性、高效性负责。 任职要求: 1、本科或以上学历,有3年以上数据抓取开发经验; 2、熟练掌握Python等编程语言,具有扎实的编程基础和良好的代码风格; 3、具备丰富的爬虫开发经验,熟悉各类爬虫框架和工具,如Scrapy、Selenium等; 4、熟悉HTTP协议和常见的网页解析技术,具备良好的数据清洗和处理能力; 5、熟悉MySQL、MongoDB、Redis等; 6、具备良好的沟通和团队合作能力,能够与数据开发、后端开发人员等协作,共同完成项目目标
-
【岗位职责】 1.协助进行国家重点项目中的ETL、指标计算、数据治理等的研发工作; 2.协助进行数据中台设计和研发,为知识图谱、人物建模、搜索推荐等提供高质量数据,开发灵活可扩展的处理流程以及直观易用的数据界面; 3.协助进行全球多语言技术数据的抓取/补全; 4.协助进行数据正确性/完整性自动化检查; 5.协助进行自动抓取入库流程框架开发; 6.数据统计框架开发; 7.相关数据文档的撰写。 【岗位要求】 1.硕士,计算机/数学相关方向专业,可确保每周3天实习; 2.熟练掌握python编程,了解常用的数据处理库如pandas等; 3.熟悉mysql数据库,能够熟练编写sql语句并优化; 4.有数据清洗、数据处理、数据自动化监测经历者优先; 5.熟悉一种或多种主流开源大数据平台组件者优先,如Flume、Kafka、Hadoop、Hive、Spark、Flink; 6.了解数据分析/挖掘常用方法者优先,如序列分析、关联分析、异常点挖掘、分类、聚类等; 7.有编程竞赛获奖经历者优先,如 ACM、中国大学生程序设计大赛、蓝桥杯、CCF 相关竞赛或 CCF 等级考试相关、PAT 等级考试; 8.良好的团队合作,较强的沟通能力、学习能力,对解决具有挑战性问题充满激情。
-
岗位职责: 1、负责棋牌产品的设计研发和优化工作,并对产品功能进行测试、验收,保证产品质量; 2、了解棋牌市场动态,持续跟踪分析市场上的竞品,总结出产品和竞品的差异之处,寻找产品提升和优化空间; 3、分析上线产品的运营数据,从数据中挖掘信息,提出产品改进意见,不断完善在线产品、持续改善用户体验; 4、利用微信社交优势并挖掘更多来量渠道提升产品DAU; 岗位要求: 1、5年以上互联网产品或策划岗经验,有完整的项目经验,对棋牌游戏有一定的了解; 2、具备一定的数据分析能力,能够敏锐的抓取产品运作中的关键数据并提出改进意见; 3、自驱性强,工作积极主动,有良好的团队协作意识,定期总结,注重自我提升; 4、逻辑清晰,具备良好的语言沟通和表达能力,有成功项目经验者优先。
-
岗位职责: 1. 使用SQL等数据抓取工具从各种数据源中提取数据,并进行数据清洗和整理。 2. 运用统计学和数据分析方法对数据进行分析,发现趋势、模式和关联性。 3. 利用数据可视化工具(如Tableau、Power BI等)创建仪表盘、报告和可视化图表,以向利益相关者传达数据洞察。 4. 协助团队成员进行数据分析项目,提供支持和建议。 5. 监测和评估数据质量,确保数据的准确性和完整性。 6. 跟踪行业趋势和竞争对手的数据,提供市场洞察和建议。 岗位要求: 1. 2-3年相关工作经历。 2. 熟练掌握SQL等数据抓取工具,能够编写和优化复杂的查询语句。 3. 具备数据清洗和整理的技能,能够处理大量数据并确保数据的准确性。 4. 熟悉统计学和数据分析方法,能够运用这些方法解决实际问题。 5. 熟练使用数据可视化工具,能够将数据转化为易于理解和传达的可视化图表和报告。 6. 对商业和旅游行业有浓厚的兴趣,了解相关行业的趋势和挑战。 7. 具备良好的沟通和团队合作能力,能够与不同部门和利益相关者进行有效的合作。 8. 具备解决问题和分析能力,能够快速理解和解决复杂的数据相关问题。
-
岗位职责: 1、负责棋牌产品的设计研发和优化工作,并对产品功能进行测试、验收,保证产品质量; 2、了解棋牌市场动态,持续跟踪分析市场上的竞品,总结出产品和竞品的差异之处,寻找产品提升和优化空间; 3、分析上线产品的运营数据,从数据中挖掘信息,提出产品改进意见,不断完善在线产品、持续改善用户体验; 4、利用微信社交优势并挖掘更多来量渠道提升产品DAU; 岗位要求: 1、5年以上互联网产品或策划岗经验,有完整的项目经验,对棋牌游戏有一定的了解; 2、具备一定的数据分析能力,能够敏锐的抓取产品运作中的关键数据并提出改进意见; 3、自驱性强,工作积极主动,有良好的团队协作意识,定期总结,注重自我提升; 4、逻辑清晰,具备良好的语言沟通和表达能力,有成功项目经验者优先。
-
平时可以阅读英文的计算机API文档,并且需要有一定的Java基础。对爬虫抓网页的工作内容感兴趣,如果不符合以上条件,请勿投递,谢谢。 工作职责: 1、IOS, Andriod APPs以及网站的逆向分析及漏洞挖掘,并对逆向数据进行采集抓取; 2、爬虫策略和防屏蔽规则,提升网页抓取的效率和质量; 3、有过Akamai,Perimeterx经验的优先; 任职需求: 1、应届毕业生,熟练掌握Java语言; 2、熟悉IDA、 JEB 、LLDB、JADX等常用逆向分析工具,具备逆向分析能力; 3、熟悉各种通用加解密算法,有一定的脱壳反混淆,反调试经验; 4、熟悉常见的Xposed hook技术,注入技术,常见安全产品绕过等技术; 5、做事有责任感,具有良好的逻辑思维,很强的执行力和自我驱动力。 【福利政策】 1、混合办公模式,根据工作年限每月可申请居家办公2-8天。 2、10天- 25天带薪年休假; 3、13薪及每年全员调薪,根据入职时间、工作表现和企业经营状况; 4、补充医疗保险及每年健康体检; 5、旅游补贴及公司团建; 6、每周供应2次免费午餐; 7、节假日礼品卡福利及节日下午茶供应。
-
一、岗位要求: 1、有2年左右客户端(Android or iOS) 相关产品测试经验; 2、具备独立测试设计、测试用例编写、测试执行的能力; 3、熟练使用adb等常用命令进行app的安装、卸载、log 抓取,monkey 操作,抓包等 4、具备整体推动,独立负责一个模块的能力; 5、良好的沟通和推动能力,推动问题修复、解决; 一、岗位内容 1、To C侧app端基础质量验收,包括需求评审,技术方案理解,数据链路梳理,测试用例设计与执行,缺陷定位与跟进,风险评估,app自动化用例脚本的开发与维护(如python)等 2、如有独立负责过项目质量或有带人经验更好
-
【岗位职责】 1.实现国家重点项目中的数据采集、传输、存储、计算、分析、可视化、数据治理等产品; 2.参与大数据AI系统的数据中台设计和研发工作,为知识图谱、人物建模、搜索推荐提供高质量数据、灵活可扩展的处理流程以及直观易用的数据界面; 3.全球多语言技术数据的抓取/补全; 4.数据正确性/完整性自动化检查; 5.自动抓取入库流程框架开发; 6.数据统计框架开发; 7.数据文档撰写。 【岗位要求】 1.**本科及以上学历,计算机/数学相关方向专业,3-4年工作经验优先; 2.编程能力过硬,熟练掌握python或java编程; 3.会使用数据分析/挖掘常用方法,序列分析,关联分析,异常点挖掘,分类,聚类等,熟练使用数据分析及可视化工具Excel,Tableau等 4.熟悉mysql数据库,能够熟练编写sql语句并优化 5.有知识图谱、数据中台研发经验者优先; 6.有数据清洗、数据处理、数据自动化监测经历优先; 7.熟悉一种或多种主流开源大数据平台组件,如Flume、Kafka、Hadoop、Hive、Spark、Flink优先; 8.良好的团队合作, 较强的沟通能力、学习能力,对解决具有挑战性问题充满激情;
-
职位职责: 日常实习:面向全体在校生,为符合岗位要求的同学提供为期3个月及以上的项目实践机会。 1、了解机器人流程自动化或爬虫抓取采集相关工作经验; 2、了解主流机器人流程自动化及爬取技术及爬虫框架工具,如Selenium/Puppeteer/Scrapy/PhantomJS等; 3、熟悉Python语言,具备算法和数据结构能力; 4、熟练使用办公软件,精通Excel常用函数,具备基础数据分析处理能力; 5、优秀的分析、沟通、思考能力,良好的团队合作能力。 职位要求: 1、2025届及以后毕业,本科及以上学历在读,财务管理或计算机相关专业计算机相关专业优先; 2、学习能力强,工作积极主动,有责任心。
-
Python招聘信息 职位要求 编程能力熟练掌握Python编程语言,能够独立编写高质量代码。 数据处理熟悉Python爬虫技术,能够有效地抓取和提取数据。 具备数据清洗的能力,能够处理和整理原始数据,确保数据的准确性和可用性。 机器学习了解机器学习算法的基本原理,能够应用相关算法解决实际问题。 自然语言处理熟悉Word2Vec和BERT模型,能够应用这些模型进行文本处理和分析。 对Transformer模型的结构有一定了解,能够理解其工作原理及应用场景。 大模型训练了解大模型的训练过程,包括预训练、微调(SFT)以及人类反馈学习等方法。 AI模型应用能够使用提示语(Prompt Engineering)有效地利用AI模型解决实际问题。 其他要求 具备良好的团队合作能力和沟通能力。 有相关项目经验者优先考虑。 持续学习的意愿和能力,关注最新的技术动态。 此岗位为 隶属事务所的技术部门“重庆伴岸信息技术有限责任公司”招聘,自主研发法律法规类合规平台,直接管理。
-
Python招聘信息 职位要求 编程能力熟练掌握Python编程语言,能够独立编写高质量代码。 数据处理熟悉Python爬虫技术,能够有效地抓取和提取数据。 具备数据清洗的能力,能够处理和整理原始数据,确保数据的准确性和可用性。 机器学习了解机器学习算法的基本原理,能够应用相关算法解决实际问题。 自然语言处理熟悉Word2Vec和BERT模型,能够应用这些模型进行文本处理和分析。 对Transformer模型的结构有一定了解,能够理解其工作原理及应用场景。 大模型训练了解大模型的训练过程,包括预训练、微调(SFT)以及人类反馈学习等方法。 AI模型应用能够使用提示语(Prompt Engineering)有效地利用AI模型解决实际问题。 其他要求 具备良好的团队合作能力和沟通能力。 有相关项目经验者优先考虑。 持续学习的意愿和能力,关注最新的技术动态。 此岗位为 隶属事务所的技术部门“重庆伴岸信息技术有限责任公司”招聘,自主研发法律法规类合规平台,直接管理。
-
1、参与数据仓库和数据平台的建设与维护 2、与其他部门紧密合作,解决数据相关的问题,根据部门需求提供相关数据。 3、负责数据平台的日常运维,监控数据系统的运行状态,及时发现并处理潜在问题,包括系统单据的抓取情况监控、以及轻易云后台的异常单据的处理。 4、系统基础档案的维护与建立。
-
岗位职责: 1、负责运控项目需求调研、方案设计、用户培训及问题跟进; 2、围绕业务和战略目标,建立产品规划,协同设计和其他产品团队共同打造高效易用的系统; 3、负责配合开展项目的需求调研,同时进行竞品分析、产品规划与架构,组织完成产品设计等; 任职要求: 1、5年软件需求分析或产品经验,计算机等相关专业,**大专及以上学历,本科学历以上最佳。 2、深度参与过【供应链类产品】【仓库管理产品】【跨境商家】设计和开发、熟练掌握ERP、WMS、TMS等系統,对shopify等平台熟悉; 3、具备从0到1的产品搭建经验和能力,能够独立完成产品的设计、开发和交付,同时具备沟通和交付的能力。 4、有Dropshipping&电商供应链产品设计经验优先; 5、具体一定的需求抓取、提炼、分析能力,能挖掘并引导用户需求,形成内容明确、调理清晰的,能高效表达业务诉求,同时不存在技术歧义的需求文档; 6、英语能力达4级或以上的优先; 7、有技术开发背景的优先; 8、熟悉需求规格说明书编写,熟练使用Axure工具,熟练使用visio等工具画流程图,时序图,ER图
-
职位描述: 1.负责相关数据的收集整理; 2.负责文本数据数据审核、效验,确保数据的准确性; 3.根据需求,进行文本、数据、分词相关的标注; 4.抓取配置,数据统计、分析 任职要求: 1.**本科及以上,统计、计算机相关专业优先; 2.有较强的文档能力,会应用word,excel,ppt等办公软件; 3.做事细致有耐心,认真负责,积极主动,沟通能力良好; 4.有数据文本标注工作经验者优先;
-
职位详情 1. 梳理业务流程,开发贷前准入策略和监控体系,管控新客户风险水平. 2. 支持日常数据抓取、监控、统计分析相关工作,将分析结果转化为风控策略优化方案。 3. 制定优化线上线下信贷产品反欺诈流程策略,结合实际可能的欺诈场景制定防控方案。 4.开发制定出时额度策略,及时监控逾期表现并提出策略调优建议 5. 外部产品测试,价值评估,制定风控策略优化方案。 任职要求 6. 数学、统计学、计算机、信息技术、计量分析等专业 ,本科及以上学历。 7. 精通SQL,熟练使用Python语言。 8. 5年以上互联网金融风控经验。 9. 具备良好的沟通执行能力、团队协作精神、工作责任心。 10. 英语能正常口语交流加分。