logo of mihoyo

米哈游爬虫算法工程师

社招全职程序&技术类地点:上海状态:招聘

工作描述


任职要求
1、计算机相关专业,具备扎实的数据分析、数据建模、数据结构算法与网络基础,熟练掌握Java/C++/Python/golang任意一种编程语言,有大规模策略系统研发落地经验。
2、拥有亿URL池调度、链接筛选、URL归一化全链路实战经验,熟悉分布式爬虫海量链接去重、排序、调度、淘汰完整流程。
3、精通URL标准化、等价链接收敛、参数清洗技术,具备超大流量链接降噪、重复抓取治理落地能力。
4、熟练掌握站点质量打分、链接…
登录查看完整工作描述
微信扫码,1秒登录

包括英文材料
数据分析+
数据结构+
算法+
还有更多 •••
相关职位

logo of mihoyo
社招程序&技术类

1、具备成熟的Chromium浏览器内核二次开发、内核定制、内核性能优化实战经验,深入理解Web引擎完整工作原理,精通网页渲染流程、JS执行机制、浏览器网络请求架构、DOM/BOM底层逻辑,熟悉浏览器

上海
logo of netease
社招3-5年网易有道

1. 计算机相关专业本科及以上学历,3年以上数据采集或爬虫研发经验; 2. 熟练掌握Python或Java,具备良好系统设计和工程编码能力; 3. 精通Web/App抓取、常见反爬与风控对抗,具有真实

更新于 2026-08-11北京
logo of zhuanzhuan
社招3年以上

1. 3 年以上爬虫、逆向或数据采集相关开发经验,具备较好的工程能力。 2. 熟练掌握 Python,熟悉 Requests、Scrapy、Playwright/Selenium 等常见爬虫及自动化技

更新于 2026-08-25深圳
logo of zhihu
校招安全与治理中心

岗位职责: 1.负责多渠道公开数据的合规采集、清洗、校验与存储,搭建规范的数据采集流程,保障数据的准确性、完整性和时效性 2.持续优化爬虫程序的稳定性、效率和抗反爬能力 3.配合团队完成爬虫系统的开发

更新于 2026-07-09北京