米哈游爬虫浏览器内核工程师
社招全职程序&技术类地点:上海状态:招聘
任职要求
1、具备成熟的Chromium浏览器内核二次开发、内核定制、内核性能优化实战经验,深入理解Web引擎完整工作原理,精通网页渲染流程、JS执行机制、浏览器网络请求架构、DOM/BOM底层逻辑,熟悉浏览器内核源码调试与问题攻坚。 2、具备丰富的浏览器内核攻防实战经验,深入掌握全网主流风控机制。 3、拥有日均亿级大规模爬虫系统研发与落地经验…
登录查看完整任职要求
微信扫码,1秒登录
工作职责
1、负责亿级日量级分布式爬虫系统底层架构研发与迭代优化,聚焦大模型训练场景下全网公开数据抓取需求,主导Web引擎核心模块研发、定制化改造与深度性能调优,支撑爬虫业务稳定高效运行。 2、深耕Chromium浏览器内核底层原理,负责浏览器内核二次开发、定制化重构与性能优化工作,攻克DOM解析、动态渲染、JS引擎执行、网络请求调度、内存管理、多线程渲染等底层技术难题,提升爬虫工具的兼容性、稳定性与抓取效率。 3、主导浏览器内核攻防与爬虫业务基础设施及体系建设,持续提升爬虫任务整体抓取成功率。 4、搭建全链路爬虫数据埋点与性能监控体系,对浏览器内核渲染性能、资源消耗、请求成功率、风控拦截率等核心指标进行常态化监控、数据分析与问题复盘,输出可落地的内核优化、攻防迭代、架构升级方案,持续降低系统损耗、提升爬取稳定性。
包括英文材料
Chromium+
https://www.chromium.org/chromium-projects/
The Chromium projects include Chromium and ChromiumOS, the open-source projects behind the Google Chrome browser and Google ChromeOS, respectively.
内核+
https://www.youtube.com/watch?v=C43VxGZ_ugU
I rummage around the Linux kernel source and try to understand what makes computers do what they do.
https://www.youtube.com/watch?v=HNIg3TXfdX8&list=PLrGN1Qi7t67V-9uXzj4VSQCffntfvn42v
Learn how to develop your very own kernel from scratch in this programming series!
https://www.youtube.com/watch?v=JDfo2Lc7iLU
Denshi goes over a simple explanation of what computer kernels are and how they work, alonside what makes the Linux kernel any special.
Web+
https://web.dev/learn
Explore our growing collection of courses on key web design and development subjects.
JavaScript+
https://developer.mozilla.org/zh-CN/docs/Learn_web_development/Core/Scripting
[英文] Learn JavaScript
https://learnjavascript.online/
The easiest way to learn & practice modern JavaScript
[英文] Learn JavaScript
https://web.dev/learn/javascript
https://www.youtube.com/watch?v=zuKbR4Q428o
Write bulletproof JavaScript code with unit testing!
还有更多 •••
相关职位
社招程序&技术类
1、负责亿级URL池智能调度体系的设计、优化与落地,搭建多因子优先级调度、增量更新、并发流量管控策略,在有限资源下最大化高质量页面抓取效率与数据吞吐。 2、负责抓取策略的设计与研发,包括链接筛选算法的开发,网页质量排名算法,通过历史数据动态更新网页的排名策略,实现高价值资源优先调度、低质链接自动降权淘汰。 3、负责URL归一化体系建设,落地域名路径规整、无效参数清洗、等价URL去重收敛能力,解决超大量级链接场景下的重复抓取、数据污染、调度冗余等核心问题, 4、结合业务目标,制定差异化调度、限速、重试策略,提升抓取成功率
上海
社招2年以上住宿业务开发
1.负责分布式网络爬虫系统的设计与开发工作。2.对多平台数据源(WEB/APP/H5/小程序等)进行数据采集及分析。3.通过逆向、图像识别、行为分析等技术提升爬虫核心技术突破。4.设计数据采集策略,提升数据采集效率及质量。
更新于 2025-10-21上海