携程爬虫工程师(MJ030664)
社招全职2年以上住宿业务开发地点：上海状态：招聘
任职要求
1.计算机相关专业，本科及以上学历，有2年以上爬虫相关经验。2.掌握至少一种开发语言Java/Python，具备良好的编码能力、扎实的数据结构知识 。3.熟悉TCP/IP，HTTP及相关网络协议。4.了解各种Web前端技术，包括XHTML/XML/CSS/JavaScript/AJAX等。5.有反爬相关问题处理…
登录查看完整任职要求
微信扫码，1秒登录
工作职责
1.负责分布式网络爬虫系统的设计与开发工作。2.对多平台数据源（WEB/APP/H5/小程序等）进行数据采集及分析。3.通过逆向、图像识别、行为分析等技术提升爬虫核心技术突破。4.设计数据采集策略，提升数据采集效率及质量。
包括英文材料
学历+
Java+
https://www.youtube.com/watch?v=eIrMbAQSU34
Master Java – a must-have language for software development, Android apps, and more! ☕️ This beginner-friendly course takes you from basics to real coding skills.
Python+
https://liaoxuefeng.com/books/python/introduction/index.html
中文，免费，零起点，完整示例，基于最新的Python 3版本。
https://www.learnpython.org/
a free interactive Python tutorial for people who want to learn Python, fast.
https://www.youtube.com/watch?v=K5KVEU3aaeQ
Master Python from scratch 🚀 No fluff—just clear, practical coding skills to kickstart your journey!
https://www.youtube.com/watch?v=rfscVS0vtbw
This course will give you a full introduction into all of the core concepts in python.
数据结构+
https://www.youtube.com/watch?v=8hly31xKli0
In this course you will learn about algorithms and data structures, two of the fundamental topics in computer science.
https://www.youtube.com/watch?v=B31LgI4Y4DQ
Learn about data structures in this comprehensive course. We will be implementing these data structures in C or C++.
https://www.youtube.com/watch?v=CBYHwZcbD-s
Data Structures and Algorithms full course tutorial java
TCP/IP+
[英文] What is TCP/IP?
https://www.techtarget.com/searchnetworking/definition/TCP-IP
TCP/IP stands for Transmission Control Protocol/Internet Protocol and is a suite of communication protocols used to interconnect network devices on the internet.
HTTP+
https://developer.mozilla.org/zh-CN/docs/Web/HTTP
超文本传输协议（HTTP）是一个用于传输超媒体文档（例如 HTML）的应用层协议。它是为 Web 浏览器与 Web 服务器之间的通信而设计的，但也可以用于其他目的。
Web+
https://web.dev/learn
Explore our growing collection of courses on key web design and development subjects.
还有更多 •••
相关职位
社招3年以上国际化类
1、遵循robots协议，爬取互联网上允许爬虫采集的公开信息； 2、参与爬虫平台架构设计与基础建设，维护爬取及数据处理任务，保障各类渠道数据的稳定性与正确性； 3、攻克各种爬虫技术难关，提升爬虫平台效果与性能； 4、支持业务团队的数据采集、渠道接入及系统维护等需求，实现数据驱动的业务增长。
上海
社招5年以上
1. 负责知乎客户端（包括且不限于 PC/H5、Android、IOS、小程序等）反爬升级，保护业务资产不被非法获取。 2. 负责推动防护能力迭代升级，推动反爬治理能力有效落地。
更新于 2026-05-14北京
社招5年以上程序&技术类
主导设计统一的通用网页爬取框架，构建高并发分布式爬取系统，覆盖网页、论坛、社交媒体、文档、视频/音频转写等多模态数据源。 负责抓取后的数据落地、分片存储、内容解析（HTML/JSON/多语言文本/字幕/评论流等）与去重，与数据清洗、内容质量、采样与训练团队协作，实现端到端可追溯的数据管线。 规划爬虫集群、代理池、分布式调度、动态反爬对抗与增量抓取策略。 建立多源数据 schema 规范与元数据采集标准，支撑 Trino/Spark/大数据湖分析。
上海