logo of insta360

影石Python开发工程师(爬虫)-2026校招

校招全职地点:深圳状态:招聘

任职要求


1. 本科及以上学历,计算机或相关专业;
2. 熟悉PythonHTMLJavaScript等编程语言,熟悉常见后端框架及爬虫框架如Scrapy、Selenium等;
3. 熟悉MySQLMongoDB等主流数据库,熟练掌握SQL语句编写;
4. 熟悉Linux环境,能使用常用的Linux命令;
5. 熟悉网络基础,了解TCP/IP网络协议,熟悉HTTP协议;
6. 掌握爬虫原理,掌握正则表达式、XPath的使用,掌握常见抓包分析工具如Fiddler、Charles、Postman等,熟悉常见反爬机制及逆向手段;
7. 具备较强的抗压能力,有责任心,注重工作效率和代码质量。

工作职责


1. 负责根据业务需求和规划开展爬虫开发工作,包括数据解析与清洗,数据链路优化等,同时对现有爬虫进行维护和完善;
2. 参与爬虫核心技术研究,维护和升级现有技术体系,快速定位并修复现有软件缺陷,对线上问题进行及时响应并解决
3. 参与爬虫监测体系建设,及时监控及解决运行过程中出现的问题,确保数据的稳定性和准确性;
4. 参与公司内部爬虫平台的架构设计与开发,并结合业务场景及NLP等技术,实现产品化。
包括英文材料
学历+
Python+
HTML+
JavaScript+
Selenium+
SQL+
MySQL+
MongoDB+
Linux+
TCP/IP+
HTTP+
相关职位

logo of qunar
校招技术类

1、负责公司爬虫攻防的技术调研、需求开发、难点攻关和运维优化; 2、实时监控爬虫的运行状态和预警处理; 3、参与数据层建设,进行多平台信息的抓取和红蓝分析,实现数据去重、解析、清洗、入库、统计分析等需求; 4、负责持续跟踪分析爬虫/反爬系统的技术缺陷,对策略架构做出合理地调整和改进,提升公司相关产品与服务的竞争力。

logo of duoyi
社招技术类

【广州】 方向一: 1、参与分布式爬虫和数据采集系统的架构设计和开发; 2、负责网络数据抓取规划、定期爬取指定网站的数据; 3、设计爬虫策略和防屏蔽规则,提升网页抓取的效率和质量; 4、参与数据层建设,专注于垂直领域数据爬取,进行多平台信息的抓取和分析; 5、实现数据提取、清洗、结构化、入库、统计分析等需求; 6、研究优化算法,提升爬虫系统的稳定性、可扩展性; 7、根据业务需要,完成上级安排的其他市场调研/数据分析/方案设计等工作。 方向二: 1、负责游戏自动化测试工具及平台的后台开发工作,dev-ops+测试自动化; 2、根据业务需要,完成上级安排的市场调研/数据分析/方案设计等其他工作。 【武汉】 1、参与Python分布式爬虫和数据采集系统的架构设计、开发和维护; 2、参与Python数据平台、Web服务、机器学习等相关开发工作; 3、根据业务需要,完成上级安排的市场调研/数据分析/方案设计等其他工作。

更新于 2025-08-11
logo of tme
社招3年以上内容-技术类

1.参与分布式爬虫系统的设计与开发; 2.负责平台外部数据覆盖,并解决高并发爬取、海量存储等问题; 3.负责监控框架的迭代和改进,维护所需资源池,并探索最新的技术能力; 4.负责部分硬件SDK开发(安卓或C++方向)。

更新于 2025-09-02
logo of ctrip
社招2年以上住宿业务开发

1.负责分布式网络爬虫系统的设计与开发工作。 2.对多平台数据源(WEB/APP/H5/小程序等)进行数据采集及分析。 3.通过逆向、图像识别、行为分析等技术提升爬虫核心技术突破。 4.设计数据采集策略,提升数据采集效率及质量。

更新于 2025-06-11