logo of didi

滴滴数据采集系统研发工程师(J250514018)

社招全职3年以上安全地点:北京状态:招聘

任职要求


1、本科以上学历,三年以上分布式数据采集系统开发经验,能力突出者可放宽要求;
2、熟练掌握主流抓取技术、协议分析和模拟点击等,掌握常用采集系统框架;
3、具备app规模化…
登录查看完整任职要求
微信扫码,1秒登录

工作职责


1、负责分布式数据采集系统的设计和开发;
2、负责账号cookie保持,vps资源管理、数据清洗和处理等工作。
包括英文材料
学历+
Python+
Java+
还有更多 •••
相关职位

logo of didi
社招3年以上技术

1、群控系统架构的设计与实现,确保系统性能和稳定性; 2、负责编写和优化自动化脚本,维有脚本可用性; 3、负责管理和监控群控资源:包括设备、网络、账号等的管理。

更新于 2025-08-01北京
logo of netease
社招3-5年网易游戏(雷火)

1.负责设计和优化数据采集策略与方案,开发高效稳定的数据采集服务,以有效获取多平台、多渠道的多模态数据(结构化文本、图片、音频、短剧、电视剧、电影等),满足业务多元的数据采集需求 2. 负责爬虫智能体架构设计研发以及稳定性保障,优化爬虫性能与效率,并确保多样性数据的质量 3. 参与UGC智能体社媒数据内容创作平台的构建

更新于 2025-09-15杭州
logo of kuaishou
社招3-5年D1915

1、面向AIGC行业的基础模型领域,完成多模态大数据系统和核心组件的架构和开发; 2、设计并维护覆盖大模型多模态数据全生命周期的数据系统,包括数据采集,挖掘,构造,分析和价值验证等; 3、理解AIGC的数据需求和逻辑,建设智能高效的数据挖掘手段,实现海量多模态数据的有效治理和数据效果高效转化。

更新于 2025-11-17北京
logo of baidu
社招2年以上IDG

参与基于智能驾驶的大数据系统研发,具体包括技术整体架构设计、组件和服务设计、实施落地及产品的持续演进等 参与基于云计算的数据存储与计算体系建设,包括数据采集、传输、存储、计算、分析、高性能读写、可视化、数据治理等功能 对接内外部产品研发团队,参与和负责数据项目技术研发工作,包括项目POC测试、立项、开发、集成、交付等各个环节的工作支持,确保项目的有序进行和顺利验收 建设数据产品ToB能力,为公有云、私有云客户提供服务支撑

更新于 2023-07-04北京