logo of pinduoduo

拼多多大模型数据工程师

社招全职1年以上技术类地点:上海状态:招聘

工作描述


任职要求
1)计算机、软件工程、数据科学等相关专业本科及以上学历;
2)1年及以上数据抓取、爬虫开发、数据清洗处理相关工作经验,有大规模数据项目经验者优先;
3)理解常见网站的技术栈与反爬机制(UA / Cookie / IP 限制 / JS 加密 / 动态加载等),有实战应对经验;
4)有分布式爬虫架构经验,熟悉任务调度、队列、代理池、失败重试、断点续传、去重机制等常见设计;
5)对性能优化有实际经验,能在抓取效率与稳定性之间进行合理权衡;
6)熟悉数据清洗、去重(如…
登录查看完整工作描述
微信扫码,1秒登录

包括英文材料
数据科学+
学历+
JavaScript+
还有更多 •••
相关职位

logo of meituan
社招3年以上核心本地商业-基

1、熟练掌握Java, Python 等主流编程语言,基础扎实,具备大数据处理、大规模在线系统及数据处理系统架构设计与开发经验。 2、具备优秀的编码能力、架构设计能力和分析解决问题能力,能够发现业

更新于 2026-04-14北京
logo of momenta
社招

1、具备扎实的大规模分布式系统架构设计、底层数据平台基建开发经验,具备完整复杂系统的架构搭建与迭代优化经验; 2、熟练掌握Python/Go/C++ 等一到多门开发语言,具备优秀的工程化设计、代码架构

更新于 2026-07-29北京
logo of jd
社招软件开发岗

任职要求 1.本科及以上,计算机相关专业,海量数据采集 / 爬虫 / 数据工程经验,有 LLM 数据交付经验优先。 2.精通 Python/Go/Java 任一,熟悉分布式爬虫、反爬与数据治理。 3.

更新于 2026-03-22
logo of alibaba
社招3年以上技术类-开发

1. 计算机基础扎实,熟练使用 Python,具备良好的 Linux 系统开发能力。 2. 熟悉 PyTorch、FFmpeg、vLLM 等技术,具备多媒体数据处理或模型推理经验。 3. 熟悉 Ray

更新于 2026-09-07北京