TCL数据采集工程师
社招全职3年以上研发技术类地点:上海状态:招聘
任职要求
1、 教育背景:计算机科学、人工智能、数学或相关领域的硕士学位。
2、 工作经验:至少3年相关工作经验,具有AIGC的数据收集、管理或注释经验。
3、 必备技能:(1)精通Python或类似脚本语言。
(2)熟悉网页抓取、API和数据转换。
(3)非常重视数据质量和细节。
(4)有注…登录查看完整任职要求
微信扫码,1秒登录
工作职责
从公共、合成和人工来源获取和汇集数据集。 -自动化数据收集、清理和注释工作流程。 -审查和充实数据的质量和相关性。 -设置和管理注释工具和指南。 -维护数据集版本控制和文档编写。 -整合用户和产品的反馈,以改进数据。 - 与算法工程师、产品经理和其他团队合作。
相关职位
社招3-5年D6256
1、遵循robots协议,采集互联网上允许搜索爬虫采集的公开非敏感信息,满足大模型、电商、本地等公司核心业务数据需求; 2、负责分布式采集系统的建设与迭代优化,负责数据调度、采集、数据结构化、持久化全链路核心流程迭代升级; 3、帮助团队攻克各种采集技术难关,提升系统的采集效果与效率。
更新于 2025-09-29北京
社招3年以上数据引擎
爬虫架构师 1.负责大规模广域爬虫引擎的部署、开发、维护; 2.负责爬虫系统的设计与优化; 3.熟悉chromium内核,熟悉js,熟悉dom; 4.熟悉常见的爬虫引擎,具有3年以上相关工作经验。; 爬虫工程师 1.严格遵守robots协议,负责大批量数据爬取; 2.负责爬虫代码的日常开发与维护,保证稳定性; 3.负责互联网资源清洗和结构化,网页转码,网页聚合,信息抽取,网页分类; 4.熟悉常见的风控策略,和JS混淆和浏览器引擎,可以快速开发网站采集。
北京|上海
校招J1014
1、遵循robots协议,采集互联网上允许搜索爬虫采集的公开非敏感信息,满足大模型、电商、本地等公司核心业务数据需求; 2、负责分布式采集系统的建设与迭代优化,负责数据调度、采集、数据结构化、持久化全链路核心流程迭代升级; 3、帮助团队攻克各种采集技术难关,提升系统的采集效果与效率。
更新于 2025-07-30北京
