logo of tencent

腾讯混元大模型数据爬虫架构工程师(北京)

社招全职3年以上AI技术地点:深圳状态:招聘

任职要求


1.计算机相关专业,本科以上学历,2年以上架构经验;
2.精通C++/Go/Java中至少一门开发语言,熟悉常见的数据结…
登录查看完整任职要求
微信扫码,1秒登录

工作职责


1.负责大规模网页数据的抓取、清洗及结构化存储,保障数据质量和时效性;
2.设计并优化分布式爬虫架构,提升系统并发能力和容错性,提升系统性能;
3.维护数据采集链路,协同系统数据分析团队完成数据交付与应用。
包括英文材料
学历+
C+++
Go+
还有更多 •••
相关职位

logo of tencent
社招3年以上AI产品

1.制定大模型后训练分Topic数据策略,搭建数据质量评估体系与数据生产标准,针对性优化数据短板,提升模型训练效果; 2.全面管理数据合成、数据质检、数据标注、数据运营小组,负责团队搭建、流程制定、任务统筹与绩效管控,保障数据高效高质量交付; 3.协同算法、研发团队,对齐模型训练需求,落地数据优化方案,跟进数据-模型效果联动优化,推动数据生产智能化升级; 4.把控数据合规与安全,统筹数据项目进度与目标达成,定期复盘数据质量与团队效能。

更新于 2026-06-22北京
logo of tencent
社招1年以上混元-公共支持产

1.Agent与代码数据策略:负责大模型 Coding 与 AI Agent 方向的数据需求设计与配比策略,针对代码生成、代码补全、复杂任务规划、工具调用等核心能力,制定数据分布、采样及难度分级策略; 2.优化数据生产链路:设计并推进高效、高质量的数据生产方案,制定针对复杂模型任务的数据标准,打通数据流转与模型迭代的闭环链路; 3.评测体系与场景验证:基于复杂交互场景构建科学的动态评测集,参与搭建前沿模型训练所需的底层验证与交互环境,持续驱动模型能力上限的突破。

更新于 2026-06-04北京
logo of tencent
社招3年以上AI技术

1.负责大模型全量数据的向量化检索和向量化排重服务,实现实时向量化排重系统; 2.通过向量化检索性能的优化,提升文本排重的准确率和性能; 3.建立大模型数据清洗的反馈机制和反馈系统,提升全网数据抓取效率; 4.参与大模型的数据工程开发,为大模型提供基础数据。

更新于 2025-11-21深圳