腾讯混元大模型数据爬虫架构工程师(北京)
社招全职3年以上AI技术地点:深圳状态:招聘
任职要求
1.计算机相关专业,本科以上学历,2年以上架构经验; 2.精通C++/Go/Java中至少一门开发语言,熟悉常见的数据结…
登录查看完整任职要求
微信扫码,1秒登录
工作职责
1.负责大规模网页数据的抓取、清洗及结构化存储,保障数据质量和时效性; 2.设计并优化分布式爬虫架构,提升系统并发能力和容错性,提升系统性能; 3.维护数据采集链路,协同系统数据分析团队完成数据交付与应用。
包括英文材料
学历+
C+++
https://www.learncpp.com/
LearnCpp.com is a free website devoted to teaching you how to program in modern C++.
https://www.youtube.com/watch?v=ZzaPdXTrSb8
Go+
https://www.youtube.com/watch?v=8uiZC0l4Ajw
学习Golang的完整教程!从开始到结束不到一个小时,包括如何在Go中构建API的完整演示。没有多余的内容,只有你需要知道的知识。
还有更多 •••
相关职位
社招3年以上AI产品
1.制定大模型后训练分Topic数据策略,搭建数据质量评估体系与数据生产标准,针对性优化数据短板,提升模型训练效果; 2.全面管理数据合成、数据质检、数据标注、数据运营小组,负责团队搭建、流程制定、任务统筹与绩效管控,保障数据高效高质量交付; 3.协同算法、研发团队,对齐模型训练需求,落地数据优化方案,跟进数据-模型效果联动优化,推动数据生产智能化升级; 4.把控数据合规与安全,统筹数据项目进度与目标达成,定期复盘数据质量与团队效能。
更新于 2026-06-22北京
社招1年以上混元-公共支持产
1.Agent与代码数据策略:负责大模型 Coding 与 AI Agent 方向的数据需求设计与配比策略,针对代码生成、代码补全、复杂任务规划、工具调用等核心能力,制定数据分布、采样及难度分级策略; 2.优化数据生产链路:设计并推进高效、高质量的数据生产方案,制定针对复杂模型任务的数据标准,打通数据流转与模型迭代的闭环链路; 3.评测体系与场景验证:基于复杂交互场景构建科学的动态评测集,参与搭建前沿模型训练所需的底层验证与交互环境,持续驱动模型能力上限的突破。
更新于 2026-06-04北京
社招3年以上AI技术
1.负责大模型全量数据的向量化检索和向量化排重服务,实现实时向量化排重系统; 2.通过向量化检索性能的优化,提升文本排重的准确率和性能; 3.建立大模型数据清洗的反馈机制和反馈系统,提升全网数据抓取效率; 4.参与大模型的数据工程开发,为大模型提供基础数据。
更新于 2025-11-21深圳