高德地图高德-模型数据运营与评估产品经理-北京
任职要求
● 数据科学背景: 极强的数据敏感度,有大规模 NLP 数据清洗、去重、配比经验。 ● Eval 设计经验: 参与过大模型评测集的构…
工作职责
● 构建空间智能(世界模型,当前高德世界模型业内 sota) Benchmark: 从高德海量的历史行为数据中,提炼出评估模型“空间推理能力”、“多地点规划能力”、“地理常识”的黄金测试集(Golden Set),建立对标业内顶级模型的客观评测体系; ● 复杂推理链数据生产: 设计并生产针对导航规划的思维链数据。不仅告诉模型“走哪条路”,还要通过数据教会模型“为什么要走这条路(考虑红绿灯、天气、临时封路)”,提升模型的可解释性; ● 合成数据探索: 利用高德的仿真引擎生成极端场景(长尾路况、复杂立交桥)的合成数据,用于训练模型的鲁棒性,弥补真实数据的不足; ● 数据飞轮建设: 设计从用户反馈(如“用户偏航”、“手动切换路线”)自动转化为模型负样本的闭环流程。
ByteIntern:面向2027届毕业生(2026年9月-2027年8月期间毕业),为符合岗位要求的同学提供转正机会。 团队介绍:CQC(中国内容质量与数据服务平台)归属于抖音集团,负责今日头条、抖音、西瓜视频等产品内容和抖音集团商业内容的安全质量与体验,支持各产品的运营和增长,以及为产品线提供AI算法算力的基础支持服务。 1、基于安全策略需求,负责为算法训练提供高质量数据支持,覆盖数据挖掘、筛选、清洗及标注规范制定; 2、通过SQL及数据分析工具,深入挖掘线上数据,定位模型安全能力短板,输出可量化的优化方向; 3、与下游标注团队紧密协作,承担精标项目的需求对接、任务拆解与进度跟进,保障数据交付质量与效率; 4、参与安全策略效果评估,结合准确率、召回率等核心指标,持续跟踪数据投入对模型能力的提升效果。
负责AI模型训练及评测相关的数据运营工作,与算法团队配合不断优化提升AI模型效果。具体工作内容包括: 1. 明确大模型训练及评测场景中的数据需求,进行需求梳理、方案制定和质检,交付高质量数据; 2. 建立有效的培训、质检、沟通等机制,保障数据的高质量高效率交付; 3. 建立有效的数据分类和管理机制,为相关团队提供高效可靠的数据获取方案; 4. 与各相关部门保持良好沟通,收集并协调各方数据需求,为项目提供数据运营相关支持。
1、负责部分训练数据清洗、预处理管道的维护工作,为模型训练奠定基础; 2、编写高质量、模块化、可测试的Python代码,并严格遵循代码规范; 3、负责实现并维护大模型评测过程中的评估指标(如各种自定义评估任务); 4、参与日常尺度拉齐、执行监督纠偏等工作,对技术方案落地负责; 5、扎实的线上问题排查能力,擅长阅读和分析复杂的系统/应用日志,能够快速从报错信息中定位到核心问题。
1. 预训练语料策略与体系搭建,负责大模型预训练阶段的数据策略,覆盖通用语料、垂直领域语料的全流程数据方案设计。 2. 主导数据评估:建立清晰可量化的数据评估标准,提高评估效率;验证数据有效性,推动模型迭代; 3. 数据驱动的模型迭代,深度理解预训练技术原理,通过数据分析定位模型能力短板,制定针对性数据补充策略,推动模型技术迭代升级。 4. 前沿探索,保持对开源模型(如DeepSeek、Qwen等)及学术前沿的敏锐度,沉淀可复用的数据方法论,为团队提供中短期数据策略规划。 5. 与算法、技术团队合作开发数据工具链,主动发现问题,发起项目,管理数据生产团队,把控数据质量与项目进度,推动跨团队高效协作,确保数据按时高质交付。 6. 主导垂直领域语料体系的从0到1搭建(包括但不限于人文/学科/code等体系),能够定义各体系的质量标准,并设计可量化的评估指标。