蚂蚁金服蚂蚁集团-大模型语料建设专家-杭州
社招全职8年以上技术类-数据地点:杭州状态:招聘♡ 收藏
工作描述
任职要求 1. 8年以上数据工程、数据仓库或大规模数据处理经验,其中至少2年深耕大模型训练数据/语料建设,有TB级以上语料处理或从0到1语料体系落地的成功案例; 2. 深刻理解LLM训练数据飞轮与Scaling Law对数据规模、质量、配比的约束,有数据配比实验设计经验,并能给出对模型效果的可量化贡献; 3. 精通大规模语料处理Pipeline架构设计(去重、去污染、质量分层),熟悉主流数据质量评估方法与工具链,有自建评估基准集的经验; 4. 具备训练数据合规治理实战经验(版权、隐私、毒性及敏感信息过滤),熟悉集团内外部数据合规红线; 5. 扎实的工程能力(精通Python/Go/Java其一,熟练使用Spark、HiveSQL等大数据工具),能穿透到代码与数据细节定位复杂问题; 6. 具备跨团队协同与技术影响力,能驱动算法、产品、工程团队就语料标准与验收达成一致,有团队培养或技术规划经验。 加分项 1. 有头部互联网公司大模型数据集建设经验,或主导过支撑千亿/万亿参数模型训练的语料供给项目; 2. 有多模态语料(PDF解析、OCR后处理、音视频…
登录查看完整工作描述
微信扫码,1秒登录
包括英文材料
数据仓库+
https://www.youtube.com/watch?v=9GVqKuTVANE
From Zero to Data Warehouse Hero: A Full SQL Project Walkthrough and Real Industry Experience!
https://www.youtube.com/watch?v=k4tK2ttdSDg
大模型+
https://www.youtube.com/watch?v=xZDB1naRUlk
You will build projects with LLMs that will enable you to create dynamic interfaces, interact with vast amounts of text data, and even empower LLMs with the capability to browse the internet for research papers.
https://www.youtube.com/watch?v=zjkBMFhNj_g
系统设计+
https://roadmap.sh/system-design
Everything you need to know about designing large scale systems.
https://www.youtube.com/watch?v=F2FmTdLtb_4
This complete system design tutorial covers scalability, reliability, data handling, and high-level architecture with clear explanations, real-world examples, and practical strategies.
Python+
https://liaoxuefeng.com/books/python/introduction/index.html
中文,免费,零起点,完整示例,基于最新的Python 3版本。
https://www.learnpython.org/
a free interactive Python tutorial for people who want to learn Python, fast.
https://www.youtube.com/watch?v=K5KVEU3aaeQ
Master Python from scratch 🚀 No fluff—just clear, practical coding skills to kickstart your journey!
https://www.youtube.com/watch?v=rfscVS0vtbw
This course will give you a full introduction into all of the core concepts in python.
Go+
https://www.youtube.com/watch?v=8uiZC0l4Ajw
学习Golang的完整教程!从开始到结束不到一个小时,包括如何在Go中构建API的完整演示。没有多余的内容,只有你需要知道的知识。
还有更多 •••
相关职位
社招3年以上技术类-开发
1. 具备大规模数据处理经验,熟悉网页、文档、文本、图片及音视频等多模态语料数据处理技术,对语料清洗、去重、过滤、结构化、对齐及质量评估等关键流程有深入理解; 2. 熟悉分布式数据计算与存储技术,如
更新于 2026-07-01北京|杭州
社招3年以上技术类-算法
1. 硕士及以上学历,计算机科学、人工智能或相关专业背景。 2. 熟练掌握机器学习、自然语言处理、大语言模型等相关领域的基本理论和算法,具备扎实的数学基础。 3. 熟练掌握Python编程语言,熟悉主
更新于 2026-10-09北京|杭州
社招3年以上技术类-开发
1. 主导设计和落地过大规模AI语料数据处理平台或数据生产系统,具备从0到1或大规模演进语料数据体系的经验,能够从工程架构层面构建支撑语料数据全生命周期的系统能力; 2. 具备大规模数据处理经验,熟悉
更新于 2026-07-01北京|杭州