夸克智能信息-千问/夸克-VLM训练与应用数据工程师-杭州/北京
任职要求
1.扎实的编程能力,精通数据结构、并发/异步编程,熟悉高效文件I/O与分布式文件系统
2.熟练使用图像与视频处理工具及常用文本处理库,具备复杂场景下的数据工程实战经验;
3.熟悉多模态数据(图像-文本、视频-文本等更多模态)对齐策略、模态融合机制和处理规范;
4.熟悉数…工作职责
我们致力于构建支持通用人工智能发展的高质量、多模态大规模训练数据集,服务于图像、视频、文本等复杂模态融合下的大模型研发。该岗位将主导多模态数据基础设施的设计、处理流程的智能化优化,并深度参与高价值数据(如推理类任务数据、领域权威知识数据)的构建与增强,为模型的理解力、泛化能力与推理能力提供坚实数据支撑。 你将与算法工程师、数据产品经理紧密合作,共同推动数据与模型的正反馈闭环,包括数据构建策略共创、实验验证、产品化数据标准制定等,在万卡集群的充足算力支持下,实现“数据即能力”的宏大目标。 主要职责: 1.设计与维护高扩展性、多模态数据基础设施 支持图像、视频、文本等模态数据的高效采集、存储、调度与版本化管理,满足大模型多轮训练与快速迭代需求。 2.构建推理能力导向的数据集 主导构建具备复杂因果关系、长链思维、多跳推理、模态融合推理、多语言对齐推理等能力评估或训练所需的数据集,服务大模型“理解-生成-决策”闭环。 3.高性能并行数据处理优化 在CPU/GPU集群或分布式环境中优化大规模图像/视频/文本混合数据的处理性能,提升数据准备效率与稳定性。 4.构建可视化与分析工具,辅助数据理解与反馈闭环 实现多模态数据分布可视化、异常聚类检测与质量诊断,服务于模型训练前/中/后的数据决策优化。 5.与算法工程师深度协同,提升模型性能与数据对齐度 基于模型效果与损失分析,共同制定数据增强策略、采样分布设计、多轮训练数据构造方法,实现数据与模型迭代的高效协同。 6.与数据产品团队合作,推进数据标准化与平台化建设 参与数据标签体系、任务定义、多模态对齐协议等的标准制定,推动数据处理工具、标注平台、数据质量评估体系的产品化落地。
1. 跨模态长程预训练:设计并实现文本、图像、视频等多模态对齐与融合的长程训练策略,操控万卡级 GPU 集群,协同 Pretrain / CPT / SFT / RLVR / RLHF 全链路,对超大参数基座模型进行高效分布式优化。 2. 前沿技术攻坚:深入探索 MoE 稀疏化、训练算法与对齐范式创新、可解释性与质量监控、多模态推理、mRAG、百万 Token 级长文处理、Agent&工具链机制等底层原理与技术。 3. 高性能训练框架持续升级:与系统团队共建张量并行、流水并行、混合精度等高性能训练框架,持续提升训练吞吐与稳定性。 4. 学术与行业影响力打造:快速跟踪 NeurIPS / CVPR / ACL 等顶会成果及开源项目,输出专利与论文,树立行业技术标杆 5. 高速驱动夸克AI相关业务:赋能夸克 AI 相机、AI 搜索·深度思考、DeepResearch、创意写作、AI 助手等核心产品,实现多模态能力的快速迭代与落地。 加入我们,你将获得 1. 顶尖资源:与行业专家并肩作战,万卡算力与海量数据随手可用,持续挑战技术天花板。 2. 高速成长:极具竞争力的薪酬福利与纯粹的工程师文化,为你的职业加速。 3. 时代机遇:亲历 AGI 关键技术的诞生与规模化应用,在智能时代留下你的名字。 如果你渴望驰骋于大模型与 AGI 的蓝海,这里就是你的最佳舞台。立即加入我们,共创智能新时代!
岗位描述: 全面负责夸克大模型在 Post-Training 能力进化和上限突破、持续推进模型能力边界和商业价值的不断延伸。通过对前沿算法的极致探索和高效能工程体系的构建,驱动模型在逻辑推理、问答、复杂多轮上下文、指令遵循、Agent 智能体、多模态交互等关键领域实现突破性进展,打造世界一流的模型效果,并定义其在未来 AI 应用中的核心价值。 工作职责: ● 【战略规划与技术引领】 制定并执行大模型 Post-training 的中长期技术路线图,预判并布局下一代对齐技术、能力增强及对齐方案。主导核心算法的战略方向,确保技术路径与公司业务战略高度协同。 ● 【核心能力与壁垒构建】 领导团队进行体系化的数据驱动实验,不仅局限于日常迭代,更要建立可规模化的能力提升范式。您将攻坚并解决模型在复杂指令遵循、通用问答、RAG、深度逻辑推理、内容创作、Tool-Using 等方面的瓶颈问题,构建技术壁垒。 ● 【前沿算法研究与创新】 深入探索并推动 Post-training 领域的前沿算法创新,包括但不限于 RLHF/RLAIF 的新范式、模型融合 (Model Fusion/Merge) 、模型蒸馏及 MoE 模型的高效对齐策略。您的目标是显著降低模型幻觉、提升推理的效果、加强模型复杂指令的遵循能力。 ● 【多模态与未来探索】 从统一多模态模型的战略视角出发,您将指导并规划多模态统一大模型的 Post-training 技术融合。探索并落地高效的多模态 SFT 数据构建、跨模态能力协同训练及对齐策略,确保模型在图文问答、视频对话 等复杂场景下实现无缝、精准的理解与生成。 ● 【团队领导与效能提升】 负责 Post-training 算法团队的组建、培养与管理,打造一支具备高效执行力和持续创新能力的顶尖团队。您将指导并优化从研究、实验、评测到部署的全链路工具链与工程框架,实现研发效能的倍增。
1. 产品规划与设计: 负责办公领域独立产品的整体规划与体验设计。结合公司业务战略、AI技术演进趋势与用户在办公场景中的真实需求,制定清晰的产品架构与落地方案,确保输出内容在专业性、准确性、一致性及合规性方面达到高标准。 2. 场景驱动的体验创新: 深入挖掘用户在写作、翻译、信息处理、会议等核心办公场景下的痛点。运用 LLM、VLM、ASR、TTS等技术,提出创新的产品解决方案,并持续迭代优化。 3. 全生命周期管理: 主导AI办公产品从POC、0到1再到N的全生命周期管理,制定清晰的产品发展路线图与上线节奏,确保核心功能高效、稳定地快速迭代与落地。 4. 跨团队协同推进: 与业务、技术、算法、UED、工程等团队紧密协作,高效推动跨部门资源整合与项目执行,确保产品目标与用户体验双达标。 5. 行业洞察与策略支持:持续跟踪国内外AI办公工具的产品动态,结合用户反馈与数据分析,为产品迭代和商业化策略提供前瞻性建议。
团队亮点: 1、技术前沿性:主导下一代多模态搜索技术体系构建,探索大模型与搜索的深度融合 2、业务影响力:直接服务亿级用户,优化夸克、千问APP、AI眼镜等核心产品的搜索体验 3、数据与场景优势:基于百亿级图文/视频库及海量用户真实场景需求,攻克多模态对齐与检索难题 核心职责: 您将负责构建面向千问APP、夸克APP、AI眼镜等产品的统一多模态搜索技术体系,覆盖全网图文检索、图视检索、图图检索等核心能力,支撑全网搜索、智能拍搜、多模态RAG等关键场景 1、构建多模态内容理解-语义检索-语义匹配全链路技术方案,涵盖在线侧多模态query理解、embedding模型、Rerank模型,以及离线侧图片/视频/商品等内容理解和图文对齐能力建设 2、依托海量用户query和百亿图片/视频库,大模型驱动的建模范式持续创新,持续优化提升检索性能 3、核心技术攻坚:在细粒度检索、指令化检索、海量图文对齐、视频语义对齐等难点任务上的能力突破