阿里云阿里云智能-机器学习PAI平台研发专家-MLOps/Agent方向(北京、杭州)
任职要求
基本要求: 1. 本科及以上学历,计算机相关专业 2. 3年以上机器学习平台工程或大模型算法开发经验 3. 熟练掌握至少一门编程语言(Java/Python/C++/GO),有扎实的计算机基础和研发背景 4. 精通后端服务开发,掌握OpenAPI、微服务、k8s、容器等相关知识和技能 5. 良好的表达、沟通和团队协作能力…
工作职责
1. MLOps平台开发打造一站式大模型开发平台,负责主流开源和闭源模型的训练、评测、蒸馏、压缩、部署全链路工具开发 ● 参与模型各种后训练如微调、蒸馏、强化学习的产品化,以及vLLM/sglang/自研推理引擎的优化,提供有竞争力的推理性能 ● 负责各种MLOps工具链开发,如AI资产管理、实验管理、血缘跟踪、评测对比等,帮助用户串联AI开发全流程,提升模型开发效率 ● 负责多模态数据自动标注和挖掘功能的开发,为智驾和具身智能客户提供新一代的数据工程解决方案 2. 企业级Agent开发平台建设 ● 建设具备全模态能力的agent开发平台,帮助客户构建RAG、chatbot、data agent、design agent、research agent等各种AI agent应用 ● 提供白盒化开发模式,建设全链路的可观测、可调试和监控能力,帮助用户构建同时具备高精度和高性价比的agent应用 ● 针对企业客户对安全隐私的强需求,构建全方位的安全防护能力,包括不限于模型安全护栏、工具沙箱、细粒度权限管控等 ● 与阿里云大数据、智能搜索等业务产品合作,建设阿里云agent工具生态
阿里云PAI团队致力于打造业界一流的一站式AI工程化平台,拥有万卡级训练能力与超大规模异构资源调度技术,为复杂模型训练与推理任务构建坚实基座。PAI平台不仅是通义大模型研发与落地的核心基础设施,也作为公共云服务的关键载体,支撑众多行企业构建大模型核心业务。平台提供从数据标注、预处理、模型训练、推理服务到开发环境与工作流调度的全链路工程支持,全面覆盖AI项目从实验探索到规模化落地的完整价值链。作为平台研发工程师,您将深度参与以下工作: 1. 负责大规模异构资源管理与模型训练服务的全流程开发,包括需求分析、架构设计、软件开发、质量保障与部署上线。 2. 持续开展系统模块的深度剖析与迭代优化,提升资源利用效率、任务成功率与启动速度,降低使用门槛,增强产品满意度与客户粘性。 3. 负责平台线上环境的实时监控、故障定位与性能调优,为客户提供及时的专业技术支持,保障平台服务的高可用与高稳定运行。 4. 紧密追踪大模型、AIGC等前沿技术趋势,洞察并提炼高价值用户需求,推动平台功能持续演进与技术架构升级。
● 负责PAI平台深度学习框架的研发,包括但不局限于MoE模型大规模训练框架、多模态训练框架、RLHF训练框架等,支持包括通义实验室、阿里集团等不同领域方向;参与包括基模型Pretrain、SFT等多个阶段的训练任务优化; ● 致力于提升不同阶段模型训练负载的极限吞吐,能够针对不同模型负载系统化的分析不同阶段耗时并提供相应的优化手段,优化手段包括但不局限于算子优化、通信优化、分布式策略优化等; ● 负责超大规模训练任务的稳定性的设计,通过各种手段来提升训练任务的有效吞吐,构建更可靠的故障检测系统和自愈系统,提供超大规模训练任务的丝滑体验。 ● 参与训练框架对于不同硬件的支持和优化。
1. 参与模型服务平台的整体架构设计与核心开发工作,主导大模型多机分布式推理系统的研发与优化,以高效支撑日益增长的业务需求和产品迭代; 2. 负责解决大模型推理过程中高并发场景下的关键技术问题,包括但不限于负载均衡、请求调度、多机组网通信、系统容错机制、KV Cache 高效管理等; 3. 推动模型服务平台的产品化建设,主导或参与大模型分发系统、LLM推理引擎、请求调度系统等核心模块的设计与开发; 4. 负责大规模GPU集群的稳定性与性能优化,构建完善的可观测性系统,提升平台安全性与可靠性,推进资源调度系统的智能化升级; 5. 根据用户反馈快速定位并解决线上问题,深入分析业务需求,将高频使用场景沉淀为平台通用能力,持续提升平台的易用性与功能性。
1. 研发需求洞察与设计:负责阿里云人工智能平台PAI的需求讨论、架构设计、软件开发、功能测试及部署上线,确保项目从初始阶段到交付的全流程高质量执行; 2. 系统优化:从功能、性能、可用性、易用性等多个维度,结合产品设计、产品设计和解决方案架构及客户反馈,进行系统各模块的持续分析和优化,降低用户使用门槛,提升用户满意度和忠诚度; 3. 技术支持与维护:负责线上环境的运行监控与问题定位,与SRE和售后团队紧密协作,及时为客户提供技术支持,保障平台的稳定运行; 4. 前沿技术开发:紧贴大模型及AIGC等业界趋势,提炼并反馈有价值的用户需求,持续增强和改进平台的功能,保持技术的先进性和市场竞争力。