荣耀大模型评测产品经理
任职要求
1、技术背景
- 计算机/人工智能相关专业硕士及以上学历，3年以上AI产品经验；
- 熟悉大模型原理（LLM、多模态）、模型部署调试及提示词调优；
2、产品经验
- 有大模型评测体系设计或实践经验；
3、项目管理
- 能独立编写PRD、技术方案，推动复…工作职责
1. 通过分析各类场景特点，制定和拆解出对应的模型指标体系和评测规范； 2. 配合算法团队，构建合理、高效的评测流程和评测工具； 3. 配合测试和标注团队，构建高质量的数据标注体系和线上质量监控体系； 4. 有数据sense，可以基于数据结果分析模型或系统问题，驱动问题优化。
阿里云旗下的 Al Coding创新团队，致力于革新软件开发 paradigm。我们正在打造下一代AI驱区动的智能开发工具产品，旨在彻底改变开发者的工作方式。我们的产品覆盖 Al native IDE、智能编程助手等多元化产品形态，通过尖端 AI 技术提供智能化功能和流畅体验，显著提升开发效率与创新力。我们正寻找富有激情、创造力和前瞻性思维的精英人才加入，共同定义软件开发的未来。 1. 负责基于大语言模型的AI Coding产品核心能力的开发工作，实现复杂问题分析与理解、代码生成与测试等功能，包括AI Coding智能体、复杂工程理解、自动化记忆感知、大规模知识管理等。 2. 负责大模型训练相关工程与算法能力，例如模型数据合成、模型与智能体评测、与算法团队合作模型训练等工作。 3. 持续优化和改进平台架构，提高系统的可用性、稳定性和扩展性。确保全球化多地域复杂分布式架构的稳定与高性能。 4. 跟踪最新的人工智能技术进展，评估并实现可能的技术解决方案以满足业务需求。 5. 与产品经理和运营团队紧密合作，确保技术实现能够满足产品规划和用户需求。
1. 参与并负责严选事业部AI类相关应用的需求分析、场景挖掘、产品设计与落地，落地场景涵盖商品开发、渠道销售、客户服务、供应链、数据分析等核心工作流程； 2. 负责LLM和Agent的引入与应用，包括模型选型、Agent搭建、Prompt设计、流程设计、工具集成、应用效果评测等工作，为最终产品和应用的效果负责。
1. 参与负责教育AI类相关功能的产品设计，包括用户需求洞察、调研、数据分析等工作 2. 负责大模型在教育领域的产品应用，相关的多模态、Agent的落地策略、Prompt设计、构建评测体系等工作，为最终产品的领先效果负责 3. 与相关协作产品团队、开发测试团队配合，推进项目落地
1. 负责AI机器学习/大模型研发平台等核心AI平台产品的规划与设计，包括数据处理、训练推理、微调、强化学习以及评测全链路产品，重点服务大模型研发与应用等核心场景，提升AI全流程研发与应用效率； 2. 结合大模型技术，打磨产品能力的同时，探索通过智能化方式解决平台问题，打造业内领先的下一代智能AI平台； 3. 深入挖掘用户需求，结合业内竞品及技术发展趋势，将用户诉求抽象提炼为具有通用性、前瞻性的产品需求，完成方案设计，并以owner心态把控和推动产品进度，确保产品功能按时按质交付，并跟踪效果； 4. 制定产品的市场推广策略，主动跟进市场和客户反馈，闭环产品规划。