智能互联千问事业部-高级测试开发工程师-杭州
任职要求
1. 本科及以上学历，计算机相关专业； 2. 有3年以上测试或质量保障经验，有 AI / 大模型相关经验优先； 3. 熟悉至少一种自动化…
工作职责
1. 负责千问相关产品的质量保障工作，构建大模型产品质量体系，保障产品高质量交付； 2. 覆盖大模型全链路质量（功能、性能、稳定性、监控、容灾），挖掘业务 badcase，设计并落地自动化测试与模型评测平台，推动模型优化闭环。
1. 负责千问大模型产品（对话/搜索/图像/文档/语音等全场景）的质量保障工作，构建和完善大模型产品质量体系，保障产品高质量交付； 2. 覆盖大模型全链路质量（功能、性能、稳定性、监控、容灾），深入各业务线场景挖掘 badcase，推动问题闭环和模型优化； 3. 参与评测体系建设和用例体系建设，设计和维护金标用例集，提升评测覆盖率和准确性； 4. 与算法、产研团队紧密协作，建立质量度量指标和监控机制，为模型迭代和产品优化提供数据支撑； 5. 支持多语言、多模态等业务场景的质量验证，确保全球化产品的本地化体验。
1. 负责智能 AI/Agent 类产品的质量保障体系建设，覆盖从需求评审、开发测试到上线监控的全生命周期； 2. 建立基于业务场景的质量评估模型，搭建自动化评测pipline，覆盖意图识别准确率、工具调用成功率、多轮对话连贯性及最终结果可用性； 3. 负责端侧业务交互链路的质量保障，确保多模态交互的流畅性、正确性等核心性能体验监控、优化推进； 4. 主导评测数据集构建与持续维护，建立 Badcase 分析与归因机制，推动算法/工程侧的质量改进闭环； 5. 规划并落地测试工具链、数据构造引擎及线上异常监控体系，将 AI 前沿技术（如 LLM-as-a-Judge、Agent 自动评测）转化为团队生产力； 6. 带领测试团队成长，提升团队对 AI 技术的敏感度与应用能力，沉淀 AI 质量保障的最佳实践。
1、负责网盘、AI助手（AI PPT/写作）产品的业务质量保障工作，参与产品需求和架构设计评审，评估技术架构合理性和可测性； 2、构建适合业务发展的质量保障体系，推进质量分析和改进，通过风控、流程，策略，方法和工具等创新，提升测试质量和效率，保障产品高质量交付； 3、 通过线上监控建设、用户行为，业务和技术指标分析，问题trace能力建设保障线上服务稳定性以及驱动用户体验不断提升； 4、 通过业务全链路数据分析、效果评测、竞对分析等手段帮助业务找到目标达成路径的核心问题，驱动解决，赋能业务；
1、负责千问智能创作、AI助手、网盘、智能学习等产品的业务质量保障工作，参与产品需求和架构设计评审，评估技术架构合理性和可测性； 2、构建适合业务发展的质量保障体系，推进质量分析和改进，通过风控、流程，策略，方法和工具等创新，提升测试质量和效率，保障产品高质量交付； 3、通过线上监控建设、用户行为，业务和技术指标分析，问题trace能力建设保障线上服务稳定性以及驱动用户体验不断提升； 4、通过业务全链路数据分析、效果评测、竞对分析等手段帮助业务找到目标达成路径的核心问题，驱动解决，赋能业务。