荣耀AI测试技术高级工程师
任职要求
1、5年以上有AI领域评测工作经验,熟悉LLM、VLM、图像/视频生成编辑等领域最新测试技术研究和规划; 2、熟悉主流AI框架(如TensorFlow、PyTorch)及…
工作职责
1、洞察AI能力的技术发展方向与应用场景,制定最新测试技术研究规划; 2、制定AI能力相关算法模型的评测标准、测试方案,整体测试策略制定; 3、构建AI引擎关键测试能力,包括:测试数据集建设、数据标注能力、自动化测试能力等; 4、负责AI特性的行业横向测评,牵引模型能力优化与竞争力提升。
1. 设计并主导自动化测试框架与工具开发,提升测试覆盖率及效率,保障系统全链路质量; 2. 结合AI技术(如智能测试用例生成、缺陷预测等),优化测试策略,推动测试流程智能化与自动化; 3. 参与系统架构设计,确保可测性并制定风险场景的测试方案,覆盖稳定性及业务核心逻辑; 4. 通过产品方案、技术方案、代码分析等手段,识别质量风险以及资金安全风险,确保业务上线的资金安全; 5. 对测试过程和结果的不断优化,提高产品质量和研发效率,打造有影响力测试平台和测试框架。
1、负责阿里巴巴国际数字商业集团-数字零售技术部-业务技术平台的质量保障AI产品开发;有较强质量领域的AI相关产品的设计开发能力,包括不限于大模型Agent应用架构设计、工程实现、系统部署及迭代优化(大模型SFT、中长期记忆增强等); 2、能参与全球化电商、生态化、中台架构改造升级,解决可测性及系统稳定性保障问题。针对核心项目进行AI智能化的测试策略分析、方案制定、测试用例设计、测试任务执行、风险情况跟进等工作; 3、有一定的AI测试产品规划和设计研发能力。可开发或选型高适配的AI测试工具或者框架,提升整体测试效率和质量; 4、分析项目/团队内流程&实践中存在的痛点问题,提出有效可行的AI结合措施并推动落地实施。
1.平台产品与架构设计:负责AI测试平台整体产品规划与路线设计(Platform + Agent);定义平台能力结构(测试流程、Agent体系、数据体系);推动从工具化向平台化、从自动化向智能化演进; 2.AI/Agent产品设计:设计测试Agent能力体系(用例生成、执行、分析、决策);定义AI在测试流程中的角色(辅助 / 主导 / 自动闭环);推动AI能力在真实业务场景中的落地与优化; 3.跨团队协同与落地:协同技术团队(LLM/平台/工具链)推动能力实现;协同业务团队(游戏项目组)推动场景落地;建立标准化接入与规模化复制机制; 4.数据与质量体系建设:建立AI测试效果评估体系(覆盖率、缺陷质量、ROI等);推动数据闭环(数据采集 → 模型优化 → 效果提升);定义质量指标体系与平台化沉淀机制; 5.产品运营与生态建设:推动平台在多项目、多工作室的推广与应用;建立最佳实践与案例沉淀;持续优化产品体验与业务价值。
● 深度参与天猫核心业务的研发全流程,保障产品的功能及非功能需求质量。针对复杂业务场景,设计全链路测试策略,驱动业务目标高质量达成; ● 构建并持续优化业务全生命周期的质量保障体系,通过平台化、智能化手段提升质量评估效率,实现从研发到上线的闭环质控; ● 开发与维护高性能测试工具/平台,深入研究并应用自动化、精准测试、流量回放、数据脱敏等前沿技术,确保复杂分布式系统的高可用性; ● 探索并落地 LLM 在质量领域的应用,包括但不限于基于大模型的自动化代码生成、测试用例智能生成、研发风险智能识别、及全链路日志根因分析,实现质量效能的跨代升级; ● 构建端到端的 LLM 评测框架,针对天猫 AI 相关业务产品进行系统化评估,确保AI 应用在复杂商业场景下的鲁棒性;