小米AI测试专家
任职要求
1、本科及以上学历,计算机、数学、统计学、模式识别、图像处理等相关方向; 2、熟练掌握至少一种编程语言(如 Python、Java 等),具备良好的代码编写与调试能力,能够独立开发自动化测试脚本与工具。 3、对当前AIGC大模型算法评估有成体系的方法论,主客观评价方法都较为精通,对主流AIGC大模型算法的评价指标较为了解 4、有AI图像、自然语言(NLU,NLG)、多模态等一种或多种算法的评估测试经验,有大模型方面测试经验优先; 5、关注CVPR,NeurIPS, AAAI等…
工作职责
1、负责AI算法的质量保障工作,负责算法效果的测试框架和测试标准的搭建; 2、分析业务产品需求、技术方案,负责测试方案的设计,制定合理高效的测试方案; 3、AI测试体系建设,构建AI原子能力、大语言模型、多模态感知、AIGC等算法的评测模型; 4、与产品经理、开发工程师、算法工程师等密切协作,参与产品的需求评审、设计评审与代码审查等环节,提前介入产品开发过程,提供测试视角的意见与建议,促进产品质量的前置保障。 5、编写详细、准确的测试报告,向项目团队、管理层及相关利益者汇报测试进展、发现的问题、质量状况及改进建议,确保各方对产品质量有清晰、全面的了解与认识

- 负责风控领域数据测试,包括离线、实时数仓及全链路测试,构建多维度监控体系覆盖数据准确性、一致性、完整性、时效性,能通过算法或者大模型提前识别潜在数据问题。构建质量预警能力和数据质量基线,通过实时检测和定期巡检,提前发现问题并建立数据血缘,快速定位数据根因,评估影响范围,缩短问题修复时间 - 参与数据风险治理,能识别业务风险和推动治理,沉淀治理能力提升质量保障 - 大模型测试全流程工作,全链路功能测试,全链路压测,大模型评测体系建设,基座模型和应用模型,评测集管理、评测流程建设、评测工具需求制定和落地并输出评测报告。 - AI测试平台构建,构筑测试工具提升效率,先进技术的测试技术研究规划,推动测试技术,工具平台的突破和创新 - 深入理解风控策略逻辑,结合电商、社区、信贷、反欺诈、反洗钱等业务场景,针对风控模型(如评分卡、决策树、机器学习模型等)的准确性、稳定性、区分度等核心指标开展专项测试。 - 搭建与优化数据/模型测试体系,制定测试标准、规范及方法论,提升测试效率与覆盖度,保障风控数据与模型在生产环境的可靠运行。 - 参与风控系统迭代优化工作,从测试角度提出风险防控建议,保障系统安全性与合规性。
1、洞察AI能力的技术发展方向与应用场景,制定最新测试技术研究规划; 2、制定AI能力相关算法模型的评测标准、测试方案,整体测试策略制定; 3、构建AI引擎关键测试能力,包括:测试数据集建设、数据标注能力、自动化测试能力等; 4、负责AI特性的行业横向测评,牵引模型能力优化与竞争力提升。
构建面向智能计算时代的下一代AI质量保障体系,驱动专有云智算、大模型等核心AI产品的卓越质量交付,同时通过AI技术重塑软件测试范式,打造智能化、前瞻性的测试基础设施: 1、 负责专有云智算平台(含GPU资源调度、高性能存储/网络组件)、大模型服务产品的全链路质量体系建设 2、同时能够将AI技术深度融入软件测试全流程,通过AI技术驱动测试效率提升、质量优化和流程变革 3、主导AI测试工具研发、智能化测试体系建设,并为团队提供AI技术在测试领域的前沿解决方案。