安克创新AI算法评测工程师
任职要求
1. 教育背景：人工智能、计算机科学、电子工程、自动化、机器人学或相关专业本科及以上学历； 2. 经验要求：有实际视觉项目/竞赛经验，了解大模型推理/微调相关理论者优先； 3. 技能要求：熟练掌…
工作职责
1. 与算法、产品密切配合，共同制定视觉AI算法评测标准，设计测试方案与用例，包含感知、运动控制、决策等算法； 2. 熟悉智能硬件产品，专注视觉算法模块测试，构建贴近真实的测试环境，验证AI模型性能与边界能力，协同算法/嵌入式工程师迭代优化； 3. 数据驱动优化，面对不同类型产品，构建对应基于场景的标准化评测数据集，输出算法模型关键性能指标，进行badcase深度分析； 4. 评测体系搭建，建立标准化、可复用的AI模型评测流程与自动化工具链，提升测试覆盖率和效率； 5. 竞品分析：横向竞品AI能力评测，输出差异化分析报告，指导产品技术决策与卖点打造。
1. 与算法、产品密切配合，共同制定视觉AI算法评测标准，设计测试方案与用例，包含感知、运动控制、决策等算法； 2. 熟悉智能硬件产品，专注视觉算法模块测试，构建贴近真实的测试环境，验证AI模型性能与边界能力，协同算法/嵌入式工程师迭代优化； 3. 数据驱动优化，面对不同类型产品，构建对应基于场景的标准化评测数据集，输出算法模型关键性能指标，进行badcase深度分析； 4. 评测体系搭建，建立标准化、可复用的AI模型评测流程与自动化工具链，提升测试覆盖率和效率； 5. 竞品分析：横向竞品AI能力评测，输出差异化分析报告，指导产品技术决策与卖点打造。
1. 按照产品架构和业务要求，设计覆盖功能及非功能需求的质量保障策略，主要负责AI/算法类产品质量（如智能引擎、大模型应用）； 2. 参与产品系统架构建设和规划，针对AI系统特性进行专项测试方案设计，保障系统稳定性； 3. 解决测试复杂技术问题，开发适配算法服务的测试工具（评测数据集构造、模型效果评估等），提升效能与品质； 4. 研究测试新技术方法，重点推进AI算法评测、AI原生应用测试能力升级等创新方向，攻克算法领域特有质量难题； 5. 能结合AI行业发展趋势，制定合适的质量技术发展规划，提升团队技术视野和技术影响力。
1. 负责网商银行基于大模型等AI技术构造的智能化产品评测工作，确保业务场景中的模型效果、功能正确性、性能指标符合预期； 2. 负责构建智能产品对应模型的评测数据集，并持续运维评测集保障其高质量、有效性并可持续使用； 3. 根据评测集设定的目标业务指标和模型指标，进行评测结果badcase初步归因，支撑模型持续迭代； 4、开发适配算法服务的测试工具，例如评测集批量构建、自动化评测等。
1、负责飞书AI产品相关的评测工作，包含AI算法的评测体系建设、评测集构建、以及相关评测工程化建设等； 2、负责ASR、MT、NLP等相关领域产品的交付品质，制定合理的验收机制，来评估模型品质，指导模型优化方向； 3、负责AI算法的评测标准和评测流程制定，构建评测集，并推进评测执行，分析评测结果，对模型质量给予充分评估； 4、建设相关评测工具/平台，推动评测工程化和无人化。