阿里云阿里云智能-AI产品评测工程师-杭州/北京
任职要求
1、计算机、人工智能、统计学、数学或相关专业，本科及以上学历，3年以上相关工作经验；
2、熟悉业界主流评测工具集和评测集，有独立设计执行评测经验；
3、熟练掌握…工作职责
1、构建科学高效的AI产品评测体系，能够识别现有评测体系的局限性，持续优化评测方法、指标和数据集； 2、熟悉评测方法论和工具链，能够搭建评测工具平台，执行评测方案并拿到评测结论； 3、具备AI模型和AI产品能力分析和迭代优化分析能力，根据评测结论提出优化建议，驱动优化落地； 4、关注业界前沿AI模型和产品发展，关注AI前沿评测方法发展，并转化为内部评测实践。
1、构建科学高效的AI产品评测体系，能够识别现有评测体系的局限性，持续优化评测方法、指标和数据集； 2、熟悉评测方法论和工具链，能够搭建评测工具平台，执行评测方案并拿到评测结论； 3、具备AI模型和AI产品能力分析和迭代优化分析能力，根据评测结论提出优化建议，驱动优化落地； 4、关注业界前沿AI模型和产品发展，关注AI前沿评测方法发展，并转化为内部评测实践。
1、构建科学高效的AI产品评测体系，能够识别现有评测体系的局限性，持续优化评测方法、指标和数据集； 2、熟悉评测方法论和工具链，能够搭建评测工具平台，执行评测方案并拿到评测结论； 3、具备AI模型和AI产品能力分析和迭代优化分析能力，根据评测结论提出优化建议，驱动优化落地； 4、关注业界前沿AI模型和产品发展，关注AI前沿评测方法发展，并转化为内部评测实践。
1. 构建科学高效的AI产品评测体系，持续优化评测方法、指标和数据集； 2. 搭建评测工具平台，执行评测方案并拿到评测结论； 3. 根据评测结论对AI模型和AI产品进行能力分析和迭代优化分析，提出优化建议； 4. 关注业界前沿AI模型和产品发展，关注AI前沿评测方法发展，并转化为内部评测实践。
1、设计AI产品评测体系 · 深入理解业务需求和AI应用场景，针对性的设计评测方法、指标和数据集； · 沉淀各类AI软硬件产品的标准化和个性化评测体系 2、产品能力分析 · 与评测团队紧密协作，根据产品能力和实际需求设计和迭代优化评测体系，并实际执行产品评测 · 结合评测结果对产品能力进行分析诊断，为产品迭代提供有价值信息 3、关注业界产品形态发展，持续迭代评测体系 · 持续跟踪全球AI大模型、Agent和应用产品的技术发展，关注评测体系变化 · 整合业界和头部厂商先进评测体系经验，转化为内部评测实践，持续迭代评测体系