
智能互联阿里控股-AI评测专家-AI模型
任职要求
1、计算机、人工智能、统计学、数学或相关专业,本科及以上学历;
2、5年以上工作经验,2年以上AI评测相关工作经验;
3、熟悉业界主流评测工具…工作职责
1、协同团队构建科学高效的AI大模型评测体系 · 协同推进大模型各主要方向(文本、多模态、Coding、智能体等)的评测框架设计,持续优化评测指标、数据集和评测方法; · 识别现有公开评测体系的局限性,探索并建设更真实有效的私有评测指标和数据集; 2、模型能力分析 · 与评测团队紧密协作,根据模型能力和实际需求设计、验证、持续迭代优化评测体系; · 结合评测结果对模型能力进行分析诊断,为管理团队和业务团队提供有价值信息; 3、关注业界前沿发展,持续迭代评测体系 · 持续跟踪全球大模型、Agent领域的技术发展和评测体系变化 · 整合业界和头部厂商先进评测体系经验,转化为内部评测实践,持续迭代评测体系
1、协同团队构建科学高效的AI大模型评测体系 · 协同推进大模型各主要方向(文本、多模态、Coding、智能体等)的评测框架设计,持续优化评测指标、数据集和评测方法; · 识别现有公开评测体系的局限性,探索并建设更真实有效的私有评测指标和数据集; 2、模型能力分析 · 与评测团队紧密协作,根据模型能力和实际需求设计、验证、持续迭代优化评测体系; · 结合评测结果对模型能力进行分析诊断,为管理团队和业务团队提供有价值信息; 3、关注业界前沿发展,持续迭代评测体系 · 持续跟踪全球大模型、Agent领域的技术发展和评测体系变化 · 整合业界和头部厂商先进评测体系经验,转化为内部评测实践,持续迭代评测体系
1、设计AI产品评测体系 · 深入理解业务需求和AI应用场景,针对性的设计评测方法、指标和数据集; · 沉淀各类AI软硬件产品的标准化和个性化评测体系 2、产品能力分析 · 与评测团队紧密协作,根据产品能力和实际需求设计和迭代优化评测体系,并实际执行产品评测 · 结合评测结果对产品能力进行分析诊断,为产品迭代提供有价值信息 3、关注业界产品形态发展,持续迭代评测体系 · 持续跟踪全球AI大模型、Agent和应用产品的技术发展,关注评测体系变化 · 整合业界和头部厂商先进评测体系经验,转化为内部评测实践,持续迭代评测体系

1、设计AI产品评测体系 · 深入理解业务需求和AI应用场景,针对性的设计评测方法、指标和数据集; · 沉淀各类AI软硬件产品的标准化和个性化评测体系 2、产品能力分析 · 与评测团队紧密协作,根据产品能力和实际需求设计和迭代优化评测体系,并实际执行产品评测 · 结合评测结果对产品能力进行分析诊断,为产品迭代提供有价值信息 3、关注业界产品形态发展,持续迭代评测体系 · 持续跟踪全球AI大模型、Agent和应用产品的技术发展,关注评测体系变化 · 整合业界和头部厂商先进评测体系经验,转化为内部评测实践,持续迭代评测体系
1. AI Native 采购流程架构设计与落地:将AI能力深度嵌入采购全生命周期——从需求感知、供应商寻源、智能比价、策略辅助、自动下单、履约跟踪到对账结算,识别并打通全流程中可无人化或人机协同的关键节点,建立端到端自动化工作流; 2. 数字采购员(AI Agent)的孵化与运营:设计、训练并持续迭代数字采购员,使其能够覆盖标准采购场景(如 供应商入库、自动下单、合同签约等)的全流程自动执行。定义数字采购员的能力边界、决策权限、人机交接机制,并建立持续优化闭环; 3. 采购AI Skills体系沉淀:构建可复用、可组合的采购AI技能库(Skills),涵盖招投标方案、风险检查、智能比价等等。建立Skills的版本管理、效果评估和迭代机制,让组织能力从"个体经验"升级为"系统资产"; 4. AI技术选型与前沿应用探索:持续跟踪大模型、Agent框架、RAG、多模态、代码生成等前沿AI技术演进,评估其在采购场景的应用潜力,参与AI工具/平台的路径选型、试点和规模化落地; 5. 采购数据与知识基建:搭建支撑AI应用的高质量数据底座,包括供应商知识库、历史谈判/合同语料库、品类策略知识图谱、市场价格基准数据等,确保AI的"燃料"充足且持续更新。