京东测试开发专家

任职要求

1. 五年以上测试开发经验，对业务理解、测试分析和设计、测试开发和执行具备一定的认知和实践深度；
2. 三年以上算法测试或AI产品评测经验，至少完整主导过1个AI产品评测项目；
3. 有团队指导经验，过往如果有AI评测相关的知识传承和流程规范化建设的优秀案例是很大的加分项；
4.熟悉业界主流、前沿的模型、Agent效果和性能评测的方法论和工具链；
5.优秀的逻辑分析能力，能针对模型和Agent失效场景提出可解释的归因结果和分析过程；
6.了解模型部署、Agent开发流程、SFT、RAG、MCP等技术原理和评测方法。

我们能提供
创新的前沿阵地：你将直接参与AI创新项目、拥有0-1定义AI全产品矩阵的评测体系的决策空间（硬件、模型、Agent、MCP工具），以及基于AI构建新一代的质量保障工具和产品；
广阔的实践场景：依托京东集团业务场景，让你的AI构想有最坚实的落地土壤、能力得到充分施展；
成长与丰厚的回报：提供行业内极具竞争力的薪酬待遇和清晰、快速的职业成长通道，贡献得到充分回报。  

符合京东价值观：客户为先、创新、拼搏、担当、感恩、诚信。

工作职责

我们是京东科技的核心B端企业服务团队，致力于探索和构建下一代企业服务。我们不仅拥有行业TOP级的灵工平台和持续增长的私域营销产品，更将目光投向由AI驱动的企业应用。
岗位职责：
一、负责给模型和Agent构建效果和性能评测体系、沉淀评测方法论、引入和建设AI评测工具链；
1. 模型效果和性能（部门部署和维护的大语言模型和多模态模型等）；
2. 垂类Agent（客服、质检、财税等垂类）；
3. 业务工具类Agent（解决既有业务特定场景的问题）；
二、与算法、产品、研发团队深度协同，参与AI产品全生命周期质量保障，推动评测结果驱动产品迭代；
三、定期组织分享和培训、提升部门对AI产品评测的整体认知和能力。