阿里巴巴智能算法产品事业部-技术战略发展部 - ToC产品运营（评测方向）-北京/杭州

工作描述

任职要求
- 至少 3 年聚焦在搜索 / 推荐 / 内容质量 / 评测体系，有团队管理经验优先；
  - 深入理解电商场景的搜推业务链路（query 理解、召回、粗排、精排、重排、多目标）以及对应的质量痛点；
  - 主导过 0→1 或 1→10 的评测体系搭建，包括标准制定、流程沉淀、平台化建设；
  - 熟悉 NDCG / GSB / side-by-side / preference labeling等主流主观评测方法，能根据业务场景设计合适的方案；
  - 数据敏感，能够从主观评测样本中识别系统性问题并量化影响。

  强烈加分
  - 有 LLM-as-a-judge / 模型自动评测的设计或落地经验，理解硅基评测的偏差来源与校准手段；
  - 有 RLHF / 偏好数据 / 评分模型 训练数据建设的经验；
  - 在头部电商（综合 / 垂类 / 跨境）担任过搜推质量或评测负责人；
 …