字节跳动高级策略产品经理（AI大模型评测方向）-抖音

任职要求

1、对预训练语言模型、精调和提示过程等大模型底层技术有一定理解，能从模型视角分析问题；
2、聪明、勤奋，对AI的实现充满热情，有主人翁精神，擅长沟通与管理；
3、有用户感知：能从用户的视角，洞察其当前与潜在的底层需求；
4、逻辑清晰，能透过现象看本质，系统地思考与解决问题，能全局性的统筹协调复杂业务；
5、加分项：有大语言模型相关领域的技术、评测、产品从业经历，具备AI产品、互联网产品等工作经验。

工作职责

1、负责抖音AI分身大模型效果评测的体系设计、执行与结论分析，提出有价值的改进建议，进而提升大语言模型效果与应用体验；
2、评测的体系设计：充分理解用户需求，明确评测目标，制定合理的评测标准，协同评测团队一起建设科学、公允、客观的大模型效果评测体系；
3、评测的落地执行：能统筹规模化评测团队进行人工评测，能协同算法构建自动化评测能力；
4、评测的结论分析：能给出清晰、有逻辑的评测结论，并从模型效果优化视角给出优化建议。