字节跳动高级产品运营经理（AI大模型评测方向）-抖音

任职要求

1、具备3-5年评测、标准、或策略工作经验，对模型技术应用抱有强烈热情；
2、对预训练语言模型、精调、PE、RAG等大模型技术有一定理解；
3、对于用户有较好理解和认知，和较好的内容理解力；能够从用户视角进行语料分析和效果评估；
4、具备一定规划和推动能力，自驱力，对行业发展有自己的思考，具备相对广泛的技术视野和较强的技术前瞻性；
5、逻辑清晰，能透过现象看本质，系统地思考与解决问题，能全局性的统筹协调复杂业务。

工作职责

1、效果标准制定：基于业务场景研究及语料分析，定义业务场景的标准及理想态效果；
2、评测体系建立：建立科学、公允、客观的大模型评测体系，帮助发现和分析问题，推动模型优化；
3、策略分析：结合用户洞察、行业分析、实验数据，深化评测分析，并探索优化策略，并推动产品研发迭代方案；
4、语料定义与生产：基于效果问题，定义高质量模型语料，协同标注团队交付标注结果；与算法团队协作，推动模型迭代。