传音资深AI产品经理(大模型评测方向)(J17158)
社招全职3年以上地点:上海状态:招聘
任职要求
1、本科及以上学历,研究生学历优先,有AI相关技术背景、评估和数据分析背景优先; 2、具备AI、搜索、策略等3年以上评测经验,至少一年大语言模型方向评测工作经验; 3、对预训练、SFT、提示词工程等大模型技术原理有深入理解; 4、具备对用户体验的理解和认知,能从用户实际使用视角分析和发现问题; 5、具有头部互联网或者大模型公司工作经验优先;
工作职责
1、负责设计和建立全面、科学的大模型评测体系,涵盖性能、效果、安全性、可用性等多维度的指标与方法,持续追踪行业领先的大模型; 2、负责定义自研语音助手大模型和智能体的能力标准,构建评测体系和评测工具,对线上用户实际使用体验进行分析和跟踪; 3、负责横向与友商语音助手进行对比评测,分析产品优劣势,为产品迭代优化提供指导方向; 4、与模块产品、数据生产、标注、算法、测试团队通力合作,推动提升领域模型效果,牵引产品体验和能力提升;
包括英文材料
学历+
数据分析+
[英文] Data Analyst Roadmap
https://roadmap.sh/data-analyst
Step by step guide to becoming an Data Analyst in 2025
SFT+
https://cameronrwolfe.substack.com/p/understanding-and-using-supervised
Understanding how SFT works from the idea to a working implementation...
大模型+
https://www.youtube.com/watch?v=xZDB1naRUlk
You will build projects with LLMs that will enable you to create dynamic interfaces, interact with vast amounts of text data, and even empower LLMs with the capability to browse the internet for research papers.
https://www.youtube.com/watch?v=zjkBMFhNj_g
相关职位
社招产品运营类
1. 推动大模型在不同场景下的最佳应用方式。结合用户需求,优化 AI 产品的交互逻辑,确保 AI 能在用户真实需求场景下提供有效信息。 2. 参与 AI 产品的优化,推动数据标注、模型评测,与内部AI团队合作,推动提升 AI 生成内容质量,优化 AI 在不同场景下的表现。 3. 熟悉 B 站内容生态,深入理解B站用户消费路径和内容品类结构。
更新于 2025-07-21
社招2年以上网易游戏(互娱)
1、负责 AI (AIGC+LLM)领域产品的核心产品规划和设计; 2、负责梳理业务需求,调研行业发展趋势,制定切实可行的AI产品策略; 3、负责AI模型的用户体验和反馈分析,持续优化产品力; 4、深入了解AI业务场景、用户需求和痛点,促进业务创新,产品落地; 5、对接和推进组织内部其他相关团队,对AI人工智能的应用,推进业务优化; 6、持续学习前沿的AI大模型领域的新技术,研究AI竞品情况,探索AI业务应用新领域。
更新于 2025-09-01
社招A135118
1、结合大模型算法,设计并落地先进的AI产品或解决方案(如AI数据分析、智能工作流生成等),优化产品性能与海外用户体验; 2、调研海外用户场景(如企业管理、协作流程),通过数据分析挖掘核心需求,撰写PRD并推动功能迭代,持续提升产品竞争力; 3、主导面向海外市场的AI功能设计; 4、负责海外产品策略制定与落地,推动多维表格商业化,平衡用户体验与商业价值; 5、深度协调研发、数据科学家、设计及运营团队,明确项目目标与排期,确保AI功能高效交付并对结果负责; 6、持续关注AI技术动向(如多模态生成、智能Agent)、行业竞争及用户反馈,快速迭代产品策略,保持技术领先性。
更新于 2025-06-19