字节跳动大模型应用专家(商业化内容安全)-大模型安全&模型运维
任职要求
1、本科及以上学历,数学/计算机/经管/HCI背景优先,有模型训练、业务流设计、策略设计、内容治理类工作经验者优先; 2、有机器学习基础,对传统模型和大模型技术有深刻认知,明晰算法在机审场景的应用方法,ACM挑战赛获奖者优先,在ACL、EMNLP、NAACL、COLING、ICCV、ECCV、CVPR、NeurIPS、ICLR、AAAI、CoNLL、NLPCC发表过期…
工作职责
1、负责内容安全、反作弊、青少年保护等多安全业务场景的模型运营,支持模型结构设计、数据工程、模型训练迭代、模型效果评估等全链路工作,保证业务需求稳定交付;负责Autope、Auto Workflow、Multi Agents、类Manus等原子能力构建,系统输出实验认知,并应用在解决成熟业务问题上,攻克业务治理瓶颈; 2、灵活应用传统文本、计算机视觉、图网络等相关模型,及各模态大模型与新型生产工具,掌握系统实验方法,持续突破模型准召天花板,兼具经营思维,擅长选ROI最优的解,沉淀认知并抽象业务范式,平衡治理需求与业务增长需求; 3、与跨业务线产品运营、算法团队合作,高效、规范项目管理,了解并持续跟进大模型技术原理,支持团队专利沉淀,在各业务场景治理效果、效率上持续领跑行业。
1、模型运营:为特定任务选择最合适的模型,排查模型性能问题或错误,并及时向模型开发者(算法工程师)提供反馈; 2、模型与政策对齐:通过提示工程和其他先进技术,确保模型输出符合商业化内容审核政策和相关法律要求; 3、大模型应用管理:端到端管理针对特定任务类型的大模型应用,包括但不限于评估数据集准备、提示词工程、RAG数据集准备,进行测试和迭代改进以增强准确率与召回率; 4、应急响应:调查应急事件(如误判与漏放),诊断根本原因,提出并实施提示词、模型或其它解决方案的改进以减提高大模型审核质量,对系统性问题进行及时归因和整改; 5、跨部分合作:与算法工程师紧密合作,在生产环境中部署、监控和维护大模型应用;持续优化模型的使用成本、处理时效和准确性,同时确保整体系统的高可扩展性;与政策、法律和合规团队合作,共同提升内容审核政策与业务的匹配度,同时保证模型与政策的对齐;与产品和工程团队合作,将大模型审核的各项能力及时集成到审核工具和平台中。
1、模型运营:为特定任务选择最合适的模型,排查模型性能问题或错误,并及时向模型开发者(算法工程师)提供反馈; 2、模型与政策对齐:通过提示工程和其他先进技术,确保模型输出符合商业化内容审核政策和相关法律要求; 3、大模型应用管理:端到端管理针对特定任务类型的大模型应用,包括但不限于评估数据集准备、提示词工程、RAG数据集准备,进行测试和迭代改进以增强准确率与召回率; 4、应急响应:调查应急事件(如误判与漏放),诊断根本原因,提出并实施提示词、模型或其它解决方案的改进以减提高大模型审核质量,对系统性问题进行及时归因和整改; 5、跨部分合作:与算法工程师紧密合作,在生产环境中部署、监控和维护大模型应用;持续优化模型的使用成本、处理时效和准确性,同时确保整体系统的高可扩展性;与政策、法律和合规团队合作,共同提升内容审核政策与业务的匹配度,同时保证模型与政策的对齐;与产品和工程团队合作,将大模型审核的各项能力及时集成到审核工具和平台中。
1、负责将内容安全/商业安全的复杂治理需求,转化为基于大模型的识别方案。通过PE/RAG/Workflow等技术持续实验和优化,不断提升策略的准确率与召回率。 2、能够开发用于安全场景的Agent和Workflow,实现复杂风险场景的自动化识别、推理和处置。 3、探索大模型及Multi-Agent领域前沿技术,进行技术调研、原型搭建和效果验证,并推动其在业务场景中的规模化应用。 4、作为大模型技术在安全领域的专家,强目标导向地协同算法、研发、治理、产品等团队,明确技术路径,统筹项目资源,共同实现安全目标。 5、具备产品意识,不仅满足于解决单点问题,更致力于优化产品工具、提升整体安全运营的效率和智能化水平。