京东内容安全运营-大模型质量管理方向
任职要求
1.本科以上学历,有大模型策略相关工作经历优先; 2.具有良好的沟通与协调能力,能够与上下游建立良好的合作关系; 3.具备owner意识及用户思…
工作职责
1.根据业务大模型风控需求,制定切实可行的模型优化流程; 2.获取内外部模型所需数据,并把控数据标注质量; 3.与算法工程师合作,完成模型的规划、训练、预测与上线; 4.负责模型效果的评估监控与误漏召等相关问题,并快速形成解决方案。

1. 构建统一的智能Agent问题判定标准体系:制定适用于大模型驱动的智能Agent的通用质检原则与细粒度规则,确保跨场景一致性与可解释性拉通; 2. 设计端到端的智能质检评估指标体系:建立涵盖准确性、安全性、一致性、用户体验等维度的量化评估框架; 3. 主导高质量标注与抽检机制建设:设计打标规范、标注工具与质检流程,组织并管理专业标注团队(外包资源),通过定期抽检、bad case分析等方式,持续反哺标准优化与模型训练数据迭代。
1、负责申诉机审运营工作,对审核效率进行系统性分析和优化,在成本、效率与质量上建立好的观测方式和优化体系; 2、优化审核工具及大模型算法等机审策略,降低人审率,使人力集中于复杂人工判断任务,提升人力利用效率; 3、跨团队、跨业务沟通,与产品研发对接,负责审核进审策略上线前后测试及数据跟进,推动策略精准率提升; 4、具有项目独立运营能力,能够独立推进项目规划、执行和监控,以及跨部门沟通协调,确保审核策略的有效实施和持续优化,有较强的文档书写能力。
团队介绍:平台治理国际电商算法团队,专注于与业务方产品和运营团队协作,对国际电商平台进行全面的生态和风险治理,涵盖商家与商品、创作者与内容两大方向。我们的目标是通过打击底线风险问题和优化健康电商生态,实现平台的可持续发展。智能审核作为平台治理算法团队的一个重要子方向,主要与审核产品和审核运营团队合作,致力于打造业内最先进的智能审核系统。工作内容包括优化审核模型算法、审核素材及提示,以及优化审核平台的人员排班调度和任务分配,实现审核质量和效率的持续提升。 1、领导智能审核算法团队,制定技术发展方向和策略; 2、通过优化审核模型算法,探索基于大模型和多模态模型的审核系统,提高模型自动审核覆盖比例; 3、优化审核平台的人员排班调度、任务分配、素材组织和提示,提高审核质量和效率; 4、与审核产品和运营团队紧密合作,确保审核系统的稳定性和高效性,推动审核质量和效率的持续提升; 5、关注业内最新技术动态,推动新技术在智能审核系统中的应用和落地。