字节跳动机审模型运营专家-商业生态与安全
任职要求
1、本科及以上学历,有2年以上内容质量/风控/安全相关行业经验优先;
2、业务理解能力强,从业务角度理清需求,推动模型优化;
3、有强的沟通协调能力,作为项目负责人承担产品风险治理…工作职责
1、负责内容质量策略的编制及迭代; 2、通过算法模型、工具等自动化产品运营手段不断优化迭代相关产品; 3、根据行业大模型需求,设计和构建合适的模型,进行实验和测试,并不断优化模型的性能和效果。
1、设计质量评估体系: 主导设计并持续优化面向人审、机审、大模型交付质量的全局性评估指标体系、评估链路与校准机制; 2、深度分析与洞察:对机审误伤和漏放的质量问题进行根因分析,定位问题至规则、模型、流程或人为维度,明确问题根本原因并输出解决方案; 3、主导治理效果评估: 深度分析治理策略的VVR 等核心业务指标影响,从用户体验和商业价值维度评估治理动作的ROI,为战略决策提供依据。 4、闭环推动与协同: 主动协同并驱动治理产品、规则策略、算法模型、审核运营等多方团队,建立高效的质量问题发现、定位、解决、复盘的全链路闭环机制。确保数据洞察转化为具体的产品功能迭代、规则优化、模型Retrain或流程改进,并对最终效果负责。
1.负责建设内容安全策略防控体系,包括感知/应急/洞察/机审/人审/处置各个环节,驱动内容安全防控良性循环; 2.推动内安内容理解策略算法能力建设,将内安标准标签拆解为可解释、可复用的识别算子并持续运营; 3.落地新业务场景防控策略部署,根据业务变化推动优化原有防控策略调整 4.负责建设内容安全核心数据资产,包括不限于领域知识图谱、细粒度样本库、黑产库,持续运营数据资产质量和规模; 5.沉淀分析思路与策略生产过程,提炼产品需求,并与相关团队协作推动自动化策略的落地。 6.紧跟国内外时事热点、了解新政策法律法规,分析解读相关政策、法律法规及其背后影响,结合新技术特点进行防控策略制定
1、设计质量评估体系: 主导设计并持续优化面向人审、机审、大模型交付质量的全局性评估指标体系、评估链路与校准机制。 2、深度分析与洞察:带领团队对误伤和漏放的质量问题进行根因分析,定位问题至规则、模型、流程或人为维度,明确问题根本原因并输出解决方案; 3、主导治理效果评估: 深度分析治理策略的VVR 等核心业务指标影响,从用户体验和商业价值维度评估治理动作的ROI,为战略决策提供依据。 4、闭环推动与协同: 主动协同并驱动治理产品、规则策略、算法模型、审核运营等多方团队,建立高效的质量问题发现、定位、解决、复盘的全链路闭环机制。确保数据洞察转化为具体的产品功能迭代、规则优化、模型Retrain或流程改进,并对最终效果负责。 5、团队与能力建设:负责组建、培养和管理一支高绩效的数据分析与策略运营团队,提升团队成员的业务洞察、数据分析和项目推动能力。将最佳实践沉淀为可复用的分析模型、工具产品和方法论,提升整个中台的质量评估效率;
我们是小红书中台大模型 Infra 团队,专注打造领先易用的「AI 大模型全链路基础设施」!团队深耕大模型「数-训-压-推-评」技术闭环,在大模型训练加速、模型压缩、推理优化、部署提效等方向积累了深厚的技术优势,基于 RedAccel 训练引擎、RedSlim 压缩工具、RedServing 推理部署引擎、DirectLLM 大模型 API 服务、QuickSilver 大模型生产部署平台等核心产品,持续赋能社区、商业、交易、安全、数平、研效等多个核心业务,实现 AI 技术高效落地! 1、参与设计实现支持RLHF/DPO等对齐技术的高效训练框架,优化强化学习阶段的Rollout、Reward Model集成、多阶段训练 Pipline; 2、研发支持多机多卡 RL 的分布式训练框架,开发TP/PP/ZeRO-3与RL流程的动态协同机制,解决 RL 算法在超长时序下的显存/通信瓶刭 3、构建端到端后训练工具链,主导框架与 MLOps 平台集成,提供训练可视化、自动超参搜索等生产级能力 4、与公司各算法部门深度合作,参与大语言模型LLM、多模态大模型 MLLM等业务在 SFT/RL领域的算法探索和引擎迭代; 5、参与分析各业务 GPU 利用率与饱和度等指标,结合业务场景持续优化训练框架能力,提升框架领先性。