字节跳动大模型运营专家-DMC
任职要求
1、本科及以上学历,计算机科学、数学、统计学、理工类专业背景,有一定的大模型训练或AI应用落地经验方法论; 2、熟练掌握并运用Python编程语言、SQL、Pandas、Spark,了解CV/NLP/音频常用算法,具备良好的数据分析和问题解决能力,能够独立进行模型调优和性能优化; 3、了解大模型原理,具备一定大模型经验,包括但不限于Prompt工程,微调技术、RAG等,有Hugging Face、LangChain等框架使用经验; 4、强烈的业务驱动意识,有良好的沟通表达能力和团队精神,愿意挑战复杂问题,具备优秀的跨团队协作能力和技术创新落地能力。
工作职责
1、负责内容安全/内容生态模型运维业务,模型训练全链路工作,包括但不限于大模型调用、微调、评估优化,以及机器学习和深度学习模型的训练和工程化落地; 2、深入理解业务需求与数据特征,从业务目标达成出发设计大模型或大小模型协同解决方案,通过Prompt工程、RAG、微调等技术提升内容识别、理解、审核等场景的应用效果,优化业务流程和效率; 3、主导大模型在业务中的创新应用,包括但不限于搭建领域适合的微调方案、设计多模型融合策略、优化模型部署上线流程,推动大模型规模化落地; 4、持续跟踪AI前沿技术动态,推动大模型与行业知识库,业务规则的结合,构建可复用的模型能力中台; 5、高效、规范管理模型项目需求,做好经验沉淀,将训练经验扩展至多业务场景,保证项目投入ROI。
1、构建并完善语言模型的评估标准与体系,全面负责大模型在语言能力方面的评测工作,确保评估的准确性与科学性; 2、协调各方资源,与研发、测试、产品等团队紧密合作,高效推进大模型评测项目,保障项目按计划顺利进行; 3、探索创新且高效的模型评测方案,能够根据实际需求推动评测集的构建与落地; 4、深入调研行业内公开的评测方法,及时将有价值的公开评测集整合到内部评测平台,持续丰富评测资源; 5、运用PE技术,优化评测流程与评测准确率,提升模型在不同场景下的表现; 6、分析评测数据,生成详细报告,为模型优化提供有力的数据支持和建设性建议。
1、基于产品研发和业务需求,完成Agent方向大模型相关的标注工作,设计标注方案及规则,组织团队完成日常数据生产,达成相关模型训练和优化效果指标; 2、运用PE进行数据生产和过滤,了解大模型前沿训练信息,关注行业的发展方向; 3、有良好的理解与需求分析能力,能够分析理解数据核心需求与要解决的问题,并有良好的文字表达能力,能够清晰、准确地解释对应原因; 4、沟通表达能力好,能够顺利进行团队内外部相关方的沟通协作,保障数据交付,推进模型训练和优化过程的顺利进行; 5、思维灵活,能够适应业务间的快速切换,不断学习掌握各项新的标注逻辑和方式,对大模型PE能力有较高兴趣或有一定的使用经验。
1、深入研究教育体系理念与校企合作模式,负责头部院校资源的拓展签约、培育、维护、落地保障等相关工作,保障校企资源池的丰富度与活跃度; 2、制定与优化校园合作策略、合作制度等,能够根据业务特点/行业趋势/院校需求制定校企合作方案,定期进行安全合规风险抽查;保障校企合作规范、高效,提升院校合作紧密度与合作深度; 3、为合作院校提供定制化培养方案,包括但不限于业务流程拆解、项目承接、人员管理、工具使用、人才供给、特殊节点人力储备与保障等,不断提升校企业务规模,保障履约质量、效率; 4、关注行业趋势,联合开展如科研课题等创新形式,打造校企合作标杆案例,增强行业竞争力; 5、定期对校企合作情况进行复盘,包括但不限于结算流水变化、人力供给规模与变化情况、成本情况、人员能力/学历分布情况等。