字节跳动多模态大模型算法工程师（本地生活方向）-国际化短视频
任职要求
1、硕士研究生及以上学历，计算机相关专业；扎实的编程能力，良好的算法与数据结构基础； 2、对机器学习、推荐系统或多模态模型具备浓厚兴趣，有较强的问题分析与解决能力； 3、熟悉至…
工作职责
1、参与国际化短视频产品的核心算法研发，重点负责多模态大模型的训练与优化，支撑视频推荐、本地生活服务、音乐推荐、图文理解等下游任务的实际落地，提升内容分发智能化水平； 2、结合业务场景需求，探索视觉、文本、音频等多模态信息的融合建模与对齐机制，提升内容理解与用户意图匹配能力，推动推荐系统向更深层次的语义理解演进； 3、应用强化学习技术解决多模态理解中的复杂建模与优化问题，包括多模态表示学习、跨模态对齐与跨语言泛化等关键挑战，持续提升线上效果； 4、参与算法平台与模型训练体系建设，提升多模态大模型的训练效率、资源利用率与部署稳定性，加速技术成果在全球化业务中的应用落地。
团队介绍：字节跳动抖音搜索团队主要负责抖音搜索算法创新和架构研发工作，主要包括短视频、直播、本地生活、视觉搜索等多个业务线。我们使用最前沿的机器学习技术进行端到端建模并不断创新突破，同时专注于分布式系统、机器学习系统的构建和性能优化，从内存、Disk等优化到索引压缩、召回、排序等算法的探索，充分给同学们提供成长自我的机会。主要工作方向包括：1、探索前沿的NLP技术：从基础的分词、NER，到应用上的Query分析、基础相关性等，全链路应用深度学习模型，每个细节都充满挑战；2、跨模态匹配技术：在搜索中应用CV+NLP深度学习技术，让视频搜索拥有更强大的检索能力；3、大规模流式机器学习技术：应用大规模机器学习，解决搜索中的推荐问题，让搜索更加个性化更加懂你；4、千亿级数据规模的架构：从大规模离线计算，分布式系统的性能、调度优化，到构建高可用、高吞吐和低延迟的在线服务的方方面面都有深入研究和创新。 1、参与抖音，今日头条，西瓜视频，剪映等App，以及国内电商，生活服务等重点业务的搜索推荐模型和策略改进，负责这些业务的搜索流量和用户渗透增长&搜索心智建设任务； 2、以推荐算法为核心技术栈，改进基于超大规模机器学习模型的推荐系统，覆盖从候选挖掘到召回，粗排，精排，多目标融合全链路技术环节； 3、探索短文本推荐和通用推荐技术的上限，重点是推荐和NLP技术的联合应用，以及多模态等前沿技术的探索。
随本地生活业务多场景AI落地，构建AIGC、B/C端等智能服务的数据飞轮，主要工作涉及: 1. 用户数据分析和策略制定：分析用户交互数据和转化数据，评估不同商品和不同视频内容下用户的转化情况，制定选品、价格和内容优化策略； 2. 优化模型生成效果：负责模型训练数据构建与管理，参与数据筛选、标注及评测体系构建工作。分析和挖掘现有数据资源，通过数据驱动的方法优化，结合A/B测试等手段验证调整效果。
1、模型训练： 研究并应用先进大模型训练技术（如SFT、RL、Post-training等）, 构建面向生服场景的垂类大模型； 2、Agent化：负责内容生成的pipeline和agent构建，提升AIGC产线的泛化性水平和转化效率，最终实现对优秀人类作品的端到端学习和拟人化对标； 3、数据驱动优化：基于业务数据统计和挖掘，发现当前系统问题和待提升方面，进而制定优化计划； 4、行业对标：紧跟基模和行业产品发展趋势，推动新模型的产品化落地。
1、负责研发行业领先的AIGC素材创意生成技术，包括多模态理解、多模态检索、多模态生成等前沿技术，应用于电商、商业化、本地生活等场景的创意素材生成； 2、负责大模型（LLM、MLLM)的指令微调、RLHF等技术的深入探索与研发，提升文案内容的生成质量； 3、负责研发AIGC素材创意生成平台，实现自动化、智能化的素材创意内容的生成与推荐。