阿里巴巴淘天算法技术-多模态内容理解算法专家（LLM/VLM）-杭州
任职要求
1. 计算机、人工智能、模式识别等相关专业硕士及以上学历，4年及以上相关工作经验。 2. 具备以下一个或多个领域的深厚积累： a. 大模型（LLM）： 熟悉主流大语言模型的原理，在Prompt Engineering、Fine-tuning、RAG、Agent等方向有深入的实践经验，主导过基于LLM的信息抽取、文本生成、语义理解等项目。 b. 多模态大模型（VLM）： 熟悉主流多模态大模型的原理和应用，有丰富的图文匹配、跨模态生成、VQA、视觉内容理解等项目经验。 c. 商品理解： 在电商领域，有深厚的商品属性体系构建、内容理解等相关经验，对电商商品数据有深刻洞察。 3. 具备…
工作职责
营销算法团队作为淘天集团核心的算法团队之一，招聘岗位涵盖：搜索推荐算法，NLP，CV，大模型，因果推断和运筹优化等方向。解决从商品供给理解到前台搜推的全链路算法优化，服务业务包括淘宝首页宫格、百亿补贴、淘宝秒杀、淘宝大促、商品价格力等淘系核心业务。 岗位职责： 1. 构建业界领先的商品多模态理解体系： 负责利用大语言模型（LLM）及视觉语言模型（VLM）等前沿技术，对商品的多模态内容（文本标题、详情描述、图片、价格等）进行深度解析，完成高质量的内容提取、需求理解等核心任务。 2 负责大模型/多模态模型的前沿技术探索与落地： 跟踪并实践领域内前沿的模型和技术（如模型Fine-tuning, RAG, In-Context Learning, Agent, Model Distillation、LLM Time Series Forecasting等），结合业务场景进行技术选型、方案设计与模型优化，解决从训练到部署全链路的挑战，实现技术创新与业务效果的双赢。 3. 设计和优化算法架构与系统： 负责商品同款匹配系统的整体架构设计与持续迭代，保证系统的高性能、高可用和高扩展性，以应对淘天集团海量数据的挑战。 4. 驱动技术创新转化为业务价值： 深入理解业务，主动挖掘技术能创造价值的场景，与产品、工程团队紧密协作，通过严谨的AB实验验证算法效果，用技术力量持续驱动业务指标增长。
岗位职责： 1. 构建业界领先的商品多模态理解体系： 负责利用大语言模型（LLM）及视觉语言模型（VLM）等前沿技术，对商品的多模态内容（文本标题、详情描述、图片、价格等）进行深度解析，完成高质量的内容提取、需求理解等核心任务。 2 负责大模型/多模态模型的前沿技术探索与落地： 跟踪并实践领域内前沿的模型和技术（如模型Fine-tuning, RAG, In-Context Learning, Agent, Model Distillation、LLM Time Series Forecasting等），结合业务场景进行技术选型、方案设计与模型优化，解决从训练到部署全链路的挑战，实现技术创新与业务效果的双赢。 3. 设计和优化算法架构与系统： 负责商品同款匹配系统的整体架构设计与持续迭代，保证系统的高性能、高可用和高扩展性，以应对淘天集团海量数据的挑战。 4. 驱动技术创新转化为业务价值： 深入理解业务，主动挖掘技术能创造价值的场景，与产品、工程团队紧密协作，通过严谨的AB实验验证算法效果，用技术力量持续驱动业务指标增长。
参与千问统一内容库与多模态内容理解能力建设，沉淀可复用的内容资产，支撑多场景内容供给与使用，包括但不限于： 1. 参与建设面向多个业务场景的视频/笔记库，打通内容同步与分发链路，保障数据一致性与时效性。 2. 基于多模态大模型构建内容理解与打标能力，完善多维度标签体系，覆盖关键词/hashtag/话题/品类/兴趣点/创作者特征等。 3. 建设线索驱动的数据发现收录、圈选与下发能力，支撑跨场景复用，持续扩充优质供给并提升覆盖。 4. 建立内容质量评估与治理机制（低质/重复等），持续提升数据质量与可用性。
参与千问统一内容库与多模态内容理解能力建设，沉淀可复用的内容资产，支撑多场景内容供给与使用，包括但不限于： 1. 参与建设面向多个业务场景的视频/笔记库，打通内容同步与分发链路，保障数据一致性与时效性。 2. 基于多模态大模型构建内容理解与打标能力，完善多维度标签体系，覆盖关键词/hashtag/话题/品类/兴趣点/创作者特征等。 3. 建设线索驱动的数据发现收录、圈选与下发能力，支撑跨场景复用，持续扩充优质供给并提升覆盖。 4. 建立内容质量评估与治理机制（低质/重复等），持续提升数据质量与可用性。
1、负责快手短视频多模态内容理解工作，应用计算机视觉、NLP、多模态融合等技术，提升短视频内容体系建设、推荐、搜索的效果和体验； 2、基于多模态模型在下游业务上的应用，包括并不限于多模态分类、标签、caption等文本生成等； 3、负责计算机多模态理解方向前沿问题的研究，参与建设并持续保持部门在多模态业界的技术先进性，保持创新的同时将业界SOTA模型持续优化并落地至线上获得收益。