美团AIGC算法实习生
任职要求
1. 具有扎实的机器学习基础,熟悉Diffusion相关领域,数理功底扎实,自驱力强; 2. 熟悉PyTorch深度学习框架,熟练掌握Python语言。 3. 良好的团队合作精神和沟通…
工作职责
1. 参与扩散模型加速算法的研发和优化工作。 2. 协助团队进行算法的测试、评估和迭代,确保算法性能的持续提升。 3. 收集和分析相关数据,为算法改进提供数据支持。
我们是网易云音乐算法团队,专注于行业领先的搜索或者推荐算法,我们致力于通过技术赋能云音乐各项业务,通过社区广场推荐,提升用户体验,产生商业化价值。 在这里你可以: 1、参与云音乐各场景相关的AIGC算法应用,使用NLP、多模态、LLM等技术,优化包括多模态内容理解、大模型交互式对话、大模型AI创作生成等业务应用的效果提升; 2、参与云音乐创新业务相关的算法优化,使用业界领先的深度学习、强化学习、图模型等,优化推荐、直播、声音、社交等业务的算法; 3、参与前沿的基础算法模型建设,包括继续预训练、视频生成微调,音乐生成训练等垂类基座模型的构建和应; 4、接触到亿级别海量、真实的用户数据,使用深度学习、强化学习、图模型等算法,发挥推荐的价值; 5、使用行业领先的大规模分布式机器学习平台,例如tensorflow等开源的工具,实现并不断优化推荐、搜索等算法。
目前主流的素材混剪能力主要依赖于素材的端内容理解、表征匹配、高光检测等能力帮助一键完成整个视频剪辑过程,偏模板化,且预定义较为死板,无法支持更丰富的信息量注入,以及用户自主输入剪辑要求。 本课题希望通过大语言模型的语义指令解析能力,开放基于可自定义prompt的视频编辑能力,通过指令分解、协同主题文案生成的方式,帮助完成带有故事感文案生成能力的视频剪辑功能。主要的技术难点包括: 1、多模态理解与表征:需要模型能够深入理解不同模态内容(视频片段、图像、音频)的语义和上下文; 2、时序理解与编辑:视频混剪需要理解时序信息,包括情节发展、节奏感、转场点等; 3、文案生成和改写:可自定义主题、风格的素材文案生成能力。
1. 基于 AIGC 研发虚拟换衣(Virtual Try-On)与虚拟化妆(Virtual Makeup)方向算法, 实现业界/学术界前沿生成技术 2. 与产品设计团队紧密合作,推动算法快速落地,提升用户体验 3. 深度参与模型调优、数据构建、效果评估等端到端研发流程 4. 鼓励创新与研究产出,支持在顶会(CVPR / ICCV / ECCV / SIGGRAPH / NeurIPS / ICML 等)投稿