字节跳动基于预训练大模型的端到端生成式搜索技术研究-搜索(北京/上海/杭州)
任职要求
1、2027届毕业,获得博士学位,人工智能、计算机、自然语言处理、计算机视觉等相关专业优先; 2、在人工智能领域顶级会议上有发表论文或有深入研究经历者优先; 3、…
工作职责
团队介绍:字节跳动搜索团队主要负责抖音、国际化短视频、今日头条、红果短剧、番茄小说、AI搜索等产品以及电商、生活服务等业务的搜索算法创新和架构研发工作。 我们使用前沿的机器学习\大模型技术进行端到端建模并不断创新突破,同时专注于分布式系统、机器学习系统的构建和性能优化,从内存、Disk等优化到索引压缩、召回、排序等算法的探索,致力于支撑字节跳动持续多元化的产品创新和高速的业务增长、基于大模型革新和重塑下一代搜索技术体系,充分给同学们提供成长自我的机会。 主要工作方向包括: 1、探索前沿的NLP技术:全面基于LLM的Query分析、相关性、个性化预估、满意度评估、生成式检索等,全链路应用LLM/VLM,每个细节都充满挑战; 2、跨模态匹配技术:进行多模态预训练,在超大规模的多模态表征、匹配、生成等多个技术方向上持续突破,打造世界领先的多模态搜索系统; 3、大规模流式机器学习技术:应用大规模机器学习,解决搜索中的推荐问题,让搜索更加个性化更加懂你; 4、千亿级数据规模的架构:从大规模离线计算,分布式系统的性能、调度优化,到构建高可用、高吞吐和低延迟的在线服务的方方面面都有深入研究和创新; 5、推荐技术:基于超大规模机器学习、因果推断、大模型推理等技术手段,构建业界领先的搜索推荐系统,对搜索推荐技术进行探索和创新。 课题介绍:随着大模型技术的快速发展,AI搜索领域迎来了新的机遇和挑战。传统搜索技术在面对海量数据、多模态信息以及用户多轮复杂需求时,开始暴露出很多问题。因此需要基于大模型来构建下一代AI搜索系统,提升搜索系统的智能化水平,优化用户体验,具体目标包括: 1、探索大模型与排序算法的结合,提升个性化排序的精度和用户体验。 2、探索基于多模态预训练的端到端生成式搜索大模型 3、探索基于大模型Agent技术,提升复杂多义Query和多轮搜索下的用户满意度。 课题挑战: 1、个性化排序的挑战:传统排序算法难以充分利用多模态信息,且模型复杂度有限,无法满足用户对精准化和个性化搜索的需求; 2、超大规模检索排序的挑战:传统的基于判别式的级联排序系统,难以满足搜索千亿级别候选的检索排序效率需求; 3、搜索需求日益复杂的挑战:用户搜索需求的复杂度在不断增加,传统搜索框架难以在多轮对话下,准确理解长难、多义Query的语义,导致搜索结果满意度低。 课题价值: 1、技术价值:突破传统搜索技术瓶颈,构建大模型Agent驱动的下一代AI搜索架构,解决个性化排序、超大规模检索排序、复杂搜索需求理解满足等行业难题; 2、业务价值:大幅度提升搜索的用户体验和满意度,带动搜索场景LT和主动搜索心智的提升。
团队介绍:字节跳动搜索团队主要负责抖音、国际化短视频、今日头条、红果短剧、番茄小说、AI搜索等产品以及电商、生活服务等业务的搜索算法创新和架构研发工作。 我们使用前沿的机器学习\大模型技术进行端到端建模并不断创新突破,同时专注于分布式系统、机器学习系统的构建和性能优化,从内存、Disk等优化到索引压缩、召回、排序等算法的探索,致力于支撑字节跳动持续多元化的产品创新和高速的业务增长、基于大模型革新和重塑下一代搜索技术体系,充分给同学们提供成长自我的机会。 主要工作方向包括: 1、探索前沿的NLP技术:全面基于LLM的Query分析、相关性、个性化预估、满意度评估、生成式检索等,全链路应用LLM/VLM,每个细节都充满挑战; 2、跨模态匹配技术:进行多模态预训练,在超大规模的多模态表征、匹配、生成等多个技术方向上持续突破,打造世界领先的多模态搜索系统; 3、大规模流式机器学习技术:应用大规模机器学习,解决搜索中的推荐问题,让搜索更加个性化更加懂你; 4、千亿级数据规模的架构:从大规模离线计算,分布式系统的性能、调度优化,到构建高可用、高吞吐和低延迟的在线服务的方方面面都有深入研究和创新; 5、推荐技术:基于超大规模机器学习、因果推断、大模型推理等技术手段,构建业界领先的搜索推荐系统,对搜索推荐技术进行探索和创新。 课题介绍:随着大模型技术的快速发展,AI搜索领域迎来了新的机遇和挑战。传统搜索技术在面对海量数据、多模态信息以及用户多轮复杂需求时,开始暴露出很多问题。因此需要基于大模型来构建下一代AI搜索系统,提升搜索系统的智能化水平,优化用户体验,具体目标包括: 1、探索大模型与排序算法的结合,提升个性化排序的精度和用户体验。 2、探索基于多模态预训练的端到端生成式搜索大模型 3、探索基于大模型Agent技术,提升复杂多义Query和多轮搜索下的用户满意度。 课题挑战: 1、个性化排序的挑战:传统排序算法难以充分利用多模态信息,且模型复杂度有限,无法满足用户对精准化和个性化搜索的需求; 2、超大规模检索排序的挑战:传统的基于判别式的级联排序系统,难以满足搜索千亿级别候选的检索排序效率需求; 3、搜索需求日益复杂的挑战:用户搜索需求的复杂度在不断增加,传统搜索框架难以在多轮对话下,准确理解长难、多义Query的语义,导致搜索结果满意度低。 课题价值: 1、技术价值:突破传统搜索技术瓶颈,构建大模型Agent驱动的下一代AI搜索架构,解决个性化排序、超大规模检索排序、复杂搜索需求理解满足等行业难题; 2、业务价值:大幅度提升搜索的用户体验和满意度,带动搜索场景LT和主动搜索心智的提升。
1. 设计并实现电商场景下的大模型中期训练(Mid-train)算法,解决领域知识注入与能力对齐等核心难题; 2. 负责电商场景下Agentic大模型的强化学习后训练,攻坚奖励模型(RM)、策略优化(如PPO、GRPO)及多轮交互决策优化等关键技术; 3. 构建面向电商业务的高质量训练数据、奖励数据及评测基准(Benchmark),通过数据闭环迭代驱动模型性能优化; 4. 推动大模型研究成果在智能推荐、智能导购及智能运营等真实业务场景中的端到端落地,解决实际业务痛点。
团队介绍:AI 数据与安全团队为 Seed 基座模型及 AI 原生应用提供跨模态数据服务,覆盖数据生产全流程,包含模型评估标准的制定、数据规模化生产、数据飞轮搭建,不断提升数据质量,支持模型快速迭代。 团队由产品经理、数据工程、数据运营等跨职能人才组成,并通过与 Seed 研究员、行业专家、全球顶尖数据供应商紧密合作,从真实场景中收集反馈并分析模型表现数据,解决 AI 前沿突破过程中的复杂数据问题,推动模型性能与用户体验的双重提升。我们既是帮助模型技术迭代的一线贡献者,也是模型和 AI 产品的一手用户。 课题介绍: AI Coding是当前大模型领域最热门的方向之一,高质量的Code训练数据和完善的模型评估机制是决定大模型Coding能力上限的关键因素。本课题通过探索基于主动学习技术的Code数据合成方案,系统性优化Code数据生产过程中存在的生产效率低、数据质量不佳、模型评估机制不完善等痛点问题。 课题挑战: 1、动态抗污染Benchmark 构建:针对评测集易污染、静态固化问题,构建具备防泄露机制的评测基准体系;建立动态更新迭代机制,适配模型能力演进与场景拓展,打造稳定可靠的评测标尺; 2、基于主动学习与自博弈的数据合成方法:以主动学习筛选策略结合智能体环境模拟,替代高成本人工标注,实现数据自动化、规模化生成;引入自进化与自博弈机制,定向挖掘模型薄弱领域,合成高价值演化数据,补齐能力短板; 3、低成本数据质量评估方法:突破单一语义评估局限,构建多维度质量刻画体系,探索轻量化评估路径以适配海量数据需求;建立数据特征与模型效果的强关联机制,形成可量化、可追溯的综合评估体系。 课题价值: 构建 Coding Agent自动化数据合成与主动学习管线,建立数据质量及模型性能评估标准,精准刻画数据与能力边界,降低评估成本,提升豆包大模型在复杂长程SWE任务中的表现。
阿里国际数字商业集团-供应链物流&定价算法团队专门负责阿里巴巴海外零售商品定价的建设和优化工作,业务覆盖全球,支持了千亿级别的零售行业、以及数以千万计的商品。 我们支撑了阿里国际商业零售供的智能定价决策体系,我们的核心职责是通过商品定价、优化投资效率,提升平台的成交规模和损益。我们的工作涉及到国际商业数字零售定价问题的方方面面,充满了趣味和挑战。 在这里,你将和我们一起,采用大模型、强化学习、运筹优化算法、仿真分析等持续解决定价和投资中的现实问题,不断创造价值,重塑整个海外零售商业体系,为社会带来更加美好的生活! 在这里,您将与优秀的算法团队紧密合作,共同解决商业活动中的定价和投资问题,不断创造价值。让我们携手共创海外商业数字供应链的未来! 我们的具体工作内容如下:构建国际电商场景下的定价和投资AI Agent, 通过建设多模态的商品特征、商家以及用户行为的理解能力,商品定价策略生成能力以及长序列投资决策学习能力,实现平台整体损益和规模的长期优化。 1、商品、用户、商家多模态特征理解:以商品特征理解为例,利用多模态大模型同时处理商品图像(包装、材质、设计风格)和文本信息(品牌、功能描述、用户评论),学习能够反映定价相关属性的商品表示。研究如何从LLM输出中提取影响定价的关键特征,如品类归属、档次定位、功能复杂度、品牌溢价等。同时,研究如何从LLM的商品理解中抽象出可迁移的定价规律,包括同品类内的价格敏感度模式、不同档次商品的定价策略差异、可替代品之间的价格关联关系。设计知识迁移学习框架,将成熟品类的定价知识迁移到新品类或长尾商品; 2、商品定价策略生成能力:根据商品特征的理解自主制定价格策略,比如识别商品视觉特征(如包装颜色、尺寸展示、质感)对消费者价格预期的影响(例如,识别出"高端包装"应匹配更高价格锚点和更低折扣频率),并将其整合成商品的定价策略,同时需要满足平台对整体货盘的损益和规模要求; 3、长序列投资决策学习能力:根据对不同投资对象(商品、商家、用户),通过强学学习等方式学习历史决策结果,研究基于序列生成的未来定价/投资轨迹优化,实现对长期投资策略的提前规划和持续优化。