小红书【Ace顶尖实习生】基础大模型Agent能力研究
任职要求
1、不限年级，本科及以上在读，计算机/人工智能/软件工程等相关专业优先； 2、扎实的编程能力和算法功底，熟练掌握Python/C++/Java等至少一种编程语言； 3、扎实的机器学习/深度学习理论基础，有大规模推荐系统、计算广告、搜索引擎等核心算法项目经验； 3、有LLM/MLLM等多模态理解技术背景，…
工作职责
本课题聚焦小红书通用基座模型在真实业务中的“动手能力”，关注模型如何从理解用户意图，进一步演进为能够调用各类工具、完成实际任务的通用智能体。在业务场景中，无论是内容生成、数据处理还是复杂流程自动化，本质都依赖模型与外部 API、系统能力的高效协同，而不仅仅是语言生成本身。 围绕这一目标，课题从三个方向展开： 1）构建统一的工具使用“语言体系”：围绕“统一协议下的工具调用”进行建模与训练，通过抽象不同 API 的输入输出结构与调用逻辑，让模型学会用一种通用方式理解和使用各类工具，而不是依赖针对单一接口的定制化适配。目标是让工具调用像“说话”一样自然，而不是一段段硬编码的规则。 2）提升跨任务、跨领域的泛化调用能力：基于大规模异构任务的数据构造与指令微调，强化模型在 Zero-shot 场景下对新工具的理解与调用能力。即使面对从未见过的 API，模型也能够通过接口描述与上下文信息，快速完成参数推断与调用决策，实现从“见过才会用”到“没见过也能用”的跃迁。 3）增强未知环境下的逻辑迁移与决策稳定性：重点解决 Agent 在面对新工具、新任务组合时的推理与决策问题，包括调用顺序规划、异常处理以及多工具协同，使模型在复杂业务流程中能够稳定完成任务闭环，而不是在中间步骤出现偏移或失败。
关注如何将RL引入工业级Agent平台系统，直接对“规划—执行—反馈”的完整轨迹进行优化。 研究重点包括：如何构建trajectory-level reward、如何在工具调用与多步推理中进行credit assignment，以及如何在高成本环境下进行高效的offline/online混合训练。平台提供真实任务环境与多样化Agent执行数据，使研究从离线benchmark走向真实交互场景。该方向有望推动RL从模型对齐走向复杂任务能力学习，形成新一代Agent优化范式。
大模型如 GPT 系列等，凭借其强大的语言理解和生成能力，为编程带来了新的变革。在大模型编程的实际应用里，涌现出诸多极具价值的落地场景，像代码问题的精准发现与高质量修复、代码的智能补全与生成等，这些场景切实提高了编程工作的效率与质量。 当前也普遍面临一系列亟待解决的问题与挑战： 1、怎样精准识别代码中潜藏的高质量问题，并迅速且有效地完成修复； 2、如何借助 RAG 技术等手段，精准召回相似的代码问题； 3、怎样构建更完善的评测体系，对整个编程系统以及各个应用场景进行全面且高质量的评估。 这些问题在行业内具有广泛的共性，极具研究价值。通过合作研究探寻解决方案，有望推动大模型编程领域迈向新的高度。
传统审核大模型通常采用SFT的方式逼近人审对审核规则的识别精度，此时人工执行质量和规则合理性则成为机审体系性能上限。 本课题通过RLVR和Multi-Agent的方式，构造机审判别Agent与规则生成Agent的博弈学习，以对抗上升的方式不断提升审核规则的完备性以及相应机审识别的准召，使得机审可以突破人工上限，实现大模型智能在审核象限的涌现和“Aha moment”。
传统的AI搜索依然基于RAG框架，少有的几个Agent框架也只涉及QueryPlanning，距离真实解决搜索中的实际问题还相距很远，例如做旅游攻略、做行业研究报告等等。我们判断，虽然当下LLM已经大范围的用于搜索领域，但是下一代的搜索技术变革一定是基于Agent的。本课题旨在研究基于Agent框架的基座模型。