logo of moonshot

月之暗面大语言模型架构实习生(预训练方向)

实习兼职算法类/AI地点:北京状态:招聘

工作描述


职位描述:
1. 深度参与LLM的模型结构,包括MLP以及attention 模块改进,以及训练方法的设计,包括模型并行策略优化,优化算法改进,量化算法改进,目标损失函数改进等方向,目标是同时在模型训练以及大概规模推理效率上取得sota级别的领先水平
2. 深入调研如何设计科学的实验,利用scaling law验证模型设计…
登录查看完整工作描述
微信扫码,1秒登录

包括英文材料
大模型+
算法+
学历+
数据结构+
PyTorch+
还有更多 •••
相关职位

logo of moonshot
实习算法类/AI

职位描述: 深度参与前沿大模型(LLM)的架构设计与迭代,重点攻关Attention机制(如MLA, Linear Attention, VQ)、MoE等SOTA结构的性能与效率瓶颈,推动模型在上下文

更新于 2025-11-03北京
logo of moonshot
社招技术类/Tech

职位描述: 1. 深度参与LLM的模型结构,包括MLP以及attention 模块改进,以及训练方法的设计,包括模型并行策略优化,优化算法改进,量化算法改进,目标损失函数改进等方向,目标是同时在模型训

更新于 2025-02-05北京
logo of kuaishou
社招1-3年J0011

1、计算机科学、人工智能、自然语言处理等相关专业硕士及以上学历; 2、在模型架构创新方面有实际研究经验,深入理解Transformer架构及其变体、MoE架构改造、线性注意力等方向; 3、有丰富的研究

更新于 2026-03-12杭州
logo of 58
实习技术类

岗位描述: 灵犀大语言模型与灵犀语音大模型训练,利用58独有的业务数据优势提升大模型在58业务场景中的效果 任职资格: 1、2027届硕士及以上学历在读,计算机、软件工程、数学等相关专业 2、熟练掌握

更新于 2026-06-09北京