蚂蚁金服蚂蚁集团-灵巧操作算法工程师-具身智能方向
任职要求
1. 硕士及以上学历,计算机、自动化、机器人、人工智能、电子工程、数学等相关专业; 2. 具备灵巧操作任务算法开发经验,任务包括抓取、手内操作、柔性物体操作、工具使用等; 3. 熟悉以下一个或多个方向,并有实际项目经验: 1)强化学习:SAC/PPO/DQN,具备真实机器人 RL 经验者优先; 2)模仿学习:BC/ACT/Diffusion Policy/VLA等方法…
工作职责
1. 负责高自由度灵巧手操作算法研发,围绕多指灵巧手抓取、手内操作、柔性物体操作、工具使用等灵巧操作任务; 2. 负责设计并实现基于强化学习(RL)/模仿学习(IL)的操作策略训练框架,推动从单任务策略到多任务统一模型的演进; 3. 负责搭建和优化数据闭环,包括真机数据优化、仿真数据优化、训练集构建与评测体系设计; 4. 负责推动Sim2Real迁移,解决模型在真实机器人系统中的鲁棒性、实时性、泛化性与部署问题; 5. 跟进灵巧操作前沿算法,提升长时序、多阶段操作任务的规划与执行能力,并探索前沿算法在公司产品中的落地。

1. 负责搭建和部署机器人控制框架 2. 研发基于强化学习算法的机器人灵巧操作能力 3. 负责强化学习相关的软件基础平台建设 4. 负责柔性控制、全身控制等相关功能研发 5. 参与机器人轨迹优化方面的相关工作

视觉大模型方向: 1、 协调上层应用需求到机器视觉算法的整体架构; 2、 实现机器人基于3D视觉的双臂抓取方案,落地在照片、水杯等常规物体的视觉抓取任务中: 3、带领算法团队进行传统机器人视觉到端到端视觉大模型的技术演进,并落地在双臂协同抓取任务; 导航定位方向: 1、 负责机器人基于LIDAR的导航与定位算法研究与实现,并支持机器人业务中导航的需求; 2、负责单线和多线LIDAR的开发,SLAM 算法、多传感器融合算法、3D点云、3D场景重建等 3、负责无地图导航算法研究、自主实时建图方案研究; 4、实现高精度的地图更新; 机器人操作系统方向: 1、从事移动机器人系统的设计和研发,不限于底盘、四足、双足等形态;设计机械结构,硬件结构、并具备-定嵌入式开发经验: 2、具备机器人硬件开发经验,实现对关节电机的控制、实现与相机和雷达的通信: 3、熟悉运动控制算法,利用动捕收集步态数据,并通过强化学习和模仿学习实现机器人运动控制: 双臂方向 1、复现开源的双臂机器人扩散大模型RDT,并完成数据采集、模型训练、优化等功能: 2、设计触觉反馈传感器,并用于灵巧手,实习灵巧手的触党反馈: 3参与机器人架构设计、零部件选型、算法方案设计: 运动控制方向: 1.设计、 开发、实现和优化智能机械管的控制算法, 提高机械臂的智能性和学习能力。 2、研究机器人的智能控制模型,理解机器人的知、推理、学习和行为规划等机制。 3、在等机器人软件平台上开发机器人的控制和规划程序,并在Linux系统下进行软件开发和调试。 4、与其他团队成员合作,集成机器人和其他智能设备的功能,实现智能化的生产流程。
1. 负责具身智能数据平台的搭建与开发,构建覆盖采集、处理、标注、质检全链路的自动化数据管线,支撑大规模机器人学习数据的高效生产; 2. 研发基于三维重建的场景与物体数字化技术(如 NeRF、3D Gaussian Splatting、MVS 等),构建高保真三维资产库,为仿真环境与合成数据生成提供基础数据支撑; 3. 开发人体与手部运动建模系统,涵盖全身动作捕捉、灵巧手姿态估计、人手-物体交互重建等,将人类示范数据高效转化为机器人可用的训练数据; 4. 设计并实现自动化/半自动化标注系统,结合视觉基础模型(SAM、GroundingDINO 等)与主动学习策略,实现操作任务中关键语义信息(动作分割、接触检测、物体状态等)的高效标注; 5. 搭建多模态数据采集系统,集成多视角相机、深度传感器、力/触觉传感器、动捕设备等,设计标准化采集流程,保障数据质量与一致性; 6. 建立数据质量评估与治理体系,开发数据清洗、去重、平衡、增强等工具,构建面向机器人操作任务的高质量 benchmark 数据集; 7. 与算法团队紧密协作,根据模型训练需求(VLA、World Model、RL 等)定义数据规格,推动数据驱动的算法迭代闭环。