通义Token Foundry-机器人系统集成与开发工程师-杭州/北京/上海
任职要求
1. 硕士及以上学历,机械工程、自动化、计算机等相关专业。 2. 1 年以上机器人相关工作经验,具备真实机器人系统开发与调试经验,能够独立完成机器人平台的部署,有定位并解决系统问题(如控制抖动、通信延迟、标定、推理延迟等)的能力。 3. 熟悉机器人运动学与控制基础(位姿解析、逆运动学、轨迹规划),熟悉异步推理技术,了解机器人安全保护机制(碰撞检测、急停策略等)。 4. 有遥操作系统开发或深度使用经验(主从臂 / VR / Gello / 手柄 / UMI / 外骨骼 / 力反馈等),熟悉实时通信与低延迟控制。 5. 熟练掌握至少一种编程语言(Python / C++),具备良好的工程实现能力。 6. 熟悉 ROS / ROS2 框架,具备多模块系统集成与调试经验。 7. 具备良好的跨团队沟通协作能力,能与算法、数据、硬件…
工作职责
1. 负责机器人操作系统的整体软硬件集成与真机部署,完成机械臂、传感器、计算单元等系统的搭建、调试与优化,构建稳定可靠的机器人运行环境。 2. 负责实时遥操作系统的开发与优化,满足高时效性和可靠性要求,设计并搭建真机评测体系与数据管线。 3. 解决真实机器人系统中的部署问题(延迟、标定误差等),优化异步推理系统(RTC等),设计安全保护机制(碰撞检测、异常行为监测、急停),持续提升系统鲁棒性与安全性。 4. 协同算法、数据、硬件团队,将前沿算法成功转化为可稳定运行的机器人系统,推动在真实场景和任务的落地闭环。
工程岗位的职责包括以下至少一个或多个方向: 1. 具身机器人应用解决方案研发 (1)参与多模态/具身智能机器人在真实场景中的应用方案设计、系统集成与验证。 (2)搭建端到端具身机器人任务pipeline,包括感知、理解、规划、控制、执行等模块的工程化实现。 (3)推动具身智能大模型能力在机器人实际任务中的落地优化(如操作、导航、交互等)。 2. 具身大模型数据采集与处理 (1)负责机器人数据采集系统搭建,包括传感器标定、采集流程、数据质量控制与自动化工具链。 (2)建设具身大模型训练数据pipeline:数据清洗、切分、标注、同步、增强、格式转换等工程化流程。 (3)参与构建多模态数据集(视频、RGB-D、触觉、关节状态、语言指令等)。 3. 具身大模型云端训练与推理优化 (1)基于GPU/加速器的训练平台优化具身大模型训练性能(并行策略、数据流优化、算子优化)。 (2)负责推理引擎优化,包括模型裁剪、编译器优化、图优化、缓存管理、多线程并发调度等。 (3) 参与构建具身智能模型的训练与推理服务基础设施(MLOps、分布式训练、数据版本管理等)。 4. 端侧模型量化部署与优化 (1)主导端侧模型的压缩、量化(INT8/FP8/混合精度等)、剪枝、蒸馏等部署优化工作。 (2)熟悉ONNXRuntime、TensorRT、TFLite、NPU/DSP编译工具链,进行端侧加加速与算子调优。 (3)推动具身大模型在机器人嵌入式/边缘计算平台上的高效部署。 5. 机器人操作系统与系统优化 (1)优化机器人操作系统(ROS2、RTOS、Linux)性能,包括实时性、通信延迟、资源调度、驱动层稳定性等。 (2)推动机器人软硬件协同优化,包括传感器驱动、控制链路优化、系统级profiling/debugging。 (3)支撑机器人任务的稳定运行与系统级可靠性优化。
1. 具身智能大模型研究与优化 (1) 研究和构建具身智能大模型(Embodied Foundation Models)与机器人大脑。 (2) 探索语言、视觉、动作等多模态融合机制(VLM / VLA / VLA-Agent)。 (3) 优化模型的长时记忆、推理能力与可泛化性。 2. 机器人智能算法研发 (1) 设计和实现机器人多模态感知、导航、操作、交互等核心算法模块。 (2) 推进大模型驱动的机器人任务规划与决策。 (3) 基于模拟器与真实世界数据,进行大规模对齐与强化学习(Sim2Real, RLHF, Imitation Learning)。 3. 系统落地与协同研发 (1) 与硬件与系统团队协作,推动模型算法在真实机器人平台上的部署与性能调优。 (2) 支撑具身智能大模型的云端训练体系、数据闭环与MLOps工程。 (3) 发表高水平论文或申请相关专利,推动业界与学界前沿研究。
1. 具身智能大模型研究与优化 (1) 研究和构建具身智能大模型(Embodied Foundation Models)与机器人大脑。 (2) 探索语言、视觉、动作等多模态融合机制(VLM / VLA / VLA-Agent)。 (3) 优化模型的长时记忆、推理能力与可泛化性。 2. 机器人智能算法研发 (1) 设计和实现机器人多模态感知、导航、操作、交互等核心算法模块。 (2) 推进大模型驱动的机器人任务规划与决策。 (3) 基于模拟器与真实世界数据,进行大规模对齐与强化学习(Sim2Real, RLHF, Imitation Learning)。 3. 系统落地与协同研发 (1) 与硬件与系统团队协作,推动模型算法在真实机器人平台上的部署与性能调优。 (2) 支撑具身智能大模型的云端训练体系、数据闭环与MLOps工程。 (3) 发表高水平论文或申请相关专利,推动业界与学界前沿研究。
