
商汤元萝卜-机器人系统集成工程师
任职要求
1.学历与经验:本科及以上学历,计算机、电子工程、自动化、机器人等相关专业优先,具备嵌入式系统或机器人系统开发经验。 2.技术能力: (1) 熟练掌握Linux系统及嵌入式开发,熟悉Ubuntu环境与Shell脚本,有Jetson或ARM架构平台经验者优先。 (2)精通C/C++和P…
工作职责
1.系统搭建与集成:负责机器人嵌入式计算平台(如Jetson)的部署,集成操作系统、开发环境及深度相机、机械臂控制器等硬件,搭建稳定的软硬件基础。 2.接口开发与调试:开发并调试机器人与外部设备(如摄像头、电机)的通信接口与驱动程序,确保各传感器和执行器在ROS2框架下协同工作。 3.性能优化与算法部署:优化ROS2在嵌入式平台上的运行性能,管理内存与GPU资源。协助算法工程师部署并优化视觉识别、路径规划等算法模块(如使用TensorRT加速)。 4.系统联调与维护:主导机器人整机的软硬件联调,实时监控系统状态,快速定位并解决通信中断、驱动异常等故障,提升整机可靠性。 5.技术文档编写:编写系统搭建流程、接口说明等技术文档,为团队协作和项目维护提供支持。

1.环境感知与目标识别:基于深度相机(如RealSense)的RGB-D数据,开发实时环境感知算法,实现家庭场景下的目标检测、图像分割、物体识别(如餐具、家具)及场景理解。 2.三维视觉与抓取支持:利用点云数据研发物体姿态估计、三维重建算法,为机械臂抓取提供精准位姿信息,优化抓取点检测。 3.视觉SLAM与定位(可选):实现视觉SLAM算法,融合多传感器数据(如IMU),构建室内环境地图并支持机器人自主导航与定位。 4.多模态融合与系统集成:协同控制与算法团队,将视觉感知结果与语言指令、控制策略结合,为视觉-语言-行动模型提供输入,并适配ROS2等机器人系统。 5.算法优化与创新:跟踪前沿视觉算法(如Transformer、基础模型),针对嵌入式平台(如Jetson)进行模型压缩、推理加速,提升实时性与鲁棒性。

1. 软件架构设计:负责机器人软件架构设计,基于ROS2框架设计并实现各功能模块,保障系统高效稳定运行。 2. 任务管理与调度:开发机器人任务决策与调度逻辑,通过状态机或行为树协调机械臂、移动底盘、视觉等模块完成复杂任务。 3. 模块集成测试:集成视觉感知、底盘控制、机械臂控制、语音/语言处理等算法模块,开展系统测试与调试,确保功能正常与数据准确。 4. 性能优化与维护:优化机器人软件的系统性能与稳定性,改进ROS2通信机制配置、并行处理及内存管理能力,持续迭代并维护软件版本。 5. 开发工具与文档:搭建开发工具链与仿真环境(如Gazebo等),编写测试用例及技术文档等,支持机器人的产品部署与升级。

1. 运动控制框架搭建:负责机器人机械臂运动控制算法的研发与实现,构建完整的轨迹规划、运动学与动力学控制框架。 2. 路径规划与避障:设计机械臂在家庭环境中的运动路径规划与避障策略,确保其在复杂场景中安全、平稳运行。 3. 经典控制实现:运用传统控制方法(如PID、力/阻抗控制)实现关节控制与力反馈调节,提升机械臂操作稳定性。 4. 智能学习控制:引入模仿学习与强化学习技术,开发机械臂的复杂操作技能,并通过人类示教或模拟自学习,逐步掌握高难度的动作,并训练持续优化。 5. 仿真训练与实物验证:搭建仿真测试环境(如Gazebo、PyBullet),进行算法验证与迭代,并完成实物部署与调试。 6. 系统集成协作:与视觉、软件等团队协作,集成视觉引导、ROS2系统等功能,确保控制模块与整体系统高效协同。

1、模型复现与实现:复现当前主流的开源VLA模型(如GR00T/ π0.5/SmoIVLA/WALL-OSS等),确保算法正确性和性能。 2、系统集成与测试:将VLA模型集成到公司机器人平台,设计并执行测试方案,评估模型在真实环境中的感知、推理与执行能力。 3、算法优化与创新:针对机器人具体应用场景,对VLA模型进行微调、优化及创新,提升其在复杂环境下的适应性和鲁棒性。 4、多模态数据处理:处理视觉、语言和动作数据,构建和优化训练数据集,支持模型的训练和评估。 5、技术跟踪与报告:跟踪VLA领域的最新研究进展,撰写技术报告,并参与团队技术讨论与分享。