商汤元萝卜-机器人视觉算法工程师
任职要求
1.专业背景：本科及以上学历，计算机、自动化、电子信息等相关专业优先，具备扎实的数学基础（线性代数、优化理论）。 2.技术能力： （1）精通计算机视觉算法（目标检测、分割、SLAM等），熟练使用PyTorch/TensorFlow等框架； （2）掌握Python/C++编程，熟悉OpenCV…
工作职责
1.环境感知与目标识别：基于深度相机（如RealSense）的RGB-D数据，开发实时环境感知算法，实现家庭场景下的目标检测、图像分割、物体识别（如餐具、家具）及场景理解。 2.三维视觉与抓取支持：利用点云数据研发物体姿态估计、三维重建算法，为机械臂抓取提供精准位姿信息，优化抓取点检测。 3.视觉SLAM与定位（可选）：实现视觉SLAM算法，融合多传感器数据（如IMU），构建室内环境地图并支持机器人自主导航与定位。 4.多模态融合与系统集成：协同控制与算法团队，将视觉感知结果与语言指令、控制策略结合，为视觉-语言-行动模型提供输入，并适配ROS2等机器人系统。 5.算法优化与创新：跟踪前沿视觉算法（如Transformer、基础模型），针对嵌入式平台（如Jetson）进行模型压缩、推理加速，提升实时性与鲁棒性。
1.系统搭建与集成：负责机器人嵌入式计算平台（如Jetson）的部署，集成操作系统、开发环境及深度相机、机械臂控制器等硬件，搭建稳定的软硬件基础。 2.接口开发与调试：开发并调试机器人与外部设备（如摄像头、电机）的通信接口与驱动程序，确保各传感器和执行器在ROS2框架下协同工作。 3.性能优化与算法部署：优化ROS2在嵌入式平台上的运行性能，管理内存与GPU资源。协助算法工程师部署并优化视觉识别、路径规划等算法模块（如使用TensorRT加速）。 4.系统联调与维护：主导机器人整机的软硬件联调，实时监控系统状态，快速定位并解决通信中断、驱动异常等故障，提升整机可靠性。 5.技术文档编写：编写系统搭建流程、接口说明等技术文档，为团队协作和项目维护提供支持。
1. 运动控制框架搭建：负责机器人机械臂运动控制算法的研发与实现，构建完整的轨迹规划、运动学与动力学控制框架。 2. 路径规划与避障：设计机械臂在家庭环境中的运动路径规划与避障策略，确保其在复杂场景中安全、平稳运行。 3. 经典控制实现：运用传统控制方法（如PID、力/阻抗控制）实现关节控制与力反馈调节，提升机械臂操作稳定性。 4. 智能学习控制：引入模仿学习与强化学习技术，开发机械臂的复杂操作技能，并通过人类示教或模拟自学习，逐步掌握高难度的动作，并训练持续优化。 5. 仿真训练与实物验证：搭建仿真测试环境（如Gazebo、PyBullet），进行算法验证与迭代，并完成实物部署与调试。 6. 系统集成协作：与视觉、软件等团队协作，集成视觉引导、ROS2系统等功能，确保控制模块与整体系统高效协同。
1. 软件架构设计：负责机器人软件架构设计，基于ROS2框架设计并实现各功能模块，保障系统高效稳定运行。 2. 任务管理与调度：开发机器人任务决策与调度逻辑，通过状态机或行为树协调机械臂、移动底盘、视觉等模块完成复杂任务。 3. 模块集成测试：集成视觉感知、底盘控制、机械臂控制、语音/语言处理等算法模块，开展系统测试与调试，确保功能正常与数据准确。 4. 性能优化与维护：优化机器人软件的系统性能与稳定性，改进ROS2通信机制配置、并行处理及内存管理能力，持续迭代并维护软件版本。 5. 开发工具与文档：搭建开发工具链与仿真环境（如Gazebo等），编写测试用例及技术文档等，支持机器人的产品部署与升级。
1. 参与家用机器人产品的视觉解决方案的设计和验证； 2. 参与计算机视觉和图像处理相关算法的工程化实现，包括接口设计、代码框架设计、C/C++代码编写，以及参与维护、更新和发布算法sdk； 3. 参与机器人领域关键算法的预研和落地。