小鹏汽车驾舱一体专家/高级专家/总监
任职要求
职位要求 1、计算机相关专业学历，具备计算机视觉的扎实基础。并在计算机视觉、机器学习等相关领域的经验； 2、有带工程 团队经验，指导工程团队技术工作并把控方向 3、有决断力，对风险和收益有很好的平衡把我 4、具备模型开发经验，熟悉主流视觉模型和视…
工作职责
【岗位描述】 架构设计和工程落地计算机视觉/多模态AI系统，进行下一代驾舱一体AI系统的技术路线规划，确保团队持续产生高质量工程交付和学术预研成果。配合小鹏新一代AI芯片，实现包括但不限于舱外舱内人员与各类开集物体的检测，人体动作和行为的理解与分析，危险动作和场景的预警；车内气氛状态的感知等。 1、模型与算法系统设计：基于最先进的机器学习和神经网络方法算法，开发多模态（图像、视频、文本）模型。 2、技术路线和团队建设：结合产品需求和小鹏AI端/云规划，制定明确的工程技术演进方案和落地计划。确保团队高效运转。 3、创建训练所需的数据集；并根据模型表现以及功能需求，动态筛选、整理与适配数据。 4、实施和优化大模型的分布式训练，提高模型训练的效率和性能。 5、根据相应任务，构建合理的测试数据集，测试视觉语言模型的KPI。 6、与模型部署团队进行沟通，协助模型的转化和部署。 7、实时跟进学术界前沿算法，升级改进数据生成算法与软件。 8、跨团队跨部门沟通协作。
【岗位描述】 设计和实现计算机视觉系统。此视觉系统将用于实现包括但不限于车内人员与物体的检测和属性划分；人员的动作和行为的理解与分析，危险动作和场景的预警；车内气氛状态的感知等。 1、模型与算法设计：基于最先进的机器学习和神经网络方法算法，开发多模态（图像、视频、文本）模型。 2、创建训练所需的数据集；并根据模型表现以及功能需求，动态筛选、整理与适配数据。 3、实施和优化大模型的分布式训练，提高模型训练的效率和性能。 4、根据相应任务，构建合理的测试数据集，测试视觉语言模型的KPI。 5、与模型部署团队进行沟通，协助模型的转化和部署。 6、实时跟进学术界前沿算法，升级改进数据生成算法与软件。 7、跨团队跨部门沟通协作。
Job Description: 1. 负责整个远程驾驶⻋端系统的设计与实现 2. 负责协调⻋端系统与⾃动驾驶中间件(ROS/ROS2/Autoware等)的集成 3. 对接各类⻋端接⼝, 可以独⽴根据⻋端接⼝进⾏系统设计与实现 4. 负责⻋端系统与云端系统的通信 5. 负责远程驾舱规范的设计与编写
1、基于Unity完成舱驾一体的3D应用的功能开发，包括智驾SR、3D桌面、3D车控、3D空调座椅、一镜到底等； 2、与产品经理、设计师和安卓工程师紧密合作，确保Unity应用能够无缝集成到车载系统中，确保3DHMI的量产落地； 3、对舱驾一体的3D应用进行性能优化和稳定性优化，包括内存优化、渲染优化和交互优化，确保车载3DHMI的稳定性和流畅性； 4、参与舱驾一体的3D技术创新，推动新功能和技术的引入和落地，持续打磨和提升3DHMI用户体验；
1. 负责行车辅助、自动泊车、视觉语言模型（VLM）、驾驶员监测系统（DMS）、端到端模型等数据的接入与后处理工作，为智能驾驶人机交互体验的持续优化提供高质量数据支持 ； 2. 制定人机交互功能所需的数据解决方案，并对感知模型提出明确的数据需求，参与模型输出结果的验收评估 ； 3. 研究端到端学习、视觉语言行动（VLA）、舱驾一体化等新兴技术在人机交互场景中的应用 ； 4. 维护人机交互引擎的稳定性与高性能表现，确保全链路帧率流畅及数据协议的兼容性与合理性；