小鹏汽车舱驾一体视觉资深工程师/专家
任职要求
【基本要求】 1、计算机相关专业学历，具备计算机视觉的扎实基础。并在计算机视觉、机器学习等相关领域的经验； 2、具备模型开发经验，熟悉主流视觉模型和视觉语言大模型算法，能够独立进行算法设计与优化； 3、熟悉深度学习框架（如 PyTorch、TensorFlow）； 4、具备数据清洗和预处理的丰富经验； 5、良好的团队合作精神和沟通能力，能够有效地与跨职能团队合作； 6、能够熟练阅读国内外论文。
工作职责
【岗位描述】 设计和实现计算机视觉系统。此视觉系统将用于实现包括但不限于车内人员与物体的检测和属性划分；人员的动作和行为的理解与分析，危险动作和场景的预警；车内气氛状态的感知等。 1、模型与算法设计：基于最先进的机器学习和神经网络方法算法，开发多模态（图像、视频、文本）模型。 2、创建训练所需的数据集；并根据模型表现以及功能需求，动态筛选、整理与适配数据。 3、实施和优化大模型的分布式训练，提高模型训练的效率和性能。 4、根据相应任务，构建合理的测试数据集，测试视觉语言模型的KPI。 5、与模型部署团队进行沟通，协助模型的转化和部署。 6、实时跟进学术界前沿算法，升级改进数据生成算法与软件。 7、跨团队跨部门沟通协作。
1. 负责行车辅助、自动泊车、视觉语言模型（VLM）、驾驶员监测系统（DMS）、端到端模型等数据的接入与后处理工作，为智能驾驶人机交互体验的持续优化提供高质量数据支持 ； 2. 制定人机交互功能所需的数据解决方案，并对感知模型提出明确的数据需求，参与模型输出结果的验收评估 ； 3. 研究端到端学习、视觉语言行动（VLA）、舱驾一体化等新兴技术在人机交互场景中的应用 ； 4. 维护人机交互引擎的稳定性与高性能表现，确保全链路帧率流畅及数据协议的兼容性与合理性；
【岗位描述】 架构设计和工程落地计算机视觉/多模态AI系统，进行下一代驾舱一体AI系统的技术路线规划，确保团队持续产生高质量工程交付和学术预研成果。配合小鹏新一代AI芯片，实现包括但不限于舱外舱内人员与各类开集物体的检测，人体动作和行为的理解与分析，危险动作和场景的预警；车内气氛状态的感知等。 1、模型与算法系统设计：基于最先进的机器学习和神经网络方法算法，开发多模态（图像、视频、文本）模型。 2、技术路线和团队建设：结合产品需求和小鹏AI端/云规划，制定明确的工程技术演进方案和落地计划。确保团队高效运转。 3、创建训练所需的数据集；并根据模型表现以及功能需求，动态筛选、整理与适配数据。 4、实施和优化大模型的分布式训练，提高模型训练的效率和性能。 5、根据相应任务，构建合理的测试数据集，测试视觉语言模型的KPI。 6、与模型部署团队进行沟通，协助模型的转化和部署。 7、实时跟进学术界前沿算法，升级改进数据生成算法与软件。 8、跨团队跨部门沟通协作。
一、客户项目管理 项目管理，负责从立项到SOP整个阶段的项目推动，制定整个项目阶段计划和里程碑，对接制定项目目标，及任务分解； 项目需求导入：企标拆解和评审，与客户侧的需求澄清，输出系统需求文档并组织内部评审，管理需求变更； 内部资源协调：拉通内部研发资源，确保内部研发资源到位，按时交付； 二、域控软硬一体开发流程梳理 梳理域控软硬一体内部软硬件开发流程，把流程规范化，使其符合16949和ASPICE的基础要求； 基于开发流程开发管理工具，提升研发效率； 主线产品的需求导入和管理，并在过程中持续优化产品。 三、项目质量管理 按照客户要求开展研发质量管理，例如APQP或者MLA； 对内管理内部研发活动交付物质量，组织评审，以及问题追踪管理； 对外按照客户要求交付，应对项目节点审核； 实物质量管理，产品交付功能检查，产品质量问题8D。
Job Description: 1. 负责整个远程驾驶⻋端系统的设计与实现 2. 负责协调⻋端系统与⾃动驾驶中间件(ROS/ROS2/Autoware等)的集成 3. 对接各类⻋端接⼝, 可以独⽴根据⻋端接⼝进⾏系统设计与实现 4. 负责⻋端系统与云端系统的通信 5. 负责远程驾舱规范的设计与编写