小米顶尖应届-云端 VLM/VLA 多模态大模型大模型算法工程师-汽车
任职要求
1. 计算机/AI相关专业. 有开源贡献/顶会一作论文/AI竞赛获奖者优先; 2. 深入理解多模态大模型技术原理及实现细节,具备大模型预训练、微调研发经验; 3. 逻辑清晰,能独立解决问题,具备优秀的团队协作和沟通能力。
工作职责
1. 结合最新 VLM/VLA 技术,设计自驾 VLM/VLA 云端大模型技术路线; 2. 针对高优场景及控车预测任务,设计模型训练迭代计划; 3. 交付满足评测指标的云端模型。 【课题名称】 云端 VLM/VLA 多模态大模型 【课题内容】 面向自驾场景理解及控车 Action预测任务,构建并优化云端 VLM/VLA 大模型,提升识别及预测准确率。
1. 搭建稳定、安全、高效的车云服务链路; 2. 云端大模型的预训练、推理部署等。 【课题名称】 端云协同多模态大模型提升推理精准度 【课题内容】 针对行泊车多种场景,搭建稳定、安全、高效的车云通信链路,并基于场景设计、训练大模型,识别行泊车场景,借助云端VLM能力进一步提升车端辅助驾驶能力。
1. 负责云端数据基座大模型架构设计、实现与落地; 2. 负责云端数据基座大模型训练方案的设计、实现与落地; 3. 针对自动驾驶的技术与场景痛点,提出有效可行的解决方案,与车端同学配合解决问题并形成车云闭环; 4. 负责相关学术文档,方法论的研究和调研,沉淀形成专利/文档/论文等。 【课题名称】 云端数据基座大模型 【课题内容】 利用云端硬件优势,自动化生产数据同时,探索自动驾驶能力上限: 1. 利用海量数据,训练云端基座大模型,以更简洁有效的方式输出感知和行为结果,输出高质量的自动标注数据,再用于云端训练,进一步提升云端能力,形成云端模型闭环; 2. 利用多种传感器数据,探索云端基座大模型能力上限,为车端算法提供简洁有效的方案指引和蒸馏知识。
1. 负责云端数据基座大模型架构设计、实现与落地; 2. 负责云端数据基座大模型训练方案的设计、实现与落地; 3. 针对自动驾驶的技术与场景痛点,提出有效可行的解决方案,与车端同学配合解决问题并形成车云闭环; 4. 负责相关学术文档、方法论的研究和调研,沉淀形成专利/文档/论文等。 【课题名称】 云端数据基座大模型 【课题内容】 利用云端硬件优势,自动化生产数据同时,探索自动驾驶能力上限: 1. 利用海量数据,训练云端基座大模型,以更简洁有效的方式输出感知和行为结果,输出高质量的自动标注数据,再用于云端训练,进一步提升云端能力,形成云端模型闭环; 2. 利用多种传感器数据,探索云端基座大模型能力上限,为车端算法提供简洁有效的方案指引和蒸馏知识。