小米顶尖应届 - 多模态影像算法工程师-芯片
任职要求
1、计算机科学、应用数学、模式识别、计算机视觉、人工智能或相关专业； 2、图像视频算法实践经验，对图像/视频相关的深度学习、传统算法有深入的理解，或有突出的学术成绩； 3、发表高质量计算机视觉相关期刊、会议论文者优先，高质量学术竞赛获奖者优先； 4、精通图像处理算法（如OpenCV）及深度学习框架（如PyTorch、TensorFlow等），有良好的编码能力；
工作职责
1. 参与相机影像应用领域的算法研发工作，包括但不限于AIGC、大模型、世界模型等方向 ，参与和主导上述模型在自研芯片平台上的设计、开发与优化。 2. 与产品深度沟通，参与新一代手机影像应用类产品的方案设计，并为算法产品化过程中 出现的各类技术难题出谋划策。 3. 跟进对应领域最新行业进展，结合产品规划对算法进行探索与预研。
1.参与SoC智能调度引擎开发，突破多核异构SoC能效瓶颈，实现设备续航提升20%-30%+； 2.研发基于AI预测模型的动态调度框架，完成CPU/NPU/GPU/DSP混合计算单元毫秒级资源切换与三维能效评估； 3.设计指令级功耗建模工具与自适应DVFS算法，提升典型用户场景10%+的能效提升； 4.深度协同澎湃芯片及小米全栈技术生态，覆盖手机/汽车/机器人等亿级设备，技术成果直通国际顶会转化通道。 【课题名称】 端侧高效整机性能&能效优化技术研究 【课题内容】 小米玄戒芯片能效优化与智能调度体系研究课题背景： 面对手机/汽车/机器人等多场景的极端能效需求，玄戒SoC芯片需突破多核异构的能效瓶颈，通过智能调度引擎与AI驱动的功耗建模技术，构建"芯片+系统+生态"的三维能效优化体系。结合澎湃系列芯片低功耗研发经验（硬件利润率≤5%原则）及AI实验室全栈技术积累，实现续航提升20%-30%+的行业领先能效比，技术成果直通国际顶会转化通道。 挑战： 1. SoC异构计算单元智能调度引擎开发 - 构建基于AI预测模型的动态调度框架，实现CPU/NPU/GPU/DSP混合计算单元的毫秒级资源切换与负载均衡。 - 设计多目标优化算法，在典型用户场景（如多模态交互、自动驾驶感知）中达成计算资源利用率与能效比的协同提升。 2. 指令级功耗建模与自适应能效调控 - 开发面向玄戒O1架构特征的指令级功耗建模工具链，建立微架构-指令-场景的三维能效评估体系。 - 研发自适应DVFS算法与异构缓存协同机制，确保在影像处理、边缘推理等典型场景下实现10%+能效增益。 3. 全栈技术生态协同优化 - 深度整合澎湃芯片家族（C1/G1/S1）的异构调度能力，构建覆盖MIUI系统、车载OS、机器人OS的统一能效优化方案。 - 设计可扩展的调度框架，支持手机/汽车/机器人等设备的差异化能效需求，推动技术方案在IEEE/ACM等顶会的成果转化。
1. 参与领域大模型相关技术的调研验证； 2. 参与手机相机影像相关算法研发工作，开发行业领先的影像大模型算法； 3. 参与手机相机视觉相关功能研发，交付落地旗舰机； 4. 研究行业动态，紧跟视觉/多模态大模型相关领域最新学术研究成果并转化成商用技术； 5. 参与学术研究，产出具备行业影响力的科研成果。 【课题名称】 影像大模型研发 【课题内容】 1. 影像领域基础模型的研发； 2. 基于大模型的端到端影像系统研发； 3. 基于大模型影像功能算法的研发； 4. 基于大模型的图像理解、感知算法的研发; 5. 大模型小型化技术探索及研发。
1. 参与领域大模型相关技术的调研验证； 2. 参与手机相机影像相关算法研发工作，开发行业领先的影像大模型算法； 3. 参与手机相机视觉相关功能研发，交付落地旗舰机； 4. 研究行业动态，紧跟视觉/多模态大模型相关领域最新学术研究成果并转化成商用技术； 5.参与学术研究，产出具备行业影响力的科研成果。 【课题名称】 影像大模型研发 【课题内容】 1. 影像领域基础模型的研发； 2. 基于大模型的端到端影像系统研发； 3. 基于大模型影像功能算法的研发； 4. 基于大模型的图像理解、感知算法的研发; 5. 大模型小型化技术探索及研发。
1. 开展异构计算能效优化关键技术预研，重点突破跨处理单元的动态电压调节（DCVS）与调度协同理论； 2. 探索新型底层调度机制，研究基于强化学习的负载跟踪算法并完成原型验证平台搭建； 3. 构建相机硬件特征驱动的功耗建模体系，研发动态任务映射策略的仿真验证与量化评估工具； 4. 预研编译优化协同技术，开发面向影像系统的LTO/PGO优化原型及跨平台效能分析工具链。 【课题名称】 低功耗影像系统设计 【课题内容】 1. 构建手机异构计算架构（CPU/GPU/cDSP）的系统级能效模型，探索流水线级功耗/性能观测理论框架； 2. 研究影像系统多模态资源协同调度机制，开发基于动态负载预测的自适应能效优化算法； 3. 建立相机场景驱动的功耗特征量化评估体系，预研DVFS与动态任务映射的跨层级协同优化路径； 4. 创新编译优化技术架构，探索过程间优化（IPO）与链接时优化（LTO）的深度协同机制及效能评估模型。