OPPO机器学习算法工程师(端侧AI方向)
任职要求
1.计算机、软件工程、数据挖掘、机器学习、计算机视觉、图像处理、自然语言处理、人工智能、数学等相关专业; 2.至少熟悉C++/Python/Java中的一种开发语言,熟悉常用计算机数据结构和算法; 3.熟悉机器学习…
工作职责
1. 负责端侧数据的整合、清洗与特征工程,提升数据可用性 2. 负责优化端侧算法的训练调优及工程化部署
1. 汽车业务:协助算法工程师完成汽车能耗、运动控制相关的算法研究与开发工作,将行业内相关的前沿技术和最新研究成果应用到实际业务中 2. 大家电业务:协助算法工程师完成空调、冰箱、洗衣机相关的AI算法研究和开发工作,将行业内前沿智能控制算法和大模型技术应用到实际业务中 3. 参与能耗预测、温度预测等时序预测问题的解决,合理构建特征,选择模型,实现精准预测 4. 参与智能控制算法、大模型的研究与验证,协助优化算法模型 5. 协助算法工程师完成上述相关算法的端侧部署、测试,支持量产交付
1. 负责多模态大模型的基础能力提升,如长窗口拓展,逻辑推理提升,指令遵循提升、自动化生成prompt等基础能力构建。 2. 负责图文多模态模型的下游算法研究,例如:SFT微调(包括full和lora),强化学习,图搜增强,知识蒸馏等技术方向; 3. 负责图文多模态技术在AI搜索、图片结构化提取、图片内容理解等应用领域云侧和端侧的研究和落地工作; 4. 跟进业界前沿技术,持续提升团队在图文多模态算法方面的技术积累。
方向一: 1.负责针对相机的计算成像的算法原型研发和演进 - 基础图像算法如3R(NoiseReduction, SuperResolution, HDR), 多帧多摄等; - 图像后处理算法如美颜、色彩映射,图像渲染等; - 软硬件结合图像算法如ISP(image signal processor)算法的开发调优、白平衡、自动对焦、自动曝光控制,色彩还原,多摄立体视觉,防抖算法的迭代进化等; 2.AI技术应用影像业务,利用机器学习,深度学习,模型压缩及小型化等前沿技术,解决low-level画质处理,语义理解等多领域核心问题,整体提升用户体验和业务价值; 3.针对android平台和手机soc芯片的图像处理算法架构设计的基础研究,实现全链路影像处理链路的端到端性能最优设计;针对图像/视频效果进行标准定义和定量评测的理论研究; 4.对于前沿技术的动态进行追踪,主导高校产学研合作或供应商技术合作,实现新的影像算法领域探索和技术创新。 方向二: 1.模型性能分析与优化 1)负责影像端侧模型性能分析与调优,包括推理速度、内存占用、功耗等关键指标优化; 2)设计并优化量化、剪枝、蒸馏等模型压缩技术,推动算法在移动端的高效部署; 3)针对GPU/NPU/DSP等硬件特性模型结构,识别模型运行中的瓶颈并提出改进方案,提升端侧推理效率。 2.技术预研与落地 1)跟踪行业前沿技术(如大模型端侧优化、模型压缩等),完成技术验证并推动业务落地; 2)协同算法团队优化模型架构,平衡性能与精度需求。 3)与硬件、系统框架团队合作,优化底层驱动及系统资源调度策略,提升模型运行效率;