大疆高级计算机视觉算法工程师(数据平台)
任职要求
1. 感知相关背景,8年以上的AI领域工作经历; 2. 熟悉感知业务对数据的需求,具备扎实的静态和动态建模标注能力,有过实际落地经验; 3. 对数据的挖掘、数据的生成以及模拟器仿真等有过相关工作经验,对高价值数据挖掘有过相关经历; 4. 具有敏锐的洞察能力,对业界最新技术有清晰的认知,并且善于利用大模型等能力解决数据业务的问题; 5. 具备较强的团队协作和沟通能力,在和团队沟通中善于推动目标的落地,抗压能力强; 6. 具备团队管理/复杂机器人系统经验者优先。
工作职责
1. 负责无人机感知系统中设计到的静态标注、语义标注和动态标注、数据自动标注能力建设; 2. 负责对业务方的长尾问题数据的挖掘和生成,提供高质量的数据用于业务改善; 3. 主导数据平台基础设施开发建设,为网络模型在无人机端侧应用提供数据和基础设施支撑; 4. 跟进国内外机器人领域前沿和学术前沿,组织核心技术洞察,给出技术方向指引和组织攻关。
方向一: 1.负责针对相机的计算成像的算法原型研发和演进 - 基础图像算法如3R(NoiseReduction, SuperResolution, HDR), 多帧多摄等; - 图像后处理算法如美颜、色彩映射,图像渲染等; - 软硬件结合图像算法如ISP(image signal processor)算法的开发调优、白平衡、自动对焦、自动曝光控制,色彩还原,多摄立体视觉,防抖算法的迭代进化等; 2.AI技术应用影像业务,利用机器学习,深度学习,模型压缩及小型化等前沿技术,解决low-level画质处理,语义理解等多领域核心问题,整体提升用户体验和业务价值; 3.针对android平台和手机soc芯片的图像处理算法架构设计的基础研究,实现全链路影像处理链路的端到端性能最优设计;针对图像/视频效果进行标准定义和定量评测的理论研究; 4.对于前沿技术的动态进行追踪,主导高校产学研合作或供应商技术合作,实现新的影像算法领域探索和技术创新。 方向二: 1.模型性能分析与优化 1)负责影像端侧模型性能分析与调优,包括推理速度、内存占用、功耗等关键指标优化; 2)设计并优化量化、剪枝、蒸馏等模型压缩技术,推动算法在移动端的高效部署; 3)针对GPU/NPU/DSP等硬件特性模型结构,识别模型运行中的瓶颈并提出改进方案,提升端侧推理效率。 2.技术预研与落地 1)跟踪行业前沿技术(如大模型端侧优化、模型压缩等),完成技术验证并推动业务落地; 2)协同算法团队优化模型架构,平衡性能与精度需求。 3)与硬件、系统框架团队合作,优化底层驱动及系统资源调度策略,提升模型运行效率;
1.负责针对相机的计算成像的算法原型研发和演进 - 基础图像算法如3R(NoiseReduction, SuperResolution, HDR), 多帧多摄等; - 图像后处理算法如美颜、色彩映射,图像渲染等; - 软硬件结合图像算法如ISP(image signal processor)算法的开发调优、白平衡、自动对焦、自动曝光控制,色彩还原,多摄立体视觉,防抖算法的迭代进化等; 2.AI技术应用影像业务,利用机器学习,深度学习,模型压缩及小型化等前沿技术,解决low-level画质处理,语义理解等多领域核心问题,整体提升用户体验和业务价值; 3.针对android平台和手机soc芯片的图像处理算法架构设计的基础研究,实现全链路影像处理链路的端到端性能最优设计;针对图像/视频效果进行标准定义和定量评测的理论研究; 4.对于前沿技术的动态进行追踪,主导高校产学研合作或供应商技术合作,实现新的影像算法领域探索和技术创新。
负责感知算法相关研究、开发与产品化,包括但不限于: 1. 负责承接多模态感知算法,包括但不限于视觉、激光雷达、亳米波雷达的深度、检测、分割、occ、动态等感知任务,并落地产品; 2. 结合自研平台硬件设计,选择高效的backbone和网络结构,并对网络进行压缩部署,实现高效端侧部署; 3. 负责研究视觉相机、结构光、激光雷达等传感器的特性,开发相关的传感器算法并落地产品; 4. 跟进调研最新的网络算法,并且导入新网络改善感知能力。