京东数据闭环开发工程师
任职要求
1.计算机视觉、模式识别、机器学习、电子信息、机器人等相关专业的本科/硕士,需要有自动驾驶1年以上从业经验 2.了解数据结构、算法、代码优化和大规模数据处理等相关知识; 精通 C/C++ 或 Python 编程,有自动驾驶数据闭环相关工作经验的优先,熟悉DDS中间件,或ROS、Someip、zmq等中间件(车端数据挖掘方向) 3.了解智驾技术体系、软…
工作职责
1.负责推进和参与自动驾驶用户数据闭环平台的构建和迭代优化,包括数据落盘回收、数据服务、数据工具等各环节的设计开发和上线落地 2.负责自动驾驶数据闭环相关的策略研发工作,制定数据挖掘方案,计划并实施,保证数据质量和闭环效果,为线上模型迭代提供数据支持。 3.探索车端数据挖掘/主动学习算法设计开发,提取高价值自动驾驶数据,解决长尾问题,包括但不局限于(rule base、SVM learning等) 4.基于海量自动驾驶场景和行为,科学地管理自动驾驶用户数据和已挖掘的算法问题, 研究和设计自动驾驶各算法高效发现问题和利用数据的方案;与算法研发工程师合作,通过数据驱动的方式挖掘自动驾驶算法需要关注的关键场景和高价值数据,参与算法迭代 5.综合车端的感知、规控、地图、车辆状态等信息,对各种异常case进行识别并做自动化归因策略开发;
1、负责自动驾驶数据闭环相关的平台研发工作,制定数据挖掘方案,计划并实施,保证数据质量和闭环效果,为线上模型迭代提供数据支持; 2、负责数据闭环的标定平台、模型部署平台研发工作,通过数据及算法挖掘传感器标定异常,提前发现问题以及风险前置; 3、基于海量自动驾驶场景和行为,科学地管理自动驾驶用户数据和已挖掘的算法问题,研究和设计自动驾驶各算法高效发现问题和利用数据的方案。与算法研发工程师合作,通过数据驱动的方式挖掘自动驾驶算法需要关注的关键场景和高价值数据,参与算法迭代; 4、负责自动驾驶数据闭环相关的策略研发工作,制定项目挖掘方案,计划并实施,保证数据质量和闭环效果。设计和开发挖掘策略/算法/工具,为感知算法任务提供研发迭代需要的数据,支持数据转化为驾驶能力; 5、综合车端的感知、规控、地图、车辆状态等信息,利用大数据技术(如 Flink、Spark)对各种异常 case 进行识别和自动化归因算法开发; 6.负责推进自动驾驶用户数据闭环平台构建、优化,确保闭环科学地、稳定地、高效地运转。基于数据湖技术(如 Hadoop、HDFS、Delta Lake 等)构建高效的数据存储、处理和分析平台。

1、负责自动驾驶大数据平台系统中的数据仓库建设,含数据处理,数据存储,数据工具等的开发和优化; 2、负责场景化数据挖掘、数据评估、模型训练系统的设计和开发; 3、负责车辆车端数据采集、数据回传相关软件开发工作; 4、负责数据体系相关数据的抽取、清洗、转换、服务、接口对接等工作; 5、负责所开发软件的性能优化相关工作以及相关开发文档的撰写。
1. 数据指标体系搭建:深挖数据价值,构建和维护车端信号数据仓库体系和数据指标体系,为算法和数据闭环提供PB级共享平台和框架支持;负责核心数据指标体系(包括业务分类、生产状态、功能指标等)的搭建、监控与运营;快速输出并不断沉淀标准化的产品数据体系,让业务的数据化运营更加高效、便捷; 2. 数据治理:梳理上下游的数据资产,制定及推广数据标准(如研发规范、质量规范、保障规范)和治理流程,确保数据准 确性、完整性和一致性。 3. 数据管理:负责元数据管理、数据质量检查、数据分级管理等系统的设计、开发及应用,提升数据易用性、可用性及稳定性; 4. 业务团队数据需求的研发支撑:如日志埋点、车联网数据、内部与外部数据的采集、数据同步、数据清洗与标准化、数据模型设计、离线数据处理、实时数据处理、数据服务化、数据可视化等;