高德地图高德-高级数据开发工程师(ETL)-BI专项
任职要求
1、计算机、数学、统计或者相关专业本科以上学历; 2、熟悉Java/Python,精通SQL,具有5年以上数据研发经验; 3、熟悉HADOOP大数据平台架构:HDFS/HBase/Hive/MapReduce,熟练掌握MapReduce程序开发,了解实时计算,有使用过Flink、Spark Streaming等开源实时流引擎的优先; 4、对数据仓库系统架构具有良好的认知,理解数据分层、数据倾斜、错峰调度等理念,并具有相关实战经验。
工作职责
1、加入高德地图的商业智能BI团队,深入理解高德核心业务,为决策层评估业务价值、进行业务决策等提供数据支撑; 2、数据研发:参与高德地图打车、搜索等核心业务的数据仓库、数据产品建设,参与数据治理并沉淀业务数据资产; 3、数据挖掘:基于高德地图的海量日志,通过算法模型挖掘有价值的业务信息,指导高德地图的产品迭代。
1、加入高德地图的商业智能BI团队,深入理解高德核心业务,为决策层评估业务价值、进行业务决策等提供数据支撑; 2、数据研发:参与高德地图打车、搜索等核心业务的数据仓库、数据产品建设,参与数据治理并沉淀业务数据资产; 3、数据挖掘:基于高德地图的海量日志,通过算法模型挖掘有价值的业务信息,指导高德地图的产品迭代。
1. 负责大数据平台的开发、维护和优化,包括数据的采集、存储、清洗、计算和可视化等方面; 2. 设计和构建数据仓库,编写ETL流程和数据模型,能根据业务对数据进行主题模型设计、宽表开发和分层管理; 3.与 业务部门和数据科学团队合作,协助BI平台数据分析、报表开发工作,使用Hadoop、Spark等技术进行大数据分析和处理; 4. 进行数据应用程序开发,使用Java、Python等编程语言进行开发
本岗位为专门面向算法服务的数据开发工程师,主要职责有以下几点: 1、负责智能技术组的数据中台建设,支持智能服务业务的数据开发需求; 2、设计、部署和优化离线/在线数仓数据模型,开发和维护ETL流程,串联智能服务全链路数据生产,为后续BI开发提供各类中间层表; 3、处理海量阿里云领域数据语料,清洗、转换、整合成算法可用的数据形态供后续大模型训练、调优使用; 4、针对业务目标进行数据分析和洞察,开发数据报表,生成数据报告。
职位概述: 作为数据开发专家,您将负责设计、开发和维护数据仓库、数据湖和数据管道,确保数据的准确性、完整性和可访问性。您将与数据科学家、分析师和业务团队紧密合作,提供数据支持,推动数据驱动的决策和创新。 设计和实现高效的数据模型,支持复杂的数据查询和分析需求。 开发和维护数据集成和ETL(提取、转换、加载)流程。 优化数据存储解决方案,确保数据的安全性和合规性。 与跨职能团队合作,理解业务需求,提供定制化的数据解决方案。 监控数据质量,确保数据准确性和一致性。 跟踪和评估新兴的数据技术和工具,推动技术创新。 编写技术文档,为团队成员提供指导和培训。 管理数据项目的时间表和预算,确保按时交付高质量的成果。