logo of hypergryph

鹰角网络大数据工程师(数仓方向)

校招全职程序技术类地点:上海状态:招聘

任职要求


1.大数据、软件工程、计算机科学、数学等相关专业本科以上学历。
2.熟练掌握SQL,具备编写和优化复杂SQL查询的能力。
3.对数据结构算法和分布式计算有基础的理解,具备解决复杂数据问题的能力。
4.具备良好的沟通和协作能力,能够与不同背景的团队成员有效合作。
5.对大数据组件如SparkHiveFlinkKafka原理有一定了解的优先。
6.有数仓,数据湖相关实习经验优先。

工作职责


1.负责数据收集、清洗、转换和处理(ETL)流程的设计,开发和实施。
2.参与数据体系的技术调研、验证。
3.监控数据质量,确保数据的准确性和完整性。
4.参与数据仓库的建设、模型的梳理和建立。
包括英文材料
大数据+
学历+
SQL+
数据结构+
算法+
Spark+
Hive+
Kafka+
相关职位

logo of bytedance
社招K9374

1、负责电商、生活服务、直播、抖音等业务的离线与实时数据仓库的构建; 2、负责数据模型的设计,ETL实施,ETL性能优化,ETL数据监控以及相关技术问题的解决; 3、负责指标体系建设与维护; 4、深入业务,理解并合理抽象业务需求,发挥数据价值,与业务团队紧密合作; 5、参与大数据应用规划,为数据产品、挖掘团队提供应用指导; 6、参与数据治理工作,提升数据易用性及数据质量。

更新于 2023-02-06
logo of bytedance
社招T0951

1、 负责电商、生活服务、直播、抖音等业务的离线与实时数据仓库的构建; 2、负责数据模型的设计,ETL实施,ETL性能优化,ETL数据监控以及相关技术问题的解决; 3、负责指标体系建设与维护; 4、深入业务,理解并合理抽象业务需求,发挥数据价值,与业务团队紧密合作; 5、参与大数据应用规划,为数据产品、挖掘团队提供应用指导; 6、参与数据治理工作,提升数据易用性及数据质量。

更新于 2022-06-23
logo of xpeng
社招自动驾驶板块

1. 数据指标体系搭建:深挖数据价值,构建和维护车端信号数据仓库体系和数据指标体系,为算法和数据闭环提供PB级共享平台和框架支持;负责核心数据指标体系(包括业务分类、生产状态、功能指标等)的搭建、监控与运营;快速输出并不断沉淀标准化的产品数据体系,让业务的数据化运营更加高效、便捷; 2. 数据治理:梳理上下游的数据资产,制定及推广数据标准(如研发规范、质量规范、保障规范)和治理流程,确保数据准 确性、完整性和一致性。 3. 数据管理:负责元数据管理、数据质量检查、数据分级管理等系统的设计、开发及应用,提升数据易用性、可用性及稳定性; 4. 业务团队数据需求的研发支撑:如日志埋点、车联网数据、内部与外部数据的采集、数据同步、数据清洗与标准化、数据模型设计、离线数据处理、实时数据处理、数据服务化、数据可视化等;

更新于 2025-07-08
logo of xpeng
社招

1.负责自动驾驶业务数据的数据采集、清洗、转换和加载(ETL)流程,构建和维护车端信号数据仓库体系和数据指标体系 2.支持C端用户和B端分析的各种数据需求 3.参与数据治理工作(如数据质量核查、元数据管理等) 建立监控和反馈指标,持续优化改进产品的架构及性能,保证PB级数仓的数据质量和平台稳定性

更新于 2025-06-04