贝壳数仓工程师(J66385)

任职要求

技能要求 
1.学历要求：本科及以上学历（计算机、统计学、数学等相关专业优先）  
2.经验要求：3年以上数据仓库开发经验，优秀者可放宽至2年  
3.技术栈：精通SQL（复杂调优）、Hive/Spark/Fli…

工作职责

1. 数仓架构设计与建模  
   - 参与数据仓库分层设计，主导或独立完成核心业务线/主题域的模型设计。
   - 优化数据链路性能，解决数据倾斜、小文件等问题，降低存储与计算成本。  
2. ETL开发与优化  
   - 负责离线/实时数据抽取、清洗、转换流程开发，熟练使用Hive/Spark/Flink等工具，保障数据准确性与时效性。  
   - 设计高效调度方案，监控ETL任务稳定性，优化资源消耗（如存储、计算、网络）。  
3. 数据治理与质量保障  
   - 制定数据规范（命名、指标口径等），推动主数据管理、元数据治理，提升数据易用性。  
   - 建立数据质量监控体系，通过DQC工具或自定义规则识别异常，推动问题闭环。  
4. 业务支持与数据分析  
   - 与业务团队紧密协作，理解需求并抽象数据指标，支撑BI报表、数据可视化及AI训练数据层建设。  
   - 参与数据产品规划，提供底层数据支持，推动数据驱动业务决策。  
5. 技术研究与创新  
   - 跟踪数仓新技术（如Apache Paimon等），优化现有架构或引入新工具提升效率。