
平安科技资深数据工程师
社招全职8年以上计算机网络技术类地点:深圳状态:招聘
任职要求
1、计算机科学、软件工程、数学、统计学或相关专业的本科及以上学历 2、熟练掌握大数据平台技术和原理,包括Hadoop、spark、Flink,具有任务调优经验 3、熟悉大数据全链路相关知识,如数据采集、数据清洗、数据应用等节点的核心处理机制; 4、具备8年以上保险、证券、银行等金融行业数据仓库建设、数据模型的构建和优化经验 5、具备良好的学习能力和解决问题的能力,能快速融入新项目
工作职责
1、具备大型集团企业级数据仓库建设经验,负责企业E-HR数据仓库的开发工作 2、规划和设计可靠性及稳定性高的大数据产品,保证数据的准确性和时效性; 3、负责离线、实时任务的调度管理和优化方案,确保任务的稳定高效运行; 4、参与设计数据架构,数据建模,搭建和维护离线数据仓库模型; 5、提供面向业务的数据服务,完成数据指标的加工,多维分析和展现 6、具备强大的沟通协调能力及敏锐的数据洞察力,能够基于业务需求,精准选取分析维度并提取关键数据
包括英文材料
学历+
大数据+
https://www.youtube.com/watch?v=bAyrObl7TYE
https://www.youtube.com/watch?v=H4bf_uuMC-g
With all this talk of Big Data, we got Rebecca Tickle to explain just what makes data into Big Data.
Hadoop+
https://www.runoob.com/w3cnote/hadoop-tutorial.html
Hadoop 为庞大的计算机集群提供可靠的、可伸缩的应用层计算和存储支持,它允许使用简单的编程模型跨计算机群集分布式处理大型数据集,并且支持在单台计算机到几千台计算机之间进行扩展。
[英文] Hadoop Tutorial
https://www.tutorialspoint.com/hadoop/index.htm
Hadoop is an open-source framework that allows to store and process big data in a distributed environment across clusters of computers using simple programming models.
Spark+
[英文] Learning Spark Book
https://pages.databricks.com/rs/094-YMS-629/images/LearningSpark2.0.pdf
This new edition has been updated to reflect Apache Spark’s evolution through Spark 2.x and Spark 3.0, including its expanded ecosystem of built-in and external data sources, machine learning, and streaming technologies with which Spark is tightly integrated.
Flink+
https://nightlies.apache.org/flink/flink-docs-release-2.0/docs/learn-flink/overview/
This training presents an introduction to Apache Flink that includes just enough to get you started writing scalable streaming ETL, analytics, and event-driven applications, while leaving out a lot of (ultimately important) details.
https://www.youtube.com/watch?v=WajYe9iA2Uk&list=PLa7VYi0yPIH2GTo3vRtX8w9tgNTTyYSux
Today’s businesses are increasingly software-defined, and their business processes are being automated. Whether it’s orders and shipments, or downloads and clicks, business events can always be streamed. Flink can be used to manipulate, process, and react to these streaming events as they occur.
数据仓库+
https://www.youtube.com/watch?v=9GVqKuTVANE
From Zero to Data Warehouse Hero: A Full SQL Project Walkthrough and Real Industry Experience!
https://www.youtube.com/watch?v=k4tK2ttdSDg
相关职位

社招计算机网络技术类
1、负责梳理业务逻辑模型,管理和建设数据体系,根据数据进行业务分析。 2、负责数据仓库及BI项目的建设需求调研、业务沟通、数据分析,整理需求说明书、数据调研报告、数据分析报告; 3、负责设计数据仓库的模型结构、ETL流程及mapping逻辑,数据仓库及BI项目的系统与业务系统的接口设计和确认工作; 4、负责对数据进行各个维度的分析和提取,最好有建模经验; 5. 负责应用分析模块的模型和展现设计
更新于 2025-08-25
社招旅游业务AI &
1、负责数据仓库模型迭代以及数据仓库应用产品的设计和开发; 2、负责各项常规数据需求/看板的搭建和维护,建立例行的数据监控机制; 3、负责对业务关键数据进行统计分析,提出具有建设性的建议及分析报告; 4、参与专题分析,对业务模型抽象、数据模型设计开发,通过深层次的数据挖掘发现问题,驱动业务。
更新于 2025-04-02
社招5年以上旅游业务AI &
参与离线和实时数据仓库架构设计和开发,构建高效、稳定、可扩展的数据仓库系统。 负责数据仓库模型设计,包括星型模型、雪花模型、星座模型等,并制定数据仓库开发规范。 负责数据资产的运营,结合业务现状,解决数据资产生产、消费过程中的卡点,提升相关团队的用数体验 开发和维护 ETL/ELT 数据 pipeline,确保数据高效、准确地从源系统加载到数据仓库 优化数据仓库性能,解决数据查询和数据加载的性能瓶颈。
更新于 2025-02-26