迅雷数仓开发工程师
社招全职3年以上地点:深圳状态:招聘
任职要求
1、本科及以上学历,3年以上相关工作经验; 2、熟悉Hadoop/Kafka/Flink/OLAP等大数据技术和组件,对SQL有一定调优经验; 3、具备扎实的数仓理论和实践经验,熟悉数据ETL加工流程,实际主导过…
登录查看完整任职要求
微信扫码,1秒登录
工作职责
1、负责面向海量业务数据的实时和离线数仓设计、开发和维护工作; 2、负责迅雷业务的指标体系设计和开发工作; 3、参与团队数据治理相关工作,提升数据质量、数仓完备度和数据分析效率;
包括英文材料
学历+
Hadoop+
https://www.runoob.com/w3cnote/hadoop-tutorial.html
Hadoop 为庞大的计算机集群提供可靠的、可伸缩的应用层计算和存储支持,它允许使用简单的编程模型跨计算机群集分布式处理大型数据集,并且支持在单台计算机到几千台计算机之间进行扩展。
[英文] Hadoop Tutorial
https://www.tutorialspoint.com/hadoop/index.htm
Hadoop is an open-source framework that allows to store and process big data in a distributed environment across clusters of computers using simple programming models.
Kafka+
https://developer.confluent.io/what-is-apache-kafka/
https://www.youtube.com/watch?v=CU44hKLMg7k
https://www.youtube.com/watch?v=j4bqyAMMb7o&list=PLa7VYi0yPIH0KbnJQcMv5N9iW8HkZHztH
In this Apache Kafka fundamentals course, we introduce you to the basic Apache Kafka elements and APIs, as well as the broader Kafka ecosystem.
Flink+
https://nightlies.apache.org/flink/flink-docs-release-2.0/docs/learn-flink/overview/
This training presents an introduction to Apache Flink that includes just enough to get you started writing scalable streaming ETL, analytics, and event-driven applications, while leaving out a lot of (ultimately important) details.
https://www.youtube.com/watch?v=WajYe9iA2Uk&list=PLa7VYi0yPIH2GTo3vRtX8w9tgNTTyYSux
Today’s businesses are increasingly software-defined, and their business processes are being automated. Whether it’s orders and shipments, or downloads and clicks, business events can always be streamed. Flink can be used to manipulate, process, and react to these streaming events as they occur.
OLAP+
https://www.youtube.com/watch?v=iw-5kFzIdgY
OLAP (for online analytical processing) is software for performing multidimensional analysis at high speeds on large volumes of data from a data warehouse, data mart, or some other unified, centralized data store.
还有更多 •••
相关职位
社招2年以上食杂零售
1.参与小象离线和实时数仓开发,沉淀数据资产。 2.联合产品、商分等部门,高质高效交付业务需求。 3.深入理解生鲜自营即时零售业务,推动数据应用建设,提升业务决策质量和效率。
更新于 2025-04-03北京
社招4年以上核心本地商业-基
1.承担美团服务零售业务线的数仓设计和开发工作; 2.承担业务方应用层数据的搭建和开发工作; 3.承担服务零售业务数据质量、成本、安全等各方向数据治理工作; 4.业务方数据问题的统一接口人与综合解决方案提供方,对外提供一站式服务; 5.跨团队沟通、推动数据生产链路上的问题改进。
更新于 2025-04-03上海
社招3年以上数据仓库部
工作职责: 1.参与房产交易相关数仓建设,构建层次清晰、数据准确、运行稳定的数仓,包括离线和实时数仓; 2.以业务需求承接为导向,对业务过程、数据使用场景等进行抽象,完成模型的设计、开发工作,沉淀高复用、易使用的数据模型; 3.与数据产品、业务方密切配合,梳理需求要点,一起充分发挥数据价值; 4.参与数仓相关治理工作,包括但不限于表存储的治理、etl任务的优化等; 5.结合大数据行业发展情况,探索新技术或者新的方法在公司内的落地,推动公司数仓开发技术进行升级。
更新于 2025-02-18北京