米哈游资深数据开发工程师(人事系统)
社招全职程序&技术类地点:上海状态:招聘
任职要求
1、熟悉多项大数据处理/分析相关的工具/框架,包括但不限于Kafka,Flink,Spark,Paimon,Starrocks等常见技术框架和工具; 2、熟悉数据仓库实施方法论、深入了解数据仓库体系,并支撑过实际业务场景; 3、掌握Java、Python、Go等至少一门编程语言,具备较强的编码和trouble-shooting能力,…
登录查看完整任职要求
微信扫码,1秒登录
工作职责
1、参与米哈游职能线系统数据仓库的设计、开发、运维,构建信息化业务数据指标体系; 2、根据不同的业务场景,构建数据模型和业务指标体系,建立和完善日常业务数据报告体系,能够及时、准确、完整的披露业务执行情况; 3、主动理解并合理抽象业务需求,构造领域数据资产,与业务和研发团队紧密合作,提供数据分析和数据模型开发的技术解决方案; 4、基于Flink/Spark等计算引擎完成实时/离线数仓建设,进行ETL开发,保障数据质量。
包括英文材料
Kafka+
https://developer.confluent.io/what-is-apache-kafka/
https://www.youtube.com/watch?v=CU44hKLMg7k
https://www.youtube.com/watch?v=j4bqyAMMb7o&list=PLa7VYi0yPIH0KbnJQcMv5N9iW8HkZHztH
In this Apache Kafka fundamentals course, we introduce you to the basic Apache Kafka elements and APIs, as well as the broader Kafka ecosystem.
Flink+
https://nightlies.apache.org/flink/flink-docs-release-2.0/docs/learn-flink/overview/
This training presents an introduction to Apache Flink that includes just enough to get you started writing scalable streaming ETL, analytics, and event-driven applications, while leaving out a lot of (ultimately important) details.
https://www.youtube.com/watch?v=WajYe9iA2Uk&list=PLa7VYi0yPIH2GTo3vRtX8w9tgNTTyYSux
Today’s businesses are increasingly software-defined, and their business processes are being automated. Whether it’s orders and shipments, or downloads and clicks, business events can always be streamed. Flink can be used to manipulate, process, and react to these streaming events as they occur.
Spark+
[英文] Learning Spark Book
https://pages.databricks.com/rs/094-YMS-629/images/LearningSpark2.0.pdf
This new edition has been updated to reflect Apache Spark’s evolution through Spark 2.x and Spark 3.0, including its expanded ecosystem of built-in and external data sources, machine learning, and streaming technologies with which Spark is tightly integrated.
StarRocks+
https://docs.starrocks.io/docs/quick_start/
These Quick Start guides will help you get going with a small StarRocks environment.
https://itnext.io/introduction-to-starrocks-a-new-modern-analytical-database-1db2177d26e1
Recently, I had the opportunity to explore StarRocks which is the new kid in the block when talking about massive scale databases which are able to handle petabytes of data.
数据仓库+
https://www.youtube.com/watch?v=9GVqKuTVANE
From Zero to Data Warehouse Hero: A Full SQL Project Walkthrough and Real Industry Experience!
https://www.youtube.com/watch?v=k4tK2ttdSDg
还有更多 •••
相关职位
社招10年以上网易职能
1、负责网易职能HR系统的服务端研发工作,按照设计要求,完成技术方案的实现; 2、重点关注系统设计方案和理性,安全性,稳定性,可靠性等方面,解决系统技术难点,参与架构持续升级。 3、关注互联网和企业信息化热点技术的发展方向,能够提出、评估并应用新技术。 4、参与系统需求分析与讨论,并提出技术可行性方案。
更新于 2025-07-11杭州
社招5年以上技术团队开发
1. 负责HR系统的前端架构设计、核心开发及方案落地。 2. 优化前端技术体系与性能,保障系统高效稳定运行。 3. 开发业务适配工具并推动流程自动化,升级团队技术能力。 4. 协同团队攻关技术难点,推动前沿技术在业务中创新应用。 5. 制定前端技术规范,引领技术创新方向,满足业务迭代需求。 6. 使用AI相关技术,实现研发及业务提效。
更新于 2025-11-03上海
社招JK8FV
1、负责各类效率工具与企业SaaS的后端架构设计与研发,主要形式有Web系统、小程序、H5应用等,为海量用户提供优质的信息服务和极致体验; 2、和产品经理配合,参与产品需求讨论、功能定义等,帮助职能部门梳理业务思路,固化工作流,提高效率; 3、协助团队攻克各种高并发、数据隔离等方面的技术难关; 4、参与制定代码规范、测试规范,建立起开发质量控制方法; 5、负责高质量的设计和编码,提升效率工具的服务体验。
更新于 2022-01-04北京