网易高级数仓开发工程师(网易云音乐)
社招全职1-3年网易云音乐地点:杭州状态:招聘
任职要求
1、计算机相关专业本科及以上学历,拥有1-3年数据研发领域的工作经验; 2、在数据仓库设计与开发方面有丰富的经验,具备处理离线和实时数据的能力,有大规模数据离线处理经验者优先; 3、熟悉Hadoop/Spark/Flink等大数据生态系统相关技术,掌握Java、Scala语言进行开发,能够结合不同技术栈的优势提出高效的业务解决方案; 4、具备良好的业务理解力,可以从技术和业务两个角度解决问题,将复杂的业务需求转化为具体的技术实施方案; 5、拥有优秀的逻辑思维能力和抗压能力,注重结果导向,具备自我驱动的工作态度,能够在快节奏环境中高效工作; 6、对AI领域具有持续的学习热情,关注行业动态和技术趋势,具备主动学习能力和快速上手新技术的潜力,有AI相关项目经验者优先。
工作职责
1、负责音乐离线数据仓库的研发,通过设计合理的数据架构确保内外部数据的准确性、一致性和稳定性,工作内容包括但不限于数据清洗、模型设计、数据治理及系统稳定性保障。 2、深入理解业务需求,通过洞察业务策略来整合和收敛数据需求,提供系统化的解决方案并推动实施。 3、与数据分析师紧密合作,促进数据在产品运营中的应用,利用技术创新使数据成为业务发展的核心驱动力。 4、具备一定工程开发能力,负责AI agent相关应用的开发,探索数据与AI结合的创新场景,推动数据处理流程的自动化和智能化升级。
包括英文材料
学历+
数据仓库+
https://www.youtube.com/watch?v=9GVqKuTVANE
From Zero to Data Warehouse Hero: A Full SQL Project Walkthrough and Real Industry Experience!
https://www.youtube.com/watch?v=k4tK2ttdSDg
Hadoop+
https://www.runoob.com/w3cnote/hadoop-tutorial.html
Hadoop 为庞大的计算机集群提供可靠的、可伸缩的应用层计算和存储支持,它允许使用简单的编程模型跨计算机群集分布式处理大型数据集,并且支持在单台计算机到几千台计算机之间进行扩展。
[英文] Hadoop Tutorial
https://www.tutorialspoint.com/hadoop/index.htm
Hadoop is an open-source framework that allows to store and process big data in a distributed environment across clusters of computers using simple programming models.
Spark+
[英文] Learning Spark Book
https://pages.databricks.com/rs/094-YMS-629/images/LearningSpark2.0.pdf
This new edition has been updated to reflect Apache Spark’s evolution through Spark 2.x and Spark 3.0, including its expanded ecosystem of built-in and external data sources, machine learning, and streaming technologies with which Spark is tightly integrated.
Flink+
https://nightlies.apache.org/flink/flink-docs-release-2.0/docs/learn-flink/overview/
This training presents an introduction to Apache Flink that includes just enough to get you started writing scalable streaming ETL, analytics, and event-driven applications, while leaving out a lot of (ultimately important) details.
https://www.youtube.com/watch?v=WajYe9iA2Uk&list=PLa7VYi0yPIH2GTo3vRtX8w9tgNTTyYSux
Today’s businesses are increasingly software-defined, and their business processes are being automated. Whether it’s orders and shipments, or downloads and clicks, business events can always be streamed. Flink can be used to manipulate, process, and react to these streaming events as they occur.
大数据+
https://www.youtube.com/watch?v=bAyrObl7TYE
https://www.youtube.com/watch?v=H4bf_uuMC-g
With all this talk of Big Data, we got Rebecca Tickle to explain just what makes data into Big Data.
Java+
https://www.youtube.com/watch?v=eIrMbAQSU34
Master Java – a must-have language for software development, Android apps, and more! ☕️ This beginner-friendly course takes you from basics to real coding skills.
Scala+
相关职位
社招3年以上网易云音乐
1、负责音乐离线数据仓库的研发,通过合理的数据架构,保障内外数据的准确性、一致性和稳定性,包括数据清洗、模型设计、数据治理及稳定性保障; 2、深入理解业务,通过对业务策略的洞察,收敛业务数据需求,提供系统性的解决方案并落地; 3、与数据分析师合作推动数据为产品运营赋能,通过技术创新让数据为业务发展带来价值。
更新于 2024-12-04
社招3年以上
1、负责公司级数据仓库的架构设计、模型建设和商业分析,经营稽核指标体系开发,支持实时/离线分析核心代码编写。 2、负责对接业务,收集、整理并分析业务需求,规划和执行落地,保证按时交付高质量的结果。 3、配合企业商业分析师团队,增强企业商业情报分析能力,提升产品规划决策效率和准确性。 4、负责数据仓库及商业分析报表体系的维护,保障数据处理的质量和效率。
更新于 2025-07-10
社招2年以上诚云科技
本岗位为专门面向算法服务的数据开发工程师,主要职责有以下几点: 1、负责智能技术组的数据中台建设,支持智能服务业务的数据开发需求; 2、设计、部署和优化离线/在线数仓数据模型,开发和维护ETL流程,串联智能服务全链路数据生产,为后续BI开发提供各类中间层表; 3、处理海量阿里云领域数据语料,清洗、转换、整合成算法可用的数据形态供后续大模型训练、调优使用; 4、针对业务目标进行数据分析和洞察,开发数据报表,生成数据报告。
更新于 2025-10-10