希音资深后台开发（大数据组件-hdfs/yarn）
社招全职5年以上信息技术类地点：南京 | 深圳状态：招聘
任职要求
1.有5年以上大数据平台开发/运维经验，有生产大规模hadoop集群管理优化经验。 2.熟悉hdfs/yarn开源组件源码，有较强的源码问题定位和解决能力，有组件二次开发优化经验者优先。 3.熟悉Kubernetes/Docker，有组件容器化经验者优先。 4.…
登录查看完整任职要求
微信扫码，1秒登录
工作职责
岗位描述 1.负责 hdfs/yarn on k8s性能优化、高可用、弹性扩缩容与多活灾备方案 2.落地并优化yarn on k8s，并为大规模spark/hive计算提供高效支持。 3.负责hdfs/yarn on k8s业务问题解决，日常稳定性保障。 4.参与运维自动化平台功能研发。
包括英文材料
大数据+
https://www.youtube.com/watch?v=bAyrObl7TYE
https://www.youtube.com/watch?v=H4bf_uuMC-g
With all this talk of Big Data, we got Rebecca Tickle to explain just what makes data into Big Data.
Hadoop+
https://www.runoob.com/w3cnote/hadoop-tutorial.html
Hadoop 为庞大的计算机集群提供可靠的、可伸缩的应用层计算和存储支持，它允许使用简单的编程模型跨计算机群集分布式处理大型数据集，并且支持在单台计算机到几千台计算机之间进行扩展。
[英文] Hadoop Tutorial
https://www.tutorialspoint.com/hadoop/index.htm
Hadoop is an open-source framework that allows to store and process big data in a distributed environment across clusters of computers using simple programming models.
HDFS+
https://hadoop.apache.org/docs/r1.2.1/hdfs_design.html
The Hadoop Distributed File System (HDFS) is a distributed file system designed to run on commodity hardware.
https://www.ibm.com/cn-zh/think/topics/hdfs
Hadoop 分布式文件系统 (HDFS) 是一种管理大型数据集的文件系统，可在商用硬件上运行。
Yarn+
[英文] Introduction
https://yarnpkg.com/getting-started
Yarn is an established open-source package manager used to manage dependencies in JavaScript projects.
Kubernetes+
https://kubernetes.io/docs/tutorials/kubernetes-basics/
This tutorial provides a walkthrough of the basics of the Kubernetes cluster orchestration system.
https://kubernetes.io/zh-cn/docs/tutorials/kubernetes-basics/
本教程介绍 Kubernetes 集群编排系统的基础知识。每个模块包含关于 Kubernetes 主要特性和概念的一些背景信息，还包括一个在线教程供你学习。
https://www.youtube.com/watch?v=s_o8dwzRlu4
Hands-On Kubernetes Tutorial | Learn Kubernetes in 1 Hour - Kubernetes Course for Beginners
https://www.youtube.com/watch?v=X48VuDVv0do
Full Kubernetes Tutorial | Kubernetes Course | Hands-on course with a lot of demos
还有更多 •••
相关职位
社招6年以上信息技术类
——Spark方向： 1.大数据新技术规划、调研、选型及推广落地。 2.负责大数据组件内核开发优化，推进组件容器化，进行组件二次开发与适配等工作。 3.日常负责大数据框架组件的性能优化，稳定性保障，异常监控及线上问题对接解决。 4.参与平台功能研发，提供业务系统化的解决方案。
更新于 2025-07-16深圳
社招3年以上信息技术类
1.大数据基础平台、应用平台功能设计和开发。 2.负责大数据平台及组件的调研选型，部署，日常监控及问题解决。 3.参与海量数据处理方案设计，提供业务系统技术支撑。
更新于 2025-11-10南京|深圳
社招3年以上信息技术类
1.大数据基础平台、应用平台功能设计和开发。 2.负责大数据平台及组件的调研选型，部署，日常监控及问题解决。 3.参与海量数据处理方案设计，提供业务系统技术支撑。
更新于 2025-04-16南京|深圳
社招3年以上信息技术类
1.大数据基础平台、应用平台功能设计和开发。 2.负责大数据平台及组件的调研选型，部署，日常监控及问题解决。 3.参与海量数据处理方案设计，提供业务系统技术支撑。
更新于 2025-04-24南京