快手大数据运维开发工程师/专家
社招全职1-3年J0012地点：北京状态：招聘
任职要求
1、大学本科及以上学历，计算机或者相关专业，3年以上经验均可； 2、 熟悉Hadoop生态圈各组件基本原理以及使用（包括但不限于Hdfs、Yarn、Hbase、Kafka、Hive、Clickhouse）； 3、具备扎实的编程能力，掌握至少一种脚本语言(Shell、Perl、Python等)，熟悉Java等开发语言者优先，熟悉常用算法和数据结构； 4、…
登录查看完整任职要求
微信扫码，1秒登录
工作职责
1、负责公司数万节点大数据集群的各项运维管理工作，保障集群服务的高可用性运行； 2、负责超大规模集群服务运维管理平台的设计与研发工作，保障集群服务版本高速迭代以及变更的风险控制； 3、负责集群服务的监控报警体系规划与产品研发迭代，推进监控报警有效性与智能化； 4、负责集群服务容量规划、服务管理与治理规划与产品研发迭代工作。
包括英文材料
学历+
Hadoop+
https://www.runoob.com/w3cnote/hadoop-tutorial.html
Hadoop 为庞大的计算机集群提供可靠的、可伸缩的应用层计算和存储支持，它允许使用简单的编程模型跨计算机群集分布式处理大型数据集，并且支持在单台计算机到几千台计算机之间进行扩展。
[英文] Hadoop Tutorial
https://www.tutorialspoint.com/hadoop/index.htm
Hadoop is an open-source framework that allows to store and process big data in a distributed environment across clusters of computers using simple programming models.
HDFS+
https://hadoop.apache.org/docs/r1.2.1/hdfs_design.html
The Hadoop Distributed File System (HDFS) is a distributed file system designed to run on commodity hardware.
https://www.ibm.com/cn-zh/think/topics/hdfs
Hadoop 分布式文件系统 (HDFS) 是一种管理大型数据集的文件系统，可在商用硬件上运行。
Yarn+
[英文] Introduction
https://yarnpkg.com/getting-started
Yarn is an established open-source package manager used to manage dependencies in JavaScript projects.
HBase+
[英文] HBase Tutorial
https://www.tutorialspoint.com/hbase/index.htm
HBase is a data model that is similar to Google's big table designed to provide quick random access to huge amounts of structured data. This tutorial provides an introduction to HBase, the procedures to set up HBase on Hadoop File Systems, and ways to interact with HBase shell.
Kafka+
https://developer.confluent.io/what-is-apache-kafka/
https://www.youtube.com/watch?v=CU44hKLMg7k
https://www.youtube.com/watch?v=j4bqyAMMb7o&list=PLa7VYi0yPIH0KbnJQcMv5N9iW8HkZHztH
In this Apache Kafka fundamentals course, we introduce you to the basic Apache Kafka elements and APIs, as well as the broader Kafka ecosystem.
Hive+
[英文] Hive Tutorial
https://www.tutorialspoint.com/hive/index.htm
Hive is a data warehouse infrastructure tool to process structured data in Hadoop. It resides on top of Hadoop to summarize Big Data, and makes querying and analyzing easy.
https://www.youtube.com/watch?v=D4HqQ8-Ja9Y
ClickHouse+
[英文] Advanced Tutorial
https://clickhouse.com/docs/tutorial
Learn how to ingest and query data in ClickHouse using the New York City taxi example dataset.
https://www.youtube.com/watch?v=FtoWGT7kS-c
ClickHouse is an open-source column-oriented DBMS for online analytical processing that allows users to generate analytical reports using SQL queries in real-time.
https://www.youtube.com/watch?v=Rhe-kUyrFUE&list=PL0Z2YDlm0b3gcY5R_MUo4fT5bPqUQ66ep
还有更多 •••
相关职位
实习
1、我们为小米的站点稳定性提供系统和工具，是稳定性工程专家； 2、实践DevOps和GoogleSRE的工程思想； 3、站在软件生命周期全局考虑如何保障系统健壮性，稳定性，并通过软件工程技术为站点保驾护航； 4、站在用户/工程师的角度提供易用的工具和平台产品，不断完善使用体验； 5、负责集团基础软件/工具/平台的设计和研发，维护小米各项业务的稳定运行； 6、按照优秀的工程实践完成需求，设计，编码，测试，发布的软件开发流程； 7、按照标准编写设计/开发/运维/用户文。
更新于 2025-11-07武汉
社招3年以上大数据(数据计算
1.负责腾讯大数据平台运维工作，通过设计、开发运维平台，解决运营过程中质量和效率问题； 2.负责梳理现有服务流程、规范和存在的问题，并给出可行方案； 3.负责前后端运营效率工具开发，包括但不限于：容量管理平台、DevOps、覆盖率、自动化、健康度等。
更新于 2026-03-26深圳
社招3-5年网易游戏（互娱）
1.负责大数据相关组件Kafka/Pulsar/ElasticSearch/Hbase部署，运维，监控等工作，保证服务稳定性。 2.为相关大数据组件提供完善的指标/告警体系，持续优化相关平台与组件的性能与成本。 3.为相关大数据组件开发运维脚本，提升组件与平台的运维自动化水平。
更新于 2025-10-20广州
社招3年以上系统部
1、负责大数据生态组件的规划、部署、监控、优化、版本升级及运维管理 2、负责大数据平台组件运维管理服务及云原生化建设 3、设计并推动大数据组件云原生化建设及业务场景应用落地，持续探索新发展方向 4、负责执行数据平台运维流程的规划设计并持续改进完善 5、负责大数据数据平台数据血缘、数据治理能力的建设及持续优化； 6、协助团队完成系统升级、新功能上线及测试，支持业务部门的技术需求。 7、负责处理数据平台各类异常和故障，确保系统平台的稳定运行； 8、负责数据平台的日常运维管理工作；
更新于 2025-10-16北京