希音技术专家(大数据组件Kafka方向)-南京/深圳
社招全职5年以上信息技术类地点:深圳状态:招聘
任职要求
1、至少5年以上生产大规模使用Kafka的经验,包括Kafka集群的设计、部署和运维。 2、具有在大数据环境下工作的经验,熟悉Hadoop、Flink等生态系统者优先。 3、扎实的编程技能,包括Java、Scala或Py…
登录查看完整任职要求
微信扫码,1秒登录
工作职责
1、设计和部署高可用、可扩展的Kafka集群,满足业务需求和性能目标。 2、管理和优化Kafka集群的性能和稳定性,日常监控Kafka集群的健康状况,确保数据流畅处理,并及时响应和处理线上问题。 3、建设kafka运维和开发自动化平台,开发和维护Kafka sdk,支持多种编程语言。 4、制定kafka使用规范,提供Kafka技术培训和支持给内部开发团队。
包括英文材料
Kafka+
https://developer.confluent.io/what-is-apache-kafka/
https://www.youtube.com/watch?v=CU44hKLMg7k
https://www.youtube.com/watch?v=j4bqyAMMb7o&list=PLa7VYi0yPIH0KbnJQcMv5N9iW8HkZHztH
In this Apache Kafka fundamentals course, we introduce you to the basic Apache Kafka elements and APIs, as well as the broader Kafka ecosystem.
大数据+
https://www.youtube.com/watch?v=bAyrObl7TYE
https://www.youtube.com/watch?v=H4bf_uuMC-g
With all this talk of Big Data, we got Rebecca Tickle to explain just what makes data into Big Data.
Hadoop+
https://www.runoob.com/w3cnote/hadoop-tutorial.html
Hadoop 为庞大的计算机集群提供可靠的、可伸缩的应用层计算和存储支持,它允许使用简单的编程模型跨计算机群集分布式处理大型数据集,并且支持在单台计算机到几千台计算机之间进行扩展。
[英文] Hadoop Tutorial
https://www.tutorialspoint.com/hadoop/index.htm
Hadoop is an open-source framework that allows to store and process big data in a distributed environment across clusters of computers using simple programming models.
Flink+
https://nightlies.apache.org/flink/flink-docs-release-2.0/docs/learn-flink/overview/
This training presents an introduction to Apache Flink that includes just enough to get you started writing scalable streaming ETL, analytics, and event-driven applications, while leaving out a lot of (ultimately important) details.
https://www.youtube.com/watch?v=WajYe9iA2Uk&list=PLa7VYi0yPIH2GTo3vRtX8w9tgNTTyYSux
Today’s businesses are increasingly software-defined, and their business processes are being automated. Whether it’s orders and shipments, or downloads and clicks, business events can always be streamed. Flink can be used to manipulate, process, and react to these streaming events as they occur.
Java+
https://www.youtube.com/watch?v=eIrMbAQSU34
Master Java – a must-have language for software development, Android apps, and more! ☕️ This beginner-friendly course takes you from basics to real coding skills.
还有更多 •••
相关职位
社招3年以上技术类-开发
1. 负责大数据部门算法工程、数据产品、大数据工具相关的后端研发工作; 2. 参与发掘和分析业务需求,进行系统核心方案设计; 3. 参与核心代码编写,确保性能、质量和安全; 4. 参与生产环境维护,确保系统可用性。
更新于 2025-07-28上海

社招技术类
1、负责研发得物搜推主场景样本数据平台,管理样本数据的拼接、加工与存储; 2、负责历史训练样本的管理、特征回补等功能;负责在线流式训练的实时样本系统的研发; 3、搭建一站式的在离线样本特征链路,不断完善架构设计,优化系统的稳定性、性能、可扩展性。
更新于 2024-09-19北京|上海

社招技术类
1、负责统一规划得物搜推主场景特征平台,管理在离线海量特征的生产、加工与存储; 2、搭建一站式的在离线特征链路,不断完善架构设计,优化系统的稳定性、性能、可扩展性; 3、实现模型训练预测时需要的用户&商品&内容特征的管理与分析。
更新于 2023-12-26上海|北京