京东高级大数据开发工程师(Flink方向)
社招全职3年以上软件开发岗地点:北京状态:招聘
任职要求
1. 3年及以上大数据开发经验,其中3年以上流式计算领域专注经验,具备丰富的Flink实战背景,有日均千亿级别数据量的处理经验和实时数仓建设经验。 2. 深入阅读并理解Apache Flink核心模块(如Runtime、Network、Checkpoint)源码,能结合实际业务问题运用底层机制给出解决方案。 3. 精通Java/Scala语言,具备优秀的编码与系统设计能力;熟练掌握Flink DataStream/Table API/SQL,深刻…
登录查看完整任职要求
微信扫码,1秒登录
工作职责
职位描述: 1. 负责设计与开发公司级高性能、高可用的实时计算平台,基于Apache Flink构建和优化核心实时数据管道,支撑关键业务场景。 2. 深入钻研Flink内核机制(如内存管理、任务调度、容错恢复),具备源码级调试、性能优化与定制开发能力,攻克生产环境中复杂技术挑战。 3. 主导实时任务的深度优化,包括但不限于反压调控、数据倾斜处理、状态管理及Checkpoint机制调优,保障实时服务的高吞吐、低延迟与稳定运行。 4. 结合业务需求,负责重大实时数据项目的技术方案选型、架构设计及评审,并输出清晰、规范的技术文档。 5. 跟踪流计算领域前沿技术(如Flink CDC、Apache Paimon、流批一体等),推动创新技术在公司落地,赋能团队成员,提升整体技术水平。
包括英文材料
大数据+
https://www.youtube.com/watch?v=bAyrObl7TYE
https://www.youtube.com/watch?v=H4bf_uuMC-g
With all this talk of Big Data, we got Rebecca Tickle to explain just what makes data into Big Data.
Flink+
https://nightlies.apache.org/flink/flink-docs-release-2.0/docs/learn-flink/overview/
This training presents an introduction to Apache Flink that includes just enough to get you started writing scalable streaming ETL, analytics, and event-driven applications, while leaving out a lot of (ultimately important) details.
https://www.youtube.com/watch?v=WajYe9iA2Uk&list=PLa7VYi0yPIH2GTo3vRtX8w9tgNTTyYSux
Today’s businesses are increasingly software-defined, and their business processes are being automated. Whether it’s orders and shipments, or downloads and clicks, business events can always be streamed. Flink can be used to manipulate, process, and react to these streaming events as they occur.
Apache+
https://www.apache.org/
The Apache® Software Foundation (ASF) provides software for the public good, guided by community over code.
Java+
https://www.youtube.com/watch?v=eIrMbAQSU34
Master Java – a must-have language for software development, Android apps, and more! ☕️ This beginner-friendly course takes you from basics to real coding skills.
Scala+
系统设计+
https://roadmap.sh/system-design
Everything you need to know about designing large scale systems.
https://www.youtube.com/watch?v=F2FmTdLtb_4
This complete system design tutorial covers scalability, reliability, data handling, and high-level architecture with clear explanations, real-world examples, and practical strategies.
SQL+
https://liaoxuefeng.com/books/sql/introduction/index.html
什么是SQL?简单地说,SQL就是访问和处理关系数据库的计算机标准语言。
https://sqlbolt.com/
Learn SQL with simple, interactive exercises.
https://www.youtube.com/watch?v=p3qvj9hO_Bo
In this video we will cover everything you need to know about SQL in only 60 minutes.
还有更多 •••
相关职位
社招3年以上技术类
1. 负责联运游戏分发业务相关服务的开发与设计 2. 负责核心服务架构设计、方案评审、服务落地,并能独立攻克技术难题和系统优化以及稳定性保障 3. 对前沿技术持续保持关注和实践,并能够结合当前业务所处阶段做好技术预瞻和应用
更新于 2025-04-07上海
社招3年以上技术类
1、负责商业化相关服务的开发与设计(电商交易、广告投放等业务场景) 2. 负责核心服务架构设计、方案评审、服务落地,并能独立攻克技术难题和系统优化以及稳定性保障 3. 对前沿技术持续保持关注和实践,并能够结合当前业务所处阶段做好技术预瞻和应用
更新于 2025-04-07上海
社招4年以上IDG
-主导自动驾驶信息安全产品服务端后台的设计和研发工作,确保项目的顺利进行和高质量交付 -根据需求进行功能模块化拆解、设计文档编写、编码、单元测试,确保系统的稳定性与可扩展性 -负责后端模块及服务在可扩展、高可用、高并发、可运维等方向的技术优化 -撰写并更新系统相关文档,为团队提供完整、准确的技术支持
更新于 2024-04-16北京