拼多多数据开发工程师(实时数据方向)
社招全职1年以上技术类地点:上海状态:招聘
任职要求
1.具备扎实的计算机理论基础, 1年以上实时相关工作经历,有实时数仓经验优先; 2.有丰富的flink经验并了解flink计算原理,有过pb级在线业务的优先; 3.精通并行计算…
登录查看完整任职要求
微信扫码,1秒登录
工作职责
1.负责业务仓配供相关数据产品的研发与实时化基础数据保障; 2.负责业务仓配供实时数仓的稳定性,保障核心链路数据流稳定产出; 3.负责业务仓配供实时数据建模、研发与质量把控,关键技术攻关,不断优化系统性能、降低资源开销;
包括英文材料
Flink+
https://nightlies.apache.org/flink/flink-docs-release-2.0/docs/learn-flink/overview/
This training presents an introduction to Apache Flink that includes just enough to get you started writing scalable streaming ETL, analytics, and event-driven applications, while leaving out a lot of (ultimately important) details.
https://www.youtube.com/watch?v=WajYe9iA2Uk&list=PLa7VYi0yPIH2GTo3vRtX8w9tgNTTyYSux
Today’s businesses are increasingly software-defined, and their business processes are being automated. Whether it’s orders and shipments, or downloads and clicks, business events can always be streamed. Flink can be used to manipulate, process, and react to these streaming events as they occur.
高并发+
https://www.baeldung.com/concurrency-principles-patterns
In this tutorial, we’ll discuss some of the design principles and patterns that have been established over time to build highly concurrent applications.
https://www.baeldung.com/java-concurrency
Handling concurrency in an application can be a tricky process with many potential pitfalls. A solid grasp of the fundamentals will go a long way to help minimize these issues.
https://www.oreilly.com/library/view/concurrency-in-go/9781491941294/
You’ll understand how Go chooses to model concurrency, what issues arise from this model, and how you can compose primitives within this model to solve problems.
https://www.oreilly.com/library/view/modern-concurrency-in/9781098165406/
With this book, you'll explore the transformative world of Java 21's key feature: virtual threads.
https://www.youtube.com/watch?v=qyM8Pi1KiiM
https://www.youtube.com/watch?v=wEsPL50Uiyo
相关职位
社招5年以上技术类
1. 参与 广告实时数据体系建设,不限于 实时数仓建设、广告实时计费、实时数据流稳定性保障与性能优化等 2. 负责广告实时计费系统的设计、开发与优化,包括实时扣费、预算控制等核心模块,确保广告实时准确计费 3. 负责系统稳定性建设与性能优化,进行服务治理、性能分析和调优,保障系统高可用、高可靠 4. 深入理解商业化业务逻辑(如广告投放、计费、归因、效果分析等),将业务需求抽象转化为合理的数据解决方案与技术架构设计。 5. 攻克高并发、大数据量场景下的技术难点,沉淀技术方案和最佳实践,推动团队技术能力提升
更新于 2026-01-29上海

社招3年以上
1、基于Hadoop/Hive/Click House/StarRocks/Flink/Spark等平台技术进行数据仓库建设和数据开发; 2、负责业务数据模型设计,ETL实施,ETL性能优化以及相关技术问题解决; 3、负责用户画像、热点画像、内容标签体系等数据体系建设工作; 4、负责面向业务的OLAP、报表、数据产品和数据应用开发工作。
更新于 2024-08-22上海
校招数据与算法类
1. 负责公司数据仓库的架构设计、建模; 2. 组织数据仓库开发,基于数据仓库,对数据进行挖掘,发现数据中的规律,或者负责应用和构建数学算法,以发现数据中的规律(算法); 3. 基于京东海量数据,进行深度数据挖掘,赋能京东高速业务发展,充分发挥数据价值; 4. 理解业务需求,建立可靠的数据收集、发布和处理平台,参与离线/实时数据仓库以及Pipeline的设计和开发; 5. AI应用探索:关注AI在数据工程领域的应用,运用AI工具辅助数据管道开发、数据质量监控及自动化运维,提升数据开发效率。
更新于 2026-07-23北京