拼多多大数据与分布式基础架构工程师/专家
社招全职技术类地点:上海状态:招聘
任职要求
1、熟悉Spark/Flink/Hive等大数据技术体系,熟练使用 C++/JAVA/scala/Golang任一编程语言; 2、具备较强的抽象及工程实现能力,熟悉常见的系统设计…
登录查看完整任职要求
微信扫码,1秒登录
工作职责
1、运用最前沿技术,结合互联网电商业务特点,从事电商搜广推基础平台和大数据批流应用研发; 2、支持搜广推业务迭代中的数据和平台化需求,持续优化大数据/实时计算的吞吐能力、可靠性和时效性; 3、通过平台能力和数据分析发现系统性能瓶颈和业务趋势特点,助力全链路系统优化和业务迭代。
包括英文材料
Spark+
[英文] Learning Spark Book
https://pages.databricks.com/rs/094-YMS-629/images/LearningSpark2.0.pdf
This new edition has been updated to reflect Apache Spark’s evolution through Spark 2.x and Spark 3.0, including its expanded ecosystem of built-in and external data sources, machine learning, and streaming technologies with which Spark is tightly integrated.
Flink+
https://nightlies.apache.org/flink/flink-docs-release-2.0/docs/learn-flink/overview/
This training presents an introduction to Apache Flink that includes just enough to get you started writing scalable streaming ETL, analytics, and event-driven applications, while leaving out a lot of (ultimately important) details.
https://www.youtube.com/watch?v=WajYe9iA2Uk&list=PLa7VYi0yPIH2GTo3vRtX8w9tgNTTyYSux
Today’s businesses are increasingly software-defined, and their business processes are being automated. Whether it’s orders and shipments, or downloads and clicks, business events can always be streamed. Flink can be used to manipulate, process, and react to these streaming events as they occur.
Hive+
[英文] Hive Tutorial
https://www.tutorialspoint.com/hive/index.htm
Hive is a data warehouse infrastructure tool to process structured data in Hadoop. It resides on top of Hadoop to summarize Big Data, and makes querying and analyzing easy.
https://www.youtube.com/watch?v=D4HqQ8-Ja9Y
大数据+
https://www.youtube.com/watch?v=bAyrObl7TYE
https://www.youtube.com/watch?v=H4bf_uuMC-g
With all this talk of Big Data, we got Rebecca Tickle to explain just what makes data into Big Data.
C+++
https://www.learncpp.com/
LearnCpp.com is a free website devoted to teaching you how to program in modern C++.
https://www.youtube.com/watch?v=ZzaPdXTrSb8
还有更多 •••
相关职位
社招技术类
1、运用最前沿技术,结合互联网电商业务特点,从事电商搜广推基础平台和大数据批流应用研发; 2、支持搜广推业务迭代中的数据和平台化需求,持续优化大数据/实时计算的吞吐能力、可靠性和时效性; 3、通过平台能力和数据分析发现系统性能瓶颈和业务趋势特点,助力全链路系统优化和业务迭代。
更新于 2025-11-26上海
社招1年以下
2、分析和研究数据与实际业务的关联关系,利用数据挖掘的先进技术,针对具体业务需求场景,进行建模分析; 3、基于海量用户行为数据和其他数据,开发设计面向常规算法不能解决问题的可扩展机器学习算法,并以实际业务应用为导向研发创新方法,产生创新应用; 4、为产品运营提供数据分析支持,包括网站数据分析、产品用户分析、行业分析等。
更新于 2025-12-01深圳
社招3-5年
1、大模型与智能体核心能力建设: 围绕销售及大件业务场景,负责规划理解、用户画像与偏好洞察、话题与线索分析及 chatBI 等核心能力上的应用设计、微调与持续优化,支撑线索智能体、销售助手智能体及大件智能体等关键场景落地。 2、智能体工程化与能力复用建设: 设计并持续优化 Prompt、RAG(检索增强生成)、工具调用及 Agent 协作机制,推动大模型、推荐及相关决策能力的工程化落地,保障智能体能力的稳定性、可扩展性与跨场景复用。 4、业务决策模型与数据驱动优化: 结合销售线索质量、智能报价与折扣策略等业务需求,支持折扣方案模型的优化与场景拓展,通过数据挖掘与分析持续评估智能体与模型效果,驱动核心能力的迭代优化与业务价值提升。
更新于 2026-01-21深圳