拼多多spark/flink 引擎研发工程师/专家
社招全职技术类地点:上海状态:招聘
任职要求
熟悉常见大数据开源组件实现原理,有spark、flink二开经验或者熟悉源码优先; 精通Java语言编程,有一定的问题定位及性能优化经验; 在大数据计算和存储领域…
登录查看完整任职要求
微信扫码,1秒登录
工作职责
支持业务高效方便地对数据进行加工,不断助力全球化拓展; 完善批/流引擎处理能力,提高稳定性,不断优化性能及成本; 适配不同的数据源, 提供各种connector链接能力。
包括英文材料
大数据+
https://www.youtube.com/watch?v=bAyrObl7TYE
https://www.youtube.com/watch?v=H4bf_uuMC-g
With all this talk of Big Data, we got Rebecca Tickle to explain just what makes data into Big Data.
Spark+
[英文] Learning Spark Book
https://pages.databricks.com/rs/094-YMS-629/images/LearningSpark2.0.pdf
This new edition has been updated to reflect Apache Spark’s evolution through Spark 2.x and Spark 3.0, including its expanded ecosystem of built-in and external data sources, machine learning, and streaming technologies with which Spark is tightly integrated.
还有更多 •••
相关职位
社招技术
岗位职责 1.负责公司级Spark引擎的架构设计、核心研发和性能优化; 2.构建高性能、可扩展的实时数据分析平台,支撑千亿级数据毫秒级查询; 3.深入优化StarRocks/Doris/Druid等Spark引擎,解决海量数据分析的痛点; 4.设计并实现智能查询优化、数据湖仓一体、混合负载管理等核心功能; 5.主导Spark引擎在云原生环境下的容器化、资源调度和弹性伸缩架构。
更新于 2026-06-11北京
社招生产运营类
1. 备件流程管理:熟悉机台备件的收发特点和流程;疏导备件清洗、维修、报废等业务处理流程。2. 先入先出执行:监督team人员严格执行先入先出规则。3. 人力分配与操作规范:根据当天工作量和人力实际情况进行人力分配;按照部门规定要求人员按照操作规范执行。4. 盘点与库存管控:协助主管安排盘点,并对盘点结果进行预评估,保证库存正确性。5. 6S与培训:根据规定做好区域内的6S执行监督工作;组织人员参加必要技术培训,并整理资料给team人员培训。
更新于 2026-06-12合肥