logo of antgroup

蚂蚁金服蚂蚁集团-湖仓计算引擎研发专家/高级专家-杭州/北京/上海

社招全职5年以上技术类-开发地点:北京 | 上海 | 杭州状态:招聘

任职要求


1.精通Java/Scala/C++等一种编程语言,具备大规模系统的研发和优化能力;
2. 熟悉Hadoop/Spark/Celeborn/Velox/Clickhouse/Doris等主流开源项目和引擎;
3.在分布式计算领域有丰富的理论和实践经验;
4.具备强烈的进取心,良好的沟通能力和团队合作精神。

工作职责


1.深入业务场景,帮助解决问题并发现通用需求,驱动计算平台研发,打造高效的分布式计算引擎;
2.从功能、稳定性、性能和易用性等多方面对计算引擎进行完善和优化;
3.与开源社区保持良性互动,引进吸收开源系统的技术并回馈社区。
包括英文材料
Java+
Scala+
C+++
Hadoop+
Spark+
ClickHouse+
Doris+
Celeborn+
Velox+
相关职位

logo of bytedance
社招K4338

数据引擎-数据湖 团队,旨在打造业界领先的 EB 级超大规模数据湖,支持字节跳动众多核心业务线,如抖音、今日头条、电商。同时基于内部最佳实践,在火山引擎上打造一款云原生实时湖仓一体的 toB 产品——湖仓一体分析服务LAS(LakeHouse Analytics Service)。 1、打造业界领先的基于 HUDI的EB级数据湖,支撑字节跳动众多业务线(如抖音,今日头条,电商); 2、负责流批一体的实时数据湖存储系统的设计与研发,以及内核的极致优化; 3、与开源社区紧密合作,持续构建开源影响力,有机会成长为 HUDI Committer / PMC。

更新于 2022-08-17
logo of dewu
社招2年以上技术类

1、【引擎研发】负责Spark、Presto、Hive 为基础的大数据查询引擎内核研发,跟进社区版本,改进性能,提升稳定性,研发新功能,修复内核BUG; 2、【业务支撑】负责排查、定位、解决生产集群问题,与运维同学一起维护生产集群的稳定性,协助业务方一起使用好大数据平台; 3、【平台规划】参与规划公司计算平台的技术演技,提升计算平台湖仓能力,基于云IAAS或者自建IAAS,打造高稳定性、高性能、低成本的计算平台。

更新于 2023-12-26
logo of aliyun
社招5年以上云智能集团

1. 负责SQL引擎核心优化,深入理解线上业务SQL使用方式,关注业界通用Benchmark,分析性能瓶颈并针对性改进等。 2. 负责SQL引擎增量计算能力演进,打造业界领先的增量计算产品 3. 负责MC智能数仓的开发和能力建设,提升MC整体的性价比和易用性 4. 支持SQL引擎线上业务,包括疑难问题答疑、线上稳定性改进、提升系统可观测性及用户使用体验等。

更新于 2025-09-15
logo of dewu
社招5年以上技术类

【核心技术研发】主导数据湖格式引擎(Iceberg/Hudi/Delta Lake/Paimon)内核开发与性能调优,构建支持批流一体与高效增量处理的技术体系; 【业务支撑】主导生产集群疑难问题诊断与根因分析,协同运维保障平台高可用性,提供业务方全链路大数据平台使用支持; 【平台规划】参与计算平台技术架构演进设计,提升湖仓一体能力,基于云原生IAAS或自建IAAS构建高可靠、高性能、低成本的计算基础设施;

更新于 2025-07-08