logo of autohome

汽车之家实时计算引擎高级工程师

社招全职5-10年技术地点:北京状态:招聘

任职要求


1、 学历与专业:本科及以上学历,计算机科学、信息技术、数学等相关专业。
2、工作经验:拥有 6 年以上大数据平台建设经验。 
3、技术能力:
编程能力:​​精通 JavaGolang,熟悉Python语言,深入理解语言核心特性、内存模型、并发编程模式,具备高性能代码调优能力和排查复杂线上问题的经验。
架构能力:深入理解分布式系统原理,能在设计中应用容错机制、分片策略、负载均衡、高可用设计等。
大数据技术:深度掌握大数据生态,精通 Hadoop/Flink/Paimon/Iceberg 至少一种,有定制开发和优化经验;熟练掌握Kafka/Pulsar。
4、创新能力:具备敏锐的技术洞察力和较强的技术创新能力,推动新技术的引入和落地。
5、沟通协作:具备良好的沟通表达能力、团队协作能力,能够有效推动目标的实现。
6、加分项:
1)有 Data + AI 深度融合并成功落地经验(多模态数据湖、AI辅助数据开发、AI辅助数据治理、数据智能体等)。
2)有算法开发、模型训练经验。
3)对开源社区有重要贡献。

工作职责


1、开发维护实时湖仓引擎(Flink、Paimon),建设平台化能力,攻克在高并发、低延迟、海量数据处理等方面的关键技术难题,保障公司业务稳定高效运行。
2、规划构建一体化的 Data + AI 计算平台,实现数据与 AI 的深度融合,提升数据开发效率和数据价值。
3、结合技术发展趋势与业务需求,主导技术选型及技术路线规划,推动大数据平台能力达到行业领先水平。
包括英文材料
学历+
大数据+
Java+
Go+
Python+
分布式系统+
高可用+
Hadoop+
Iceberg+
Kafka+
Pulsar+
数据治理+
智能体+
算法+
相关职位

logo of meituan
社招6年以上核心本地商业-基

1.负责构建基于Kubernetes的云原生分布式计算平台,支撑离线计算、实时流处理等多场景需求,实现计算资源的弹性伸缩与高效调度; 2.解决数仓生产场景下业务规模增长带来的引擎扩展性问题,通过优化Shuffle服务、向量化执行引擎以及内核改造,支撑每天百万级Spark Job,EB级数据处理,单作业百TB Shuffle,不断提升生产引擎稳定性和扩展性,保障核心数据的稳定产出; 3.综合调度、引擎层内核改造优化等多种技术方案持续提升计算效率,降低计算成本; 4.设计并实现云原生环境下的弹性扩缩容策略,结合K8s编排能力与计算引擎特性,应对流量洪峰与资源碎片化挑战。

更新于 2025-08-08
logo of didi
社招技术

1、负责滴滴Flink引擎及平台的完善和优化,从稳定性、性能和功能等多方面进行架构设计和实现 2、深入理解业务,发现用户对于实时的需求痛点,帮助业务解决问题的同时从中提炼出通用和潜在需求,用于指导规划 3、规划实时计算及实时数据湖等产品技术方向,培养发展技术团队

更新于 2025-08-05
logo of antgroup
社招3年以上技术类-算法

● 利用深度学习/机器学习/大模型在内的算法能力解决和攻坚国际质量风险领域的技术难题 ● 结合大模型与Agent技术,构建智能化风险平台(如智能攻防、核对规则挖掘、工单问答等),提升质量风险能力。 ● 搭建高扩展性的大规模数据处理与特征工程框架,支持Agent系统所需的实时数据流处理、多模态数据融合与低延迟推理; ● 对技术有较强的钻研及学习精神,能够深入了解开源技术、现有系统技术等相关技术原理,出现问题时能够通过较强的技术手段较好的解决问题。

更新于 2025-07-31
logo of meituan
社招核心本地商业-基

1. 负责万亿流量下,大规模、多渠道用户行为的路径、转化、留存、探查分析系统能力建设,设计可扩展的服务架构,优化性能和稳定性; 2. 对用户行为分析产品的核心模块进行系统性思考,抽象通用能力,并有计划的推动产品能力持续迭代; 3. 能够深入理解业务,进行重点难点技术攻关工作,将技术实现与业务场景联系起来,快速解决业务需求问题; 4. 不断探索用户行为分析的场景能力,与全公司各业务上下游合作构建丰富的行为分析应用生态,推动技术能力进步和技术氛围的建设。

更新于 2025-06-22