
竞技世界【竞技世界】大数据平台开发
社招全职3年以上数据部地点:北京状态:招聘
任职要求
1、本科211/985学历优先; 2、近5年3年以上大数据研发经验;
工作职责
1、包括实时数据采集计算、流式湖仓建设、现有平台架构调优、业务场景建模、数据产能提质增效。 2、应用场景:BI、OLAP、用户画像、群体分析、数据驱动等。 3、解决方案:基于Kafka、Flink的数据采集、流转、实时ETL平台建设; 基于Kyuubi、Trino、Doris、Hive、Hudi、Ceph、S3的流式湖仓建模、应用、维护; 4、Redis、MongoDB、ClickHouse、TiDB、Mysql等数据存储技术的应用。 技术能力: 1、SQL专家,精通复杂查询、性能优化、不同引擎SQL特性(必需); 2、精通数仓与数据湖架构设计及业务建模(必需); 3、熟悉ClickHouse、Doris、Trino、Kyuubi、Spark、Hive、S3等多类存储、计算引擎(必需)、掌握Python语言(必需)、掌握Kafka、Flink流计算平台、掌握Java/Scala语言
包括英文材料
学历+
大数据+
https://www.youtube.com/watch?v=bAyrObl7TYE
https://www.youtube.com/watch?v=H4bf_uuMC-g
With all this talk of Big Data, we got Rebecca Tickle to explain just what makes data into Big Data.
相关职位
社招技术团队开发
01 负责携程大数据平台存储服务的设计与研发工作,构建高可用、大容量、满足业务多样性的存储系统; 02 负责系统问题的发现、定位与持续优化,特别是在存储性能、数据一致性、元数据管理等方面的调优; 03 负责存储解决方案设计与业务落地,参与社区紧跟行业趋势,关注分布式存储技术的前沿发展。
更新于 2025-03-28

社招3年以上
1、负责大数据平台开发工作,主要hadoop集群相关,能够解决业务的需求开发。 2、负责大数据平台的日常运维管理,保障数据平台的稳定性。 3、解决大数据平台的故障及性能问题,提升数据存储和计算效率。
更新于 2025-04-10

社招3年以上计算机网络技术类
1. 负责或参与大数据平台的架构设计以及基础组件的调优、改造、升级; 2. 结合客户需求,负责和参与大数据产品的设计与研发; 3. 负责数据平台新技术的研究及应用落地。
更新于 2024-10-16

社招
岗位职责: 1. 平台全生命周期管理:负责大数据平台的架构设计、核心模块研发与全链路维护。通过系统化监控、故障预警与应急响应机制,保障系统稳定运行。 2. 资源效能优化:深度分析平台资源使用状况,通过性能调优、成本控制与资源动态调度策略,实现集群资源利用率提升。同时推动数据治理体系建设,保障数据质量、安全性及合规性。 工作内容: 1. 平台迭代与稳定性保障:负责数据平台核心模块(如分布式调度系统、元数据资产管理、异构数据集成平台等)的持续迭代 2. AI 技术深度融合:参与算法平台与 AI 基础服务的研发,构建智能化数据处理流水线,提升业务研发效率。 3. 智能化数据治理:利用 NLP、大模型 等 AI 技术实现数据治理自动化,降低人工成本,提升数据价值。
更新于 2025-05-14