字节跳动大数据研发工程师(实时方向)-数据解决
任职要求
1、计算机科学、软件工程或相关专业学士、硕士或博士学位,3年以上流式和离线数据仓库行业经验; 2、熟悉数据仓库原理,有流式或离线数据处理和仓库建设的实际经验; 3、具备一定的领导能力,有帮助和指导团队初阶工程师经验; 4、善于沟通,对业务敏感,能够快速了解业务背景,具有优秀的技术与业务融合能力。
工作职责
1、定义并执行广告数据仓库公共层建模、架构设计和路线图; 2、推动横向项目和关键业务迭代的设计和实现,确保高质量交付; 3、负责生产流水线的稳定性,针对数据链路在运行过程中出现的问题,设计和实现必要的机制和工具,如数据质量保证、容灾等,确保线上数据链路的整体稳定。
职位描述: 1. 负责Flink/Iceberg/Kafka/Pulsar等实时计算核心组件的开发,持续提升功能,性能与稳定性。 2. 基于实时计算组件与平台,为业务提供高质量的流计算服务。并主动分析持续针对下游业务进行稳定性,性能与成本方面的优化工作。 3. 负责一定的运维开发工作,为实时计算组件提供完善的指标/告警体系,容量管理等功能。 4. 参与数据湖相关平台与业务的开发。
1. 负责Flink/Iceberg/Kafka/Pulsar等实时计算核心组件的开发,持续提升功能,性能与稳定性。 2. 基于实时计算组件与平台,为业务提供高质量的流计算服务。并主动分析持续针对下游业务进行稳定性,性能与成本方面的优化工作。 3. 负责一定的运维开发工作,为实时计算组件提供完善的指标/告警体系,容量管理等功能。 4. 参与数据湖相关平台与业务的开发。
团队介绍:集团信息系统部(Corporate Information System)负责字节跳动信息系统建设。通过构建领先的信息系统,助力公司业务和组织的长期高效经营与发展。与此同时,在安全、隐私、合规层面持续治理,为公司的稳健发展保驾护航。字节跳动的员工分布在全球超过 120 个城市,业务模式复杂,用户规模大。到现在,集团信息系统部已经覆盖人事、财务、法务、采购、审批、职场等多个领域,隐私安全工作同步开展,AIGC 创新孵化也在逐步落地实现。 1、负责实时数据同步、离线集成与复杂数据加工,提升数据流转效率与安全性,确保数据同步的实时性和一致性; 2、负责公司统一数据引擎的大数据架构设计与技术研发,推动数据同步、集成及流计算能力的建设与优化; 3、设计高效、安全的大数据架构,推动数仓与BI团队搭建稳定高效的数据流程; 4、深入了解各业务线数据需求,解决数据研发、质量与安全等核心问题,推动业务实施。