字节跳动大数据开发工程师-IT
任职要求
1、本科及以上学历，计算机类相关专业，有丰富的后端开发经验； 2、优秀的编程和调试能力，精通至少一种主流编程语言， 如Java，Python，Go； 3、熟练掌握Kafka Streaming，Flink，Spark等大数据流式或批式开发框架； 4、熟练掌握大数据开源开源组件，如 Kafka，Hive，…
工作职责
1、负责海量数据和大规模业务系统的实时数据处理框架开发工作； 2、确保系统的高性能和高稳定性； 3、能够应用业界领先的大数据工具和组件； 4、能够基于实际场景，与算法工程师配合，提供数据分析和模型开发的技术解决方案。
岗位职责： - 参与小红书商业化数据产品开发工作，业务方向包括但不限于销售业绩、客户分析、代理商盯盘等 - 与产品、运营、后端、测试、运维等多角色协同工作，包括业务理解，需求评审，方案沟通，系统维护等 - 设计并实现高效、可扩展的数据架构，确保系统能够支持复杂的业务逻辑和大数据量处理，持续提升交付质量和效率 - 负责复杂数据链路架构、稳定性、成本、性能等方面的优化工作，保障线上服务运行稳定，资源使用合理
1. 负责企业数据平台开发及持续优化，主导离线与实时计算集群（如Flink、Spark、Hive）的配置调优、部署架构升级，开展源码级问题定位与故障处理； 2. 负责大数据组件（如Trino、Presto、StarRocks等）的源码级问题定位及二次开发； 3. 结合业务场景需求与技术发展趋势，主导大数据组件选型、验证及落地实施，通过技术创新提升业务服务能力； 4. 持续沉淀大数据组件使用规范、最佳实践及FAQ文档，赋能团队高效运用大数据技术； 5. 负责大数据与大模型融合应用开发（如智能问数系统），推动数据智能化场景落地。
团队介绍：IT部门面向字节跳动员工提供全球IT技术支持。我们既负责企业内部IT基础架构的设计和优化，也肩负着保护企业信息安全，降低企业运营风险的使命；同时，IT团队还会直接面向字节各业务线，承接企业级的网络、系统、终端、资产、服务台、多媒体、办公管理等多业务场景的研发需求，打造符合业界标准的商业化企业解决方案和产品，运用大数据和AI技术，提供更加自动化和智能化的企业技术服务。 1、负责企业级应用的前端核心功能需求分析、评审、架构设计、开发、上线和运维工作； 2、参与系统架构升级，代码质量改进，持续提升研发效能、页面性能和用户体验； 3、参与AI技术在业务场景中的探索与开发实践。
1. 核心系统构建： 负责设计与搭建基于 Flink 的实时特征计算平台，保障其高可用、低延迟和高吞吐量。 2. 实时数仓与建模： 负责用户/item特征实时数仓的层次设计、模型开发与优化，构建主题明确、数据可信、易于复用的实时数据模型，为用户/物料特征计算提供高质量数据支撑。 3. 实时特征工程： 开发并优化实时特征管道（Feature Pipeline），包括行为序列、滑动窗口聚合、多流关联等复杂实时特征的加工与存储，为搜推模型提供高质量数据输入。 4. 平台保障与优化： 负责实时数据从接入、处理到输出全链路的稳定性保障、性能调优（如解决数据倾斜、反压问题）和故障排查，确保7x24小时服务稳定。 5. 技术演进： 研究并引入业界先进的流处理技术，解决超大数据量下的状态管理、窗口计算、精确一次语义（Exactly-Once）等技术挑战，推动平台技术架构持续演进。