logo of vivo

vivo大数据工程师(实时计算)

社招全职5年以上研发类地点:深圳状态:招聘

任职要求


1、5年以上工作经验,计算机或相关专业本科及以上学历;
2、熟悉并行计算或者分布式计算原理,熟悉高并发、高稳定性、可线性扩展、海量数据的系统特点和技术方案;
3、熟悉Kafka/Flink/Druid/Hbase/Doris/ClickHouse/Redis/Spark等实时计算引擎、组件的开发和使用;
4、熟悉 Java / Scala大数据组件语言,具备良好的代码规范和系统设计能力;
5、善于沟通,对业务敏感,能快速理解业务背景,具备优秀的技术与业务结合能力;
其他:
1、有PB级数据量处理、调优经验优先;
2、对流式计算系统有深入的了解,有大规模实时计算系统开发经验,有Flink源码阅读/开源社区贡献经验优先;
3、有大规模实时数仓、湖仓一体落地经验者优先;
4、有有广告/游戏实时归因的经验优先。

工作职责


1、设计并开发高可用、可扩展的实时数据处理系统,稳定处理来自智能手机的海量用户行为数据;
2、负责实时指标计算的数据建模、架构设计与开发,包括:数据接入、数据处理、olap分析等,针对海量的数据,能以最优的方案实现,满足性能要求;
3、负责实时系统的异常数据监测和数据质量保障,提升和数据准确性、一致性和稳定性;
4、与PM、业务方合作,深入业务解决问题。
包括英文材料
学历+
高并发+
Kafka+
HBase+
Doris+
ClickHouse+
Redis+
Spark+
Java+
Scala+
大数据+
系统设计+
相关职位

logo of bytedance
社招JMX2P

1.负责抖音短视频和电商业务的实时数据仓库的构建; 2.负责实时指标计算的数据建模、架构设计与开发; 3.负责对实时计算作业的性能进行优化; 4.参与大数据应用规划,为数据产品、挖掘团队提供应用指导。

更新于 2020-12-21
logo of bytedance
社招J7098

1. 负责抖音短视频和直播业务的实时数据仓库的构建; 2. 负责实时指标计算的数据建模、架构设计与开发; 3. 负责对实时计算作业的性能进行优化; 4. 参与大数据应用规划,为数据产品、挖掘团队提供应用指导。

更新于 2022-06-01
logo of bytedance
社招X9WV

1、为大规模推荐系统设计和实现合理的流式计算系统; 2、设计和实现灵活可扩展、稳定、高性能存储系统和计算模型; 3、生产系统的Trouble-shooting,设计和实现必要的机制和工具保障生产系统稳定运行; 4、打造业界领先的流式计算框架等分布式系统,为海量数据和大规模业务系统提供可靠的基础设施。

更新于 2021-12-31
logo of netease
社招2年以上网易游戏(互娱)

1. 负责Flink/Iceberg/Kafka/Pulsar等实时计算核心组件的开发,持续提升功能,性能与稳定性。 2. 基于实时计算组件与平台,为业务提供高质量的流计算服务。并主动分析持续针对下游业务进行稳定性,性能与成本方面的优化工作。 3. 负责一定的运维开发工作,为实时计算组件提供完善的指标/告警体系,容量管理等功能。 4. 参与数据湖相关平台与业务的开发。

更新于 2025-07-22