logo of bytedance

字节跳动大数据开发工程师

社招全职A166444A地点:北京状态:招聘

任职要求


1、熟悉一个大数据领域的开源框架,Hadoop/Hive/Flink/FlinkSQL/Spark/Kafka/Hbase/Redis rocksdb/Elasticsearch/Parquet;
2、熟悉JavaC++等编程语言;
3、出色的编码和Trouble-shoting能力;
4、乐于挑战没有明显答案的问题,对新技术有强烈的学习热情;
5、有PB级别数据处理经验加分;
6、对某一大数据框架有原理/源码级别理解的加分。

工作职责


1、为大规模推荐系统设计和实现合理的离线/实时数据架构;
2、设计和实现灵活可扩展、稳定、高性能的存储系统和计算模型;
3、生产系统的Trouble-shoting,设计和实现必要的机制和工具保障生产系统整体运行的稳定性;
4、打造业界领先的离在线存储、批式流式计算框架等分布式系统,为海量数据和大规模业务系统提供可靠的基础设施。
包括英文材料
大数据+
Hadoop+
Hive+
Spark+
Kafka+
HBase+
Redis+
RocksDB+
ElasticSearch+
Parquet+
Java+
C+++
相关职位

logo of netease
社招网易数智

1、负责网易大数据平台的Iceberg等大数据组件迭代研发。 2、负责Iceberg等技术在业务上的实践落地以及问题分析诊断。 3、 参与Hive等组件在大数据元数据服务方面的稳定性建设以及问题诊断。

更新于 2025-04-17
logo of hello
社招5年以上技术

1、负责哈啰街猫业务基础数据的建设,包括基础数据模型建立和维护,报表的开发,业务系统的数据开发等; 2、理解哈啰街猫投喂、电商等业务,根据业务需求建立用户画像体系和标签体系,支持推荐和用户运营; 3、参与数据产品及应用的研发工作,挖掘数据业务价值,助力数据化运营;

更新于 2025-02-12
logo of ly
社招

团队内80%+都活跃在开源社区,有多名Committer. 欢迎对大数据底层技术有兴趣的小伙伴,一起挑战自我!(非数据仓库方向) 工作base可选:苏州/北京/成都 岗位描述: 基于hadoop/flink/spark/hive/cloud native等开源技术 1. 负责大数据集群规划、运维工作;负责大数据集群技术问题攻关,集群调优,源码解读,Bug fix等; 2. 负责大数据公共组件、中间件的开发工作; 3. 负责存储组件、批处理、流计算、OLAP、ML/DL,通过技术和业务场景的紧密结合,让数据发挥最大业务价值 4. 支撑数据中台建设;支撑业务结合需求设计高扩展、高性能、高可用的大数据业务系统;

更新于 2025-02-26
logo of liauto
社招5年以上汽车研发

1. 参与车控算法的RD和开发项目,负责车控算法数仓建立、数据集成的工作; 2. 使用统计分析和机器学习技术对数据进行建模和分析,生产高价值数据和特征; 3. 设计和实施数据预处理流程和算法,以提高数据分析的效率和准确性; 4. 主导数据科学前沿技术的感知和研究,并在车控领域应用; 5. 需要参与部分云端应用软件的开发任务。