logo of bytedance

字节跳动大数据开发高级工程师-剪映(北京/深圳/广州)

社招全职1年以上A92812地点:深圳状态:招聘

任职要求


1、本科及以上学历,计算机相关专业,1年以上大数据数据仓库开发相关工作经验;
2、精通Java/Python/Scala等至少一门语言,熟悉Hadoop/Spark/Hive/HBase/Flink大数据研发工具;
3、精通数据建模及ETL设计开发,对数据仓库、数据平台、数据分析等有深刻理解,具备丰富的数据加工处理和优化经验;
4、有ClickHouse/Druid/Kylin/Superset等OLAP和数据可视化相关经验者优先;
5、优秀的自我驱动力和责任心,良好的沟通表达能力和团队合作精神,学习能力强有责任心,不断挑战自己。

工作职责


1、负责剪映业务数据体系的规划设计和建设,通过数据产品和数据服务等方式,实现数据驱动业务;
2、负责剪映业务的离线数仓、实时数仓、数据服务化的设计、开发、性能优化,为上层分析和挖掘提供可靠、统一的离线和实时数据服务;
3、负责剪映数据分析平台建设,面向产品、运营、分析师等提供体验良好的万亿规模的交互式、可视化分析工作台;
4、负责离线、实时的ETL工作,为业务提供定制化的数据支持,并优化计算任务性能。
包括英文材料
学历+
大数据+
数据仓库+
Java+
Python+
Scala+
Hadoop+
Spark+
Hive+
HBase+
ETL+
数据分析+
ClickHouse+
OLAP+
相关职位

logo of bytedance
社招3年以上A56142

团队介绍:推荐架构团队支撑字节跳动旗下多款APP产品,如抖音、今日头条、番茄小说、西瓜视频、剪映等推荐系统架构的设计和开发,保障系统的稳定和高可用,致力于抽象系统通用组件和服务,建设推荐中台、数据中台;关于在线服务,在这里你有机会参与大规模机器学习在线预估框架的研发与优化,也有机会参与模型训练与调度等相关问题的研究与突破,解决系统瓶颈,降低成本开销;如你对大数据感兴趣,在这里也有机会参与通用实时计算系统的开发、构建统一的推荐特征中台,为推荐业务实现先进的消重、计数、特征服务等;我们期待热爱技术的你加入,一起创造更多可能。 1、负责设计和实现面向推荐/广告大模型推理和训练的多层级存储系统,综合利用显存、本地内存、分布式内存/磁盘、远端大容量存储系统(HDFS)等多种介质进行数据的存储和迁移管理,实现近计算缓存+远端大容量存储的一体化分级系统; 2、负责优化推荐大模型KV Cache命中率,从推理框架、流量调度、多级缓存等多个系统维度入手定制化优化策略,和业务方协作完成端到端推理性能加速; 3、负责建设搜广推通用用户行为数据存储,设计和实现离在线EB级别行为数据的统一存储、IO、近端Cache解决方案,支撑EB级别训练和推理数据,提供高可用保障,在离在线混合负载下,高吞吐和低延时能力的分布式存储系统。

更新于 2025-08-05
logo of transsion
社招

1、负责AI大数据平台的构建与优化,确保数据处理的高效性和稳定性。 2、参与数据模型的研发,提升数据分析和业务决策的能力。 3、与团队合作,针对特定业务需求进行数据解决方案的设计与实施。

更新于 2025-03-05
logo of sf
社招5-10年

1、负责综合域的数据分析挖掘工作,主导关键业务问题的分析建模,构建可解释的归因模型或预测模型。 2、负责利用数据挖掘和算法模型等手段驱动业务策略,输出分析报告,制定技术落地方案,推动机会点的落地。 3、负责综合内部数据资产建设,存量表及新增表管理,以及日常的运维工作;

更新于 2025-08-05
logo of antgroup
社招3年以上技术类-数据

1.负责多种数据源(SDK、运营商、支付等)的数据分析、特征构建、建模出包等流程; 2.根据项目需求,深入挖掘平台数据价值,构建行业特征库,并且通过分析项目回流数据进行迭代优化。

更新于 2025-09-01