字节跳动大数据平台高级工程师 — 数据流方向
任职要求
1、有至少TB以上级大数据处理经验,编码能力强悍,具备生产系统快速 trouble-shooting 的经验和能力; 2、熟悉大数据处理工具/框架中的一项或多项,包括但不限于Hadoop, Mapreduce, Hive, Storm, Spark, scribe, kafka, hbase, canal,sqoop等; 3、对开源社区有过贡献者优先,请在简历上说明。
工作职责
1、面向字节跳动旗下相关产品线,负责数据流和相关数据服务; 2、面向超大规模数据问题,每天处理千亿增量的用户行为数据; 3、负责流式数据的实时传递,清洗,转换,计算,并对外提供查询服务; 4、负责相同数据集的批处理功能。
岗位职责: 负责数据接入、数据清洗、数据转换,参与金融数仓搭建和数据报表开发; 参与风控特征开发和数据挖掘工作,支撑金融风控和营销应用,保障数据质量; 关注大数据类技术方向,进行持续跟踪和学习,以及技术攻关工作;
团队介绍:TikTok是一个覆盖150个国家和地区的国际短视频平台,我们希望通过TikTok发现真实、有趣的瞬间,让生活更美好。TikTok 在全球各地设有办公室,全球总部位于洛杉矶和新加坡,办公地点还包括纽约、伦敦、都柏林、巴黎、柏林、迪拜、雅加达、首尔和东京等多个城市。 TikTok内容发现团队负责的产品功能涵盖TikTok所有内容分发的场景,包括首页的搜索、推荐信息流等核心场景,通过个性化手段以及产品功能来满足用户发现内容的诉求。 在这里, 有大牛带队与大家一同不断探索前沿, 突破想象空间。 在这里,你的每一行代码都将服务亿万用户。在这里,团队专业且纯粹,合作氛围平等且轻松。 1、负责TikTok Feeds方向的服务端研发工作、功能实现和产品迭代; 2、在深入了解业务的基础上,对关键领域的业务模型进行抽象、并构建合理的系统架构以满足安全、数据一致性、可用性、稳定性、扩展性等方面的要求; 3、深入思考研发过程中的各项问题,促进团队工作效率和开发质量的提升。
●负责服务端技术方案设计、需求把控及核心功能开发,细化拆解业务需求并且能够带领团队成员实施; ●参与产品架构规划设计、性能优化、故障排查和解决线上问题等工作; ●积极参与技术分享,技术学习,促进团队成员进步提升; ●协调驱动业务团队间的配合协作,能通过目标驱动大家完成任务; ●主导技术难题攻关,持续提升核心系统在高并发、海量请求数下的高处理性能,保证系统的安全、稳定、快速运行; ●技术驱动业务,推动业务&产品持续进步。
1. 主导大模型系统架构设计: 负责RAG系统的整体架构设计,包括存储层、检索层、推理层与缓存层的技术选型与实现。 构建高可用、低延迟的分布式推理服务框架,支持向量数据库集成(如Milvus、Elastic)、知识库管理与多模态检索优化。 设计并实现Agent工作流编排框架,支持工具调用(MCP协议)、任务规划与自动化执行。 2.模型部署与性能优化: 负责大模型(LLM/VLM)的本地化部署、量化压缩、动态批处理与推理加速,优化GPU/CPU异构算力利用率。 3. AI服务平台开发: 基于Java/Go/Python构建高并发、可扩展的AI微服务,与现有业务系统深度集成,实现模型训练-部署-监控的全链路管理。 4.技术领导与跨团队协作: 指导中级工程师,制定技术方案,并主导技术攻关。与产品、算法、基础设施团队协作,定义需求并推动工程落地。