字节跳动图计算研发工程师/架构师
任职要求
1、熟悉 Linux 环境下 C/C++ 开发,熟悉多线程、网络编程等技术; 2、熟悉分布式计算 (MapReduce / Spark) 、并行计算 (MPI) 等领域,具有相关开发经验; 3、自学能力强,能够跟随当今最新图计算研究成果,…
工作职责
1、参与超大规模图计算系统的设计与研发工作,负责分布式图计算引擎的迭代开发; 2、支撑业界顶尖的图计算应用场景,包括推荐、搜索、广告、风控等大规模核心业务; 3、探索图计算未来领域,打造世界领先的新一代分布式图计算系。
团队简介:流式计算团队负责公司内部流式计算应用场景, 支撑了AML/推荐/数仓/搜索/广告/流媒体/安全和风控等众多核心业务。当前流式计算主要以 Flink 计算引擎为主,面临的挑战是超大单体作业(千万级别 QPS),超大集群规模(上万台机器)的应用场景,在 SQL, State&Checkpoint, Runtime 都有深度优化。 1、构建高效,实时,稳定的流式计算引擎,支撑字节跳动公司内数多个产品线的推荐和广告业务; 2、构建高性能,高易用的 SQL 引擎,支撑特殊场景 SQL 语法,优化 Streaming SQL 任务性能; 3、构建基于 SQL 的批流统一计算引擎,支撑部分核心业务实时/离线统一的应用场景; 4、构建稳定高效的全图离线计算引擎,支撑上万亿边的超大规模图应用场景; 5、探索流式计算在新兴硬件,实时数仓,机器学习,图计算,准实时交互式查询等技术解决方案。
1、构建高效,实时,稳定的流式计算引擎,支撑字节跳动公司内数多个产品线的推荐和广告业务; 2、构建高性能,高易用的SQL引擎,支撑特殊场景SQL语法,优化Streaming SQL任务性能; 3、构建基于SQL的批流统一计算引擎,支撑部分核心业务实时/离线统一的应用场景; 4、构建稳定高效的全图离线计算引擎,支撑上万亿边的超大规模图应用场景; 5、探索流式计算在新兴硬件,实时数仓,机器学习,图计算,准实时交互式查询等技术解决方案。
1、负责行业AI搜索能力构建、包括但不限于游戏、电商、商业咨询、视频、图片、文章等, 为用户提供智能、准确、丰富的搜索体验; 2、从万~千亿不同规模的搜索场景, 应用LLM技术以及其他NLP和多模态机器学习技术, 构建AI检索产品,包括但不限于RAG、 语义检索、图搜、音视频搜索等; 3、搜索全栈(Query分析、相关性、召回、粗排、精排、混排)建设,包括相关性计算、CTR预估、CVR预估、向量召回、价值混排等; 4、AI检索能力构建,探索最前沿的NLP技术和多模态技术,从基础的分词、NER、OCR到应用上的Query分析、基础相关性等,全链路应用深度学习模型; 5、与团队成员紧密合作,将研究成果转化为实际应用,推动产品的创新和升级。