logo of weride

文远知行大数据开发工程师

社招全职3年以上地点:广州状态:招聘

任职要求


熟悉至少一个分布式大数据处理技术原理,包括但不限于Apache Flink/Apache Spark/Ray data/Google dataflow/MapReduce/Dask/Risingwave等计算引擎,熟读源码者尤佳;
熟练掌握c++/java/go中的一种开发语言;
了解分布式系统原理,有3年以上分布式环境开发经验,具备大规模数据处理的实践经验尤佳;
熟悉k8s/docker/bazel等开发部署环境;
了解分布式对象存储/数据湖/向量数据库,有实际工作经验尤佳;
良好的团队合作精神,具备较强的沟通能力和问题解决能力。

加分项:
知名开源分布式计算/存储引擎的committer;
有使用Ray Data等计算引擎处理海量非结构化数据的实际项目经验,对大规模异构计算有一定深度理解与认知。

文远知行(WeRide)成立于 2017 年,是全球领先的 L4 级自动驾驶科技公司,致力于“以无人驾驶改变人类出行”,已在全球超过 25 个城市开展自动驾驶研发、测试及运营,累积自动驾驶里程超1600万公里,应用场景覆盖智慧出行、智慧货运和智慧环卫,形成自动驾驶出租车、自动驾驶小巴、自动驾驶货运车、自动驾驶环卫车、高阶智能驾驶等五大产品矩阵,提供网约车、随需公交、同城货运、智能环卫、高阶智能驾驶解决方案等多种服务。
凭借“1个平台+3大场景+5大产品”的多元商业化战略,文远知行商业营收居同类自动驾驶企业之首,已与多家全球顶级主机厂和一级供应商达成战略合作伙伴关系,包括雷诺日产三菱联盟、宇通集团、博世、广汽集团等,不断为人类出行提供更多新选择。
文远知行目前的团队既有来自谷歌、微软、亚马逊、苹果、百度、滴滴的高阶工程师,也不乏刚从顶尖高校毕业的青年才俊。来到我们当中,你会发现这是一个专业、专注、有趣、有料的队伍。大家为了一个激动人心而富有挑战的目标走到一起,互相激励、脑力碰撞,为实现产品落地、创造社会价值、推进行业技术而努力。
对有抱负的工程师,还有什么比这更有意义的呢?我们虚位以待,真诚期待技术过硬、志趣相投的小伙伴加入我们!
更多信息请访问:http://www.weride.ai,或关注官方微信号:文远知行WeRide
Infra团队介绍
基础架构团队为车端提供高可用、高性能和高可靠的车载系统,以及灵活的系统应用接口;离线工具链提供各类高效的开发集成平台和仿真平台,通过收集和分析自动驾驶过程中的海量数据,设计和执行大规模仿真任务,提供强大的工具帮助算法团队快速定位问题和解决问题。
基础架构团队负责设计和开发自研车载系统及中间件、开发高性能云计算系统、搭建大规模数据处理和分析平台、利用机器学习和模仿学习设计自动驾驶仿真算法、构建大规模仿真场景、以及研发支撑算法开发、测试、集成和部署的强大工具。

工作职责


岗位内容:
在自动驾驶领域,作为平台团队,支撑面向AI的海量数据的收集、高性能处理和检索管理。
设计、开发和维护业内领先的自研高性能的分布式大数据计算引擎,支持自动驾驶领域非结构化数据的高效处理;
负责自动驾驶领域大数据计算加工/机器学习推理链路的开发和维护,持续不断提升计算加工效率;
提供海量数据的存储与全生命周期管理,支撑海量数据的数据湖管理与向量化检索等能力。
包括英文材料
Apache+
Spark+
Ray+
MapReduce+
Dask+
C+++
Java+
Go+
分布式系统+
Kubernetes+
Docker+
自动驾驶+
HTTP+
高可用+
算法+
中间件+
机器学习+
相关职位

logo of netease
社招网易数智

1、负责网易大数据平台的Iceberg等大数据组件迭代研发。 2、负责Iceberg等技术在业务上的实践落地以及问题分析诊断。 3、 参与Hive等组件在大数据元数据服务方面的稳定性建设以及问题诊断。

更新于 2025-04-17
logo of bytedance
社招A166444A

1、为大规模推荐系统设计和实现合理的离线/实时数据架构; 2、设计和实现灵活可扩展、稳定、高性能的存储系统和计算模型; 3、生产系统的Trouble-shoting,设计和实现必要的机制和工具保障生产系统整体运行的稳定性; 4、打造业界领先的离在线存储、批式流式计算框架等分布式系统,为海量数据和大规模业务系统提供可靠的基础设施。

更新于 2025-02-20
logo of hello
社招5年以上技术

1、负责哈啰街猫业务基础数据的建设,包括基础数据模型建立和维护,报表的开发,业务系统的数据开发等; 2、理解哈啰街猫投喂、电商等业务,根据业务需求建立用户画像体系和标签体系,支持推荐和用户运营; 3、参与数据产品及应用的研发工作,挖掘数据业务价值,助力数据化运营;

更新于 2025-02-12
logo of ly
社招

团队内80%+都活跃在开源社区,有多名Committer. 欢迎对大数据底层技术有兴趣的小伙伴,一起挑战自我!(非数据仓库方向) 工作base可选:苏州/北京/成都 岗位描述: 基于hadoop/flink/spark/hive/cloud native等开源技术 1. 负责大数据集群规划、运维工作;负责大数据集群技术问题攻关,集群调优,源码解读,Bug fix等; 2. 负责大数据公共组件、中间件的开发工作; 3. 负责存储组件、批处理、流计算、OLAP、ML/DL,通过技术和业务场景的紧密结合,让数据发挥最大业务价值 4. 支撑数据中台建设;支撑业务结合需求设计高扩展、高性能、高可用的大数据业务系统;

更新于 2025-02-26