京东大数据开发工程师
社招全职5-10年软件开发岗地点：北京状态：招聘
任职要求
1.硕士及以上学历，至少5-10年大数据领域技术建设和团队管理经验，有超大规模分布式存储系统、资源调度系统和计算引擎建设经历，能够带领团队推进高性能、高可用、低成本大数据平台建设； 2.熟悉Hadoop、YARN、Hive、Spark、Doris、ClickHouse等大数据开源组件，并具备较强的底层引擎自研能力，同时了解…
登录查看完整任职要求
微信扫码，1秒登录
工作职责
1.带领团队建设京东集团级超大规模（数万服务器规模、数EB级数据）分布式数据存储和计算平台，为京东零售、物流、科技、健康、工业等业务全面数智化提供技术基座； 2.负责规划和推动京东大数据下一代存储、计算基座升级，包括但不限于多数据中心数据存储系统、高性能计算和分析系统、离在线混部系统等； 3.负责京东大数据核心技术团队管理和人才梯队培养，对内建设具有核心技术竞争力和凝聚力的技术团队，对外提升京东大数据技术品牌影响力。
包括英文材料
学历+
大数据+
https://www.youtube.com/watch?v=bAyrObl7TYE
https://www.youtube.com/watch?v=H4bf_uuMC-g
With all this talk of Big Data, we got Rebecca Tickle to explain just what makes data into Big Data.
高可用+
https://redis.io/blog/high-availability-architecture/
A high available architecture is when there are a number of different components, modules, or services that work together to maintain optimal performance, irrespective of peak-time loads.
https://www.ibm.com/think/topics/high-availability
High availability (HA) is a term that refers to a system’s ability to be accessible and reliable close to 100% of the time.
Hadoop+
https://www.runoob.com/w3cnote/hadoop-tutorial.html
Hadoop 为庞大的计算机集群提供可靠的、可伸缩的应用层计算和存储支持，它允许使用简单的编程模型跨计算机群集分布式处理大型数据集，并且支持在单台计算机到几千台计算机之间进行扩展。
[英文] Hadoop Tutorial
https://www.tutorialspoint.com/hadoop/index.htm
Hadoop is an open-source framework that allows to store and process big data in a distributed environment across clusters of computers using simple programming models.
Yarn+
[英文] Introduction
https://yarnpkg.com/getting-started
Yarn is an established open-source package manager used to manage dependencies in JavaScript projects.
还有更多 •••
相关职位
社招网易数智
1、负责网易大数据平台的Iceberg等大数据组件迭代研发。 2、负责Iceberg等技术在业务上的实践落地以及问题分析诊断。 3、 参与Hive等组件在大数据元数据服务方面的稳定性建设以及问题诊断。
更新于 2025-04-17杭州
社招A166444A
1、为大规模推荐系统设计和实现合理的离线/实时数据架构； 2、设计和实现灵活可扩展、稳定、高性能的存储系统和计算模型； 3、生产系统的Trouble-shoting，设计和实现必要的机制和工具保障生产系统整体运行的稳定性； 4、打造业界领先的离在线存储、批式流式计算框架等分布式系统，为海量数据和大规模业务系统提供可靠的基础设施。
更新于 2025-02-20北京
社招5年以上技术
1、负责哈啰街猫业务基础数据的建设，包括基础数据模型建立和维护，报表的开发，业务系统的数据开发等； 2、理解哈啰街猫投喂、电商等业务，根据业务需求建立用户画像体系和标签体系，支持推荐和用户运营； 3、参与数据产品及应用的研发工作，挖掘数据业务价值，助力数据化运营；
更新于 2025-02-12上海
社招
团队内80％+都活跃在开源社区，有多名Committer. 欢迎对大数据底层技术有兴趣的小伙伴，一起挑战自我！（非数据仓库方向） 工作base可选:苏州/北京/成都 岗位描述: 基于hadoop/flink/spark/hive/cloud native等开源技术 1. 负责大数据集群规划、运维工作；负责大数据集群技术问题攻关，集群调优，源码解读，Bug fix等； 2. 负责大数据公共组件、中间件的开发工作； 3. 负责存储组件、批处理、流计算、OLAP、ML/DL，通过技术和业务场景的紧密结合，让数据发挥最大业务价值 4. 支撑数据中台建设；支撑业务结合需求设计高扩展、高性能、高可用的大数据业务系统；
更新于 2025-02-26苏州