
有赞大数据平台开发工程师
社招全职地点:杭州状态:招聘
任职要求
基本要求: 1. Java 能力:精通 Java 核心编程,熟练使用 Spring Boot 等框架,具备系统架构设计和代码评审能力。 2. 分布式计算:熟悉 Hadoop/Spark/Flink 原理,熟悉其运行机制和体系结构。 3. 数据存储:熟练使用 MySQL、Elasticsearch 等存储引擎,能设计高…
登录查看完整任职要求
微信扫码,1秒登录
工作职责
岗位职责: 1. 平台全生命周期管理:负责大数据平台的架构设计、核心模块研发与全链路维护。通过系统化监控、故障预警与应急响应机制,保障系统稳定运行。 2. 资源效能优化:深度分析平台资源使用状况,通过性能调优、成本控制与资源动态调度策略,实现集群资源利用率提升。同时推动数据治理体系建设,保障数据质量、安全性及合规性。 工作内容: 1. 平台迭代与稳定性保障:负责数据平台核心模块(如分布式调度系统、元数据资产管理、异构数据集成平台等)的持续迭代 2. AI 技术深度融合:参与算法平台与 AI 基础服务的研发,构建智能化数据处理流水线,提升业务研发效率。 3. 智能化数据治理:利用 NLP、大模型 等 AI 技术实现数据治理自动化,降低人工成本,提升数据价值。
包括英文材料
Java+
https://www.youtube.com/watch?v=eIrMbAQSU34
Master Java – a must-have language for software development, Android apps, and more! ☕️ This beginner-friendly course takes you from basics to real coding skills.
Spring Boot+
https://spring.io/guides/gs/spring-boot
his guide provides a sampling of how Spring Boot helps you accelerate application development.
https://www.youtube.com/watch?v=Nv2DERaMx-4&list=PLzUMQwCOrQTksiYqoumAQxuhPNa3HqasL
The author teaches you how to use Spring Boot from a complete beginner, to building a REST API with a real database, Dockerising it and deploying it to the cloud.
系统设计+
https://roadmap.sh/system-design
Everything you need to know about designing large scale systems.
https://www.youtube.com/watch?v=F2FmTdLtb_4
This complete system design tutorial covers scalability, reliability, data handling, and high-level architecture with clear explanations, real-world examples, and practical strategies.
Hadoop+
https://www.runoob.com/w3cnote/hadoop-tutorial.html
Hadoop 为庞大的计算机集群提供可靠的、可伸缩的应用层计算和存储支持,它允许使用简单的编程模型跨计算机群集分布式处理大型数据集,并且支持在单台计算机到几千台计算机之间进行扩展。
[英文] Hadoop Tutorial
https://www.tutorialspoint.com/hadoop/index.htm
Hadoop is an open-source framework that allows to store and process big data in a distributed environment across clusters of computers using simple programming models.
还有更多 •••
相关职位

社招3年以上计算机网络技术类
1. 负责或参与大数据平台的架构设计以及基础组件的调优、改造、升级; 2. 结合客户需求,负责和参与大数据产品的设计与研发; 3. 负责数据平台新技术的研究及应用落地。
更新于 2024-10-16深圳

社招3年以上
1、负责大数据平台开发工作,主要hadoop集群相关,能够解决业务的需求开发。 2、负责大数据平台的日常运维管理,保障数据平台的稳定性。 3、解决大数据平台的故障及性能问题,提升数据存储和计算效率。
更新于 2025-04-10广州
社招3年以上火车票业务开发
1.负责指标平台、用户画像平台等数据平台的后端服务与数据查询接口研发与优化。 2.参与画像标签的生产、同步与维护,保证标签口径统一与数据的准确、及时。 3.支撑数据产品版本迭代,按需求完成功能新增、性能优化、监控与日志补全等工作。 4.配合算法团队,参与在线推荐服务的接口与数据链路开发,保障在线服务结果的稳定、高效输出。 5.参与大模型相关探索,如指标助手、图文生成等大模型应用,以及MCP等框架的数据接口开发与接入。 6.跟踪业界大数据和实时计算技术发展,评估并引入合适的新技术方案,持续优化平台架构与研发效率。 7.积极响应线上问题,对数据查询、平台任务故障等问题进行快速排查与修复,保障数据平台高可用与稳定运行。
更新于 2025-12-02上海