阿里巴巴智能引擎-大数据平台高级开发工程师-杭州
任职要求
1. 至少精通JAVA、C++中一门语言， 具备扎实的计算机理论基础，对数据结构及算法有较强的功底；具备优秀的系统设计能力，有平台产品研发经验者优先 。 2. 至少熟悉一种 Flink / Spa…
工作职责
1. 参与智能引擎事业部大数据平台的开发、设计与维护工作，打造高可靠、低成本、简单易用的 Flink 实时计算和大数据技术中台； 2. 支持阿里集团AI数据的全面入湖，完善湖仓一体存储与优化，降低用户使用数据的门槛； 3. 参与搜索、广告、推荐、AI 推理等链路的数据处理链路的深度重构，适应大模型场景的需求，打造领域高效的SaaS解决方案。
1. 参与SQL引擎性能优化，深入分析线上业务SQL执行特征，定位性能瓶颈并设计针对性的优化方案。 2. 负责SQL引擎控制链路的架构优化，设计和实现全链路Cache、异步化改造等方案，提升查询性能与系统稳定性。 3. 参与SQL-AI融合能力建设，实现大模型、Agent与SQL引擎的集成方案，推动Data+AI场景落地。 4. 参与SQL引擎与GPU等异构资源的适配开发，实现向量检索、多模态数据处理等新能力。 5. 支持SQL引擎线上业务，排查疑难问题，完善可观测性建设，持续提升系统稳定性和用户体验。 6. 跟踪大数据与AI融合领域的技术动态，参与关键技术预研与原型验证。
1. 参与SQL引擎性能优化，深入分析线上业务SQL执行特征，定位性能瓶颈并设计针对性的优化方案。 2. 负责SQL引擎控制链路的架构优化，设计和实现全链路Cache、异步化改造等方案，提升查询性能与系统稳定性。 3. 参与SQL-AI融合能力建设，实现大模型、Agent与SQL引擎的集成方案，推动Data+AI场景落地。 4. 参与SQL引擎与GPU等异构资源的适配开发，实现向量检索、多模态数据处理等新能力。 5. 支持SQL引擎线上业务，排查疑难问题，完善可观测性建设，持续提升系统稳定性和用户体验。 6. 跟踪大数据与AI融合领域的技术动态，参与关键技术预研与原型验证。
本岗位聚焦于阿里集团头部电商场景大规模深度学习流程中，样本、特征、索引和模型等数据的计算存储研发，包括但不限于以下职责： 1、构建面向稀疏和多模态模型训练场景的样本存算系统，支持搜推广稀疏模型和大模型训练。 2、开发和维护基于SQL增强的实时样本特征计算服务，推动多个业务场景取得时效性收益。 3、研发批流一体的广告实时数据平台，支持百亿级索引和特征的快速构建和秒级更新，保障实时索引链路稳定性。
1. 负责SQL引擎新功能开发，和PD对齐产品行为，了解SQL标准并进行竞品调研，功能开发、测试、维护等 2. 负责SQL引擎核心优化，深入理解线上业务SQL使用方式，关注业界通用Benchmark，分析性能瓶颈并针对性改进等 3. 负责SQL引擎易用性提升，了解业界竞品语言特性，持续提升用户粘性，Portal工具改进，方便用户自查工具开发等 4. 负责SQL引擎线上支持，部分疑难问题答疑、线上稳定性改进、提升系统可观测性等