阿里巴巴1688-Java技术专家-AI Data
任职要求
1、计算机或相关专业本科及以上学历,5年以上 Java 后端开发经验; 2、熟练掌握 Java、Spring Boot、并发编程及分布式系统设计,熟悉消息队列、缓存、数据库及大数据组件(如 Spark、Flink); 3、了解 AI Age…
工作职责
1、负责1688 数据中心 AI Data重点项目,以及AB实验平台、数据资产平台、指标中心、ChatBI等数据平台的后端系统设计与核心模块开发及优化; 2、参与AI Agent相关系统研发,包括但不限于智能任务调度、工具调用(Tool Calling)、记忆管理、多轮对话状态维护等后端能力设计与实现; 3、设计高并发、高可用、可扩展的服务架构,支撑 AI Agent 与数据平台的深度集成,如通过函数调用触发数据查询、指标计算或实验配置; 4、与数据科学家、算法工程师及前端团队高效协作,推动数据产品落地,提升业务决策效率与智能化水平。
1. 参与MaxCompute大数据+AI一体化框架和运行平台的设计、开发与技术演进,支撑阿里集团内部和公有云上的Data+AI一体化计算场景; 2. 能够独立完成项目需要的系统分析、设计,编码,测试和上线部署任务,确保项目的进度、质量和稳定性要求; 3. 技术基础扎实,沟通和团队合作流畅,乐于分享,能够积极参与团队中的设计评审和代码评审工作,并能给出相关改进建议; 4. 有一定的技术前瞻性,可以对平台演进中的技术需求(如AI训练中异构环境的数据处理加速)进行预研和设计,满足对大数据+AI平台快速发展过程中,对各项业务场景的客户需求; 5.该职位涉及值班响应的职责,在服务级别协议(SLA)时间内做出对客响应,推动客户问题的解决,改善客户体验。
1. 负责设计和开发DMS的统一元数据系统;包括所支持的40+种数据源的深度化研究,并将相关技术转化为产品 2. 开发和维护DMS异构数据源查询、跨数据源联合分析、湖数据分析相关功能的能力; 3. 设计和实现大规模分布式系统,深度参与计算引擎与存储引擎的联合优化; 4. 与其他团队紧密合作,包括产品、测试和运维团队,确保软件开发流程的顺利进行; 5. 参与代码审查和团队技术分享活动,提高团队技术水平。
1. 协同AI平台与算法团队,面向AI大模型训练和多样化数据处理场景,研发云原生文件系统和缓存加速系统,为AI业务提供极致的存储解决方案并推动在业务侧落地。 2. 应对小红书超大规模多模态应用挑战,攻克单集群百亿级元信息、Tbps级高吞吐等行业技术难题,保障AI业务的安全、稳定和高效运行。 3. 持续进行系统架构优化与技术迭代,结合AI负载特征,实现数据智能调度、数据预取和缓存管理,不断优化I/O路径,有效提升GPU等算力资源利用率。
1、参与针对企业数据安全治理领域的数据安全中心相关研发工作,实现大数据/AI一体化的数据安全治理,实现统一的数据安全性以及风险与合规性管理; 2、参与解决企业数据安全治理领域面临的痛点,设计并实现相关安全解决方案,解决客户在数据集成、数据开发分析等大数据治理过程中的安全问题; 3、参与数据安全中心的系统架构设计与演进迭代,持续优化系统安全性、稳定性、可扩展性、性能,以及使用体验,满足大数据/AI持续发展的业务形态与规模对数据安全的需求; 4、参与企业数据安全治理领域的技术动向研究,实现与业务贴合的安全能力技术攻坚,进行技术上的前瞻探索,实现面向未来的数据安全中心的规划、设计和落地,保持在企业数据安全治理领域的技术先进性。