阿里云阿里云智能-智能数据系统研发专家-北京/杭州/上海
任职要求
• 5年以上IT、互联网、云计算开发、数仓、数据系统相关工作经验; • 精通Java语言和Spring等基础框架,有使用Java语言进行后端系统开发的经验,熟悉Python等脚本语言; • 熟练掌握分布式系统设计的基本原理和最佳实践,熟悉RPC框架、缓存、消息系统等的技术原理并有相关的使用经验; • 精通SQL并熟练掌握MaxCompute(ODPS), Flink, Spark, Hive等大数据组件的原理和使用,有大数据链路性能优化经验; • 在高并发架…
工作职责
1.技术方案设计 • 参与智能数据系统的高性能架构升级和优化工作,解决数据密集型系统的稳定性、性能、安全等目标设计相应的技术方案,并明确方案目标、范围和交付成果; • 参与智能数据系统的数据质量定义和优化工作,基于业务定义数据质量标准,并设计相应的技术方案提升或者保持数据质量SLA水平; • 参与面向多云多单元体系下的智能数据系统的交付部署方案设计。 2.技术实现 • 基于技术方案的拆解,按照任务目标和产出规范,完成任务/子任务的设计、编码开发和系统功能实现; • 负责架构性能优化及系统调优,解决系统服务能力提升及优化; • 负责核心功能的架构与代码模板的编写,开发与维护管控系统核心业务模块,优化程序性能等; • 对编码进行阶段性的讨论和CodeReview,并通过调试优化,推动代码成功部署; • 对开发中和部署后的程序进行必要的维护和迭代,包括值班oncall、bug排查、问题诊断、产品体验改善、性能和成本优化等; • 编写技术文档,如操作手册、故障排除指南、API文档等,以支持日常答疑运维工作。 3.安全、稳定、效率和性能优化 • 通过数据分析,稳定性研究和性能测试,持续推动升级和优化智能数据系统架构,实现高可用、高性能的数据密集型系统; • 运用产品优化技术和方法,实现安全保障和优化系统性能,提高数据密集型系统的稳定性和数据查询分析效率。 4.技术预研 • 跟踪和了解国内外云计算技术、大数据技术、AI Agent技术的发展和趋势,结合业务实际需要提供有效的技术支持和架构建议。 5.技术规划 • 理解业务重点,基于业务需求作出高可用、高可靠、高拓展性的技术架构规划和落地。
1. 参与 PB 级分布式引擎设计与开发,包括存储、索引等的功能实现与性能和成本优化; 2. 参与稳定性建设,优化分片调度与负载均衡机制,研发不同高可用产品形态,包括:同城多可用区、异地容灾、全球多活等; 3. 跟踪业界前沿动态,学习和吸纳开源的大数据计算和存储技术,帮助产品探索和实现更多的玩法。
1. 设计,开发和调优混合云存储产品的数据平面,包括但不限于Guest OS/Hypervisor/存储网关/阿里云等层面上的存储,备份,数据服务,容灾恢复等核心功能的数据平面能力; 2. 推动技术与业务的发展,在专有云与公有云中设计和开发不同形态的混合云服务; 3. 产品负责人岗位需跟踪协调合作伙伴产品(例如网关)功能和进度制定阿里云相应的功能适配;制定自主研发混合云存储产品的数据平面技术架构选择、开源和自研模块集成策略。
1. 参与蚂蚁数科Web3数字资产平台相关研发工作,包括系统设计与编码实现、DApp/智能合约开发、业务系统集成对接、性能分析优化、线上运维保障等,确保项目进度和系统等安全性、稳定性和质量; 2. 与产品、业务、法务合规等团队密切协同,深入发掘和分析业务、客户、监管等需求,参与配合业务系统产品设计,做好开展数字资产业务所需的客户、监管、市场等方面的交流和支持工作; 3. 跟踪调研Web3相关领域最新市场趋势和前沿技术发展,持续推动业务平台技术能力的完善升级、创新演进。
蚂蚁 PaaS 平台是基于蚂蚁多年在金融级云原生领域的技术积累,围绕 Kubernetes 等云原生技术打造的应用 PaaS 平台,并通过下沉技术风险、安全可信、数据智能等能力,实现效率与风险的极致平衡,满足蚂蚁多元化业务需要。 1、基于 Kubernetes 的云原生 PaaS 平台研发,解决蚂蚁超大规模场景下云原生系统性能、高可用与稳定性等问题 2、参与云原生大模型推理服务平台建设,包括模型部署、推理服务高可用高吞吐等能力建设 3、参与变更管控与智能变更平台建设,包括策略代码化、风险分析、根因定位与变更Agent等能力建设 4、面向客户端到端需求分析、技术选型、架构设计、代码实现与功能交付 5、参与云原生 PaaS 开源技术品牌 KusionStack 的建设