阿里云阿里云智能-湖仓平台研发工程师-杭州/上海
任职要求
1. 具备3年以上大数据计算引擎、数据库内核或分布式系统研发经验，深刻理解计算引擎执行模型、调度框架与状态管理机制，具备复杂系统架构设计与技术攻坚能力； 2. 熟悉 Paimon/Iceberg/Hudi/Flink/Spark/StarRocks/HBase 等开源技术及湖仓架构体系，有实际架构设计或核心模块开发经验者优先； 3…
工作职责
1. 深度参与 Apache Paimon 湖格式核心架构设计与研发，推动开源生态发展，致力于打造全球领先的全模态湖仓企业级产品； 2. 深度参与多模态数据湖的设计与推广，并协同各大计算引擎，包括AI相关推理与训练生态进行对接与全链路的研发； 3. 积极参与 Apache Paimon 开源社区核心贡献与标准制定，推动版本演进，携手社区共建前沿技术，提升影响力； 4. 深度参与DLF湖仓产品的研发与能力建设，对接内外部客户对湖仓的需求，抽象总结为产品技术能力，支撑大规模企业级应用场景。
团队介绍：TikTok是一个覆盖150个国家和地区的国际短视频平台，我们希望通过TikTok发现真实、有趣的瞬间，让生活更美好。TikTok 在全球各地设有办公室，全球总部位于洛杉矶和新加坡，办公地点还包括纽约、伦敦、都柏林、巴黎、柏林、迪拜、雅加达、首尔和东京等多个城市。 TikTok研发团队，旨在实现TikTok业务的研发工作，搭建及维护业界领先的产品。加入我们，你能接触到包括用户增长、社交、直播、电商C端、内容创造、内容消费等核心业务场景，支持产品在全球赛道上高速发展；也能接触到包括服务架构、基础技术等方向上的技术挑战，保障业务持续高质量、高效率、且安全地为用户服务；同时还能为不同业务场景提供全面的技术解决方案，优化各项产品指标及用户体验。 在这里， 有大牛带队与大家一同不断探索前沿， 突破想象空间。 在这里，你的每一行代码都将服务亿万用户。在这里，团队专业且纯粹，合作氛围平等且轻松。目前在北京，上海，杭州、广州、深圳分别开放多个岗位机会。 1、负责TikTok架构团队的数仓研发与建设，为稳定性、成本、性能、效能、建站等多个场景提供完整、准确、易用的数据支持； 2、负责日常TikTok数据需求支持，包括：数据需求对接、需求研发与交付； 3、积极深入了解业务，逐步实现数据驱动业务的价值输出； 4、负责架构数仓的数据清洗策略制定，保证数据准确性、完整性与易用性； 5、协助完成数仓的各项治理规范与方案的落地，确保低成本、高效率的完成数据生产与交付； 6、协助完成数仓的各项技术探索与调研，完成数仓的可持续技术沉淀与演进。
参与蚂蚁湖仓数据建设平台的数据质量平台建设工作，依托数据治理方法论，借助 AI、运筹优化等手段，全面提升蚂蚁数据的质量。
1. 参与围绕泛搜推领域数据的数据工程研发体系建设，通过数据+算法分析+工程化能力，高效赋能业务； 2. 通过抽象业务域，简历规范化的数据解决方案，通过构建实时、离线数仓为业务提供稳定、安全的数据源； 3. 参与湖仓一体的下一代大数据解决方案建设，提升效率，更好的支持业务； 4. 参与到实验效果的分析中，提供更科学的实验指导及实验分析。
1. 负责公司企业级数据开发平台产品的规划、设计和落地，构建高效、智能、易用的一站式数据开发与治理体系，全面提升数据研发效能与数据质量。 2. 深度参与数据开发全生命周期（DataOps）的流程优化与产品化，构建覆盖数据接入、数据处理、数据调度、数据服务及全链路监控等核心功能的数据平台。 3. 探索并落地基于AI（特别是大模型）的智能数据开发方案，通过AI技术提升数据建模、ETL开发（AI Coding）、SQL生成与优化、智能问答与诊断等环节的自动化与智能化水平。 4. 与数据工程师、数据分析师及业务团队紧密合作，深刻理解不同角色的数据开发与消费需求，持续优化产品体验，提升平台易用性与用户满意度。