阿里云阿里云智能-湖仓平台研发工程师-杭州/上海
任职要求
1. 具备3年以上大数据计算引擎、数据库内核或分布式系统研发经验,深刻理解计算引擎执行模型、调度框架与状态管理机制,具备复杂系统架构设计与技术攻坚能力; 2. 熟悉 Paimon/Iceberg/Hudi/Flink/Spark/StarRocks/HBase 等开源技术及湖仓架构体系,有实际架构设计或核心模块开发经验者优先; 3…
工作职责
1. 深度参与 Apache Paimon 湖格式核心架构设计与研发,推动开源生态发展,致力于打造全球领先的全模态湖仓企业级产品; 2. 深度参与多模态数据湖的设计与推广,并协同各大计算引擎,包括AI相关推理与训练生态进行对接与全链路的研发; 3. 积极参与 Apache Paimon 开源社区核心贡献与标准制定,推动版本演进,携手社区共建前沿技术,提升影响力; 4. 深度参与DLF湖仓产品的研发与能力建设,对接内外部客户对湖仓的需求,抽象总结为产品技术能力,支撑大规模企业级应用场景。
团队介绍:TikTok是一个覆盖150个国家和地区的国际短视频平台,我们希望通过TikTok发现真实、有趣的瞬间,让生活更美好。TikTok 在全球各地设有办公室,全球总部位于洛杉矶和新加坡,办公地点还包括纽约、伦敦、都柏林、巴黎、柏林、迪拜、雅加达、首尔和东京等多个城市。 TikTok研发团队,旨在实现TikTok业务的研发工作,搭建及维护业界领先的产品。加入我们,你能接触到包括用户增长、社交、直播、电商C端、内容创造、内容消费等核心业务场景,支持产品在全球赛道上高速发展;也能接触到包括服务架构、基础技术等方向上的技术挑战,保障业务持续高质量、高效率、且安全地为用户服务;同时还能为不同业务场景提供全面的技术解决方案,优化各项产品指标及用户体验。 在这里, 有大牛带队与大家一同不断探索前沿, 突破想象空间。 在这里,你的每一行代码都将服务亿万用户。在这里,团队专业且纯粹,合作氛围平等且轻松。目前在北京,上海,杭州、广州、深圳分别开放多个岗位机会。 1、负责TikTok架构团队的数仓研发与建设,为稳定性、成本、性能、效能、建站等多个场景提供完整、准确、易用的数据支持; 2、负责日常TikTok数据需求支持,包括:数据需求对接、需求研发与交付; 3、积极深入了解业务,逐步实现数据驱动业务的价值输出; 4、负责架构数仓的数据清洗策略制定,保证数据准确性、完整性与易用性; 5、协助完成数仓的各项治理规范与方案的落地,确保低成本、高效率的完成数据生产与交付; 6、协助完成数仓的各项技术探索与调研,完成数仓的可持续技术沉淀与演进。
1、负责数据仓库模型迭代以及数据仓库应用产品的设计和开发; 2、负责各项常规数据需求/看板的搭建和维护,建立例行的数据监控机制; 3、负责对业务关键数据进行统计分析,提出具有建设性的建议及分析报告; 4、参与专题分析,对业务模型抽象、数据模型设计开发,通过深层次的数据挖掘发现问题,驱动业务。
1. 参与升学中心数据仓库设计与研发,完成数据建模的设计和开发以及数据监控,性能优化等相关技术工作 2. 结合升学中心业务特点,进行指标/标签体系的搭建 3. 参与数仓研发质量保障体系的完善和实施,打造稳定可靠的数据服务和保障体系 4. 调研和跟进大数据技术发展趋势进行相关数据方案的探索落地 5. 编写和维护数仓文档