阿里云阿里云智能-大数据研发专家-SQL 引擎
任职要求
1. 有扎实的Java/C++后端开发基础(熟悉IO、多线程等基础框架，熟悉分布式、缓存等机制)； 2. 有SQL引擎相关开发经验（对SQL Compiler、Optimizer、Runtime各模块有基本了解，了解Codegen、Vectorize、CBO等技术，有Hive、Spark、或者OLAP引擎实际开发经验优…
工作职责
1. 负责MCQA2.0性能优化和稳定性提升，提升MaxCompute在中小数据规模下的竞争力。 2. 负责SQL引擎核心优化，深入理解线上业务SQL使用方式，关注业界通用Benchmark，分析性能瓶颈并针对性改进等。 3. 负责SQL引擎控制链路的架构演进和持续优化（全链路 Cache、异步化改造等），提升性能及稳定性。 4. 探索SQL引擎新硬件（GPU、FPGA等）适配，为MaxCompute提供更高性价比硬件资源。 5. 支持SQL引擎线上业务，包括疑难问题答疑、线上稳定性改进、提升系统可观测性及用户使用体验等。
1. 负责SQL引擎核心优化，深入理解线上业务SQL使用方式，关注业界通用Benchmark，分析性能瓶颈并针对性改进等。 2. 负责SQL引擎增量计算能力演进，打造业界领先的增量计算产品 3. 负责MC智能数仓的开发和能力建设，提升MC整体的性价比和易用性 4. 支持SQL引擎线上业务，包括疑难问题答疑、线上稳定性改进、提升系统可观测性及用户使用体验等。
1. 负责SQL引擎新功能开发，和PD对齐产品行为，了解SQL标准并进行竞品调研，功能开发、测试、维护等 2. 负责SQL引擎核心优化，深入理解线上业务SQL使用方式，关注业界通用Benchmark，分析性能瓶颈并针对性改进等 3. 负责SQL引擎易用性提升，了解业界竞品语言特性，持续提升用户粘性，Portal工具改进，方便用户自查工具开发等 4. 负责SQL引擎线上支持，部分疑难问题答疑、线上稳定性改进、提升系统可观测性等
1、包括实时数据采集计算、流式湖仓建设、现有平台架构调优、业务场景建模、数据产能提质增效。 2、应用场景：BI、OLAP、用户画像、群体分析、数据驱动等。 3、解决方案：基于Kafka、Flink的数据采集、流转、实时ETL平台建设； 基于Kyuubi、Trino、Doris、Hive、Hudi、Ceph、S3的流式湖仓建模、应用、维护； 4、Redis、MongoDB、ClickHouse、TiDB、Mysql等数据存储技术的应用。 技术能力： 1、SQL专家，精通复杂查询、性能优化、不同引擎SQL特性（必需）； 2、精通数仓与数据湖架构设计及业务建模（必需）； 3、熟悉ClickHouse、Doris、Trino、Kyuubi、Spark、Hive、S3等多类存储、计算引擎（必需）、掌握Python语言（必需）、掌握Kafka、Flink流计算平台、掌握Java/Scala语言
1、参与快手EB级大数据平台计算引擎相关系统的研发与优化工作，解决实际业务需求与性能问题； 2、接受大数据平台系统设计与实现复杂度的挑战，分析和发现系统的优化点，负责推动系统的合理性、可靠性、可用性的提升； 3、和开源社区保持交流，从社区引入对公司业务场景有帮助的特性与系统，或将内部研发的功能贡献到社区。