阿里云阿里云智能-大数据研发专家-引擎
任职要求
1、本科及以上学历，计算机科学、软件工程等相关专业；5年以上相关领域工作经验； 2、精通C++/Java/Rust至少一门编程语言，具备高性能系统开发经验（熟悉内存管理、锁优化、SIMD指令集者优先） 3、精通OLAP引擎研发，具备分布式系统设计和优化经验；有数据库内核开发经验者优先，包括但不限于优化器、执行引擎、存储引擎； 4、良好的业务敏感度，能够理解业务需求，提供技术方案支撑业务发展；具备良好的沟通和团队协作力，擅于跨团队协同拿结果； 5、具备独立分析和解决问题的能力，面对复杂场景能提出有效解决方案；工作认真负责，具备良好的抗压能力；关注行业动态，能够快速掌握新技术，不断提升自身专业能力。
工作职责
1、负责自研OLAP系统架构设计、研发和性能优化，包括但不限于查询优化器、执行引擎、存储引擎； 2、优化tpch、tpcds、ssb、clickbench等标准benchmark，使得引擎性能保持业界领先水平； 3、深度结合各类用户核心场景，抽象引擎核心能力，做到更加普适性的功能、性能优化，和开源产品形成差异化； 4、跟踪业界前沿技术发展，探索引擎优化新方向，保证产品竞争力；
1. 负责SQL引擎核心优化，深入理解线上业务SQL使用方式，关注业界通用Benchmark，分析性能瓶颈并针对性改进等。 2. 负责SQL引擎增量计算能力演进，打造业界领先的增量计算产品 3. 负责MC智能数仓的开发和能力建设，提升MC整体的性价比和易用性 4. 支持SQL引擎线上业务，包括疑难问题答疑、线上稳定性改进、提升系统可观测性及用户使用体验等。
1. 负责MCQA2.0性能优化和稳定性提升，提升MaxCompute在中小数据规模下的竞争力。 2. 负责SQL引擎核心优化，深入理解线上业务SQL使用方式，关注业界通用Benchmark，分析性能瓶颈并针对性改进等。 3. 负责SQL引擎控制链路的架构演进和持续优化（全链路 Cache、异步化改造等），提升性能及稳定性。 4. 探索SQL引擎新硬件（GPU、FPGA等）适配，为MaxCompute提供更高性价比硬件资源。 5. 支持SQL引擎线上业务，包括疑难问题答疑、线上稳定性改进、提升系统可观测性及用户使用体验等。
1、【引擎研发】负责Spark、Presto、Hive 为基础的大数据查询引擎内核研发，跟进社区版本，改进性能，提升稳定性，研发新功能，修复内核BUG； 2、【业务支撑】负责排查、定位、解决生产集群问题，与运维同学一起维护生产集群的稳定性，协助业务方一起使用好大数据平台； 3、【平台规划】参与规划公司计算平台的技术演技，提升计算平台湖仓能力，基于云IAAS或者自建IAAS，打造高稳定性、高性能、低成本的计算平台。
1、参与小红书Spark离线引擎的研发工作，支撑小红书云原生大规模离线数据处理场景，包括数据仓库、机器学习等场景，提升离线处理引擎的性能和稳定性 2、参与小红书Spark Native Engine 和 Serverless Spark 架构的研发工作，提升任务时效性，同时利用离在线混部降低资源成本 3、参与统一元数据工作，为小红书算法AI团队管理非结构化数据，提供统一访问方式，简化算法数据开发链路，并进行数据治理