小红书大数据存储研发专家

1、【数据通道】负责大数据通道Tunnel服务的建设 2、【存储引擎】HDFS、Alluxio、JuiceFS等大数据存储系统的内核研发，跟进社区版本、改进性能、提升稳定性、定制新功能； 3、【业务支撑】负责排查、定位、解决生产集群问题，与运维同学一起维护生产集群的稳定性，协助业务方一起使用好大数据平台； 4、【平台规划】参与规划公司存储平台的技术演技，打造高稳定性、高性能、低成本的存储平台。

工作职责 1. 参与大数据存储产品(Kafka/文件缓存/文件系统)的系统研发与优化工作，构建一流的数据基础设施，满足AI+BI对数据Infra不断增长的需求 2. 与团队共同推动技术创新，探索更加AI-native的数据生产与存储链路，落地具有行业影响力的业务成果

7 亿快手用户每天都在生产百 PB 级的数据，涵盖短视频、直播、用户画像、AI 训练样本等高价值数字资产。作为快手存储团队的核心成员，你将参与构建下一代 EB 级大数据存储系统，以极致性价比保障数据稳固，支撑离线计算、实时计算、数据湖、AI 训练等关键业务场景。 1、负责下一代 EB 级大数据存储的设计与研发，面向海量数据，提供高可用、高可靠、高吞吐、低成本的存储解决方案； 2、深入探索存储引擎、元数据管理、冷热数据分层等核心技术，持续提升稳定性、扩展性以及成本效率； 3、结合 NVMe、QLC SSD、RDMA 等前沿硬件技术，推动高性能存储架构在快手的落地。

1.参与并负责存储系统数据链路的设计、开发工作，包括面向闪存、非易失性介质、海量磁盘介质的存储系统软件设计与开发。 2.负责新存储机型、新硬件的适配，从事软硬协同设计的技术研发，具体包括ZNS SSD新硬件的软硬协同设计、众核技术架构技术优化、面向下一代高性能及海量存储机型的软硬协同设计等。 3.深入云存储业务场景，针对人工智能、大数据分析、海量存储、高性能低延迟场景进行存储系统架构设计、性能优化、效能提升与系统优化，演进下一代存储系统。 4.参与存储业务线的技术支持，和业务线进行协同配合，定位解决分布式存储引擎存在的问题，保障线上业务稳定生产。