迅雷数据平台开发工程师（调度平台）

1、参与快手项目所需的数据采集、清洗、加工与交付处理； 2、设计高效的数据处理工具链，支持亿级数据的ETL； 3、理解数据需求，与业务紧密配合，建立自动化数据处理流程及系统； 4、了解数据治理，持续提升数据质量，挖掘数据价值。

岗位职责： 1. 负责离线计算基础组件&平台的开发和维护工作，保证系统的稳定、高效 2. 参与离线数据处理架构设计，提升数据开发效率和数据质量 工作内容： 1. 负责离线计算基础组件（Hadoop、Spark、Hive等）的优化和稳定性建设 2. 负责离线数据平台建设，提升数据开发、调度和运维效率 3. 解决离线数据处理中的性能瓶颈和稳定性问题

1、负责大数据应用（BI、分析平台、数据治理平台等）相关的开发和维护工作；

数据平台架构升级：负责公司级数据平台的研发与维护，利用 AI 技术对传统 ETL 链路进行智能化改造，实现自动化的数据血缘分析、元数据管理及数据质量监控。 AI Agent 平台建设：设计并实现企业级 AI Agent 框架，包括任务规划（Planning）、记忆系统（Memory）、工具调用（Tool Use）等核心模块，使 AI 能够自主完成复杂的数据提取与分析任务。