Momenta分布式数据系统工程师

1.负责腾讯云包括Mysql,Redis,云原生DB等数据库产品的测试工作； 2.负责分析产品需求，架构，设计测试方法和测试用例； 3.负责产品功能，性能测试、竞品分析、稳定性，可靠性等专项测试工作； 4.负责建设产品相关的效能建设包括但不限于流水线，自动化测试以及相关测试工具开发等工作； 5.不断改进测试过程、方法和技术，提升产品质量； 6.注：此岗位为腾讯集团旗下子公司编制岗位。

岗位简介： 你将与团队一起，基于AI和大语言模型能力搭建和集成智能的数据挖掘/发现系统，优化自动驾驶数据与算法闭环，加速自动驾驶在全球的大规模落地 利用并优化现有数据挖掘系统，深入挖掘与自动驾驶相关的海量驾驶数据，提取关键特征和行为模式 结合检索增强生成（RAG）技术，提升数据挖掘模型的准确性和实用性 搭建和维护大数据平台，支持分布式数据存储与计算，保障数据分析的高效执行 与算法团队紧密合作，推动AI模型在数据挖掘中的应用与创新 持续跟踪行业前沿技术，推动数据挖掘技术的升级和优化

1. 参与互联网网页、文档、图片、音视频等境内外内容数据的发现、采集及处理 2. 优化爬虫架构及平台能力，优化js渲染性能和效果，提升反爬对抗能力 3. 优化数据处理系统，完善数据标注等平台能力 4. 负责大模型训练语料、RAG索引等重要数据的交付

1. 为通信系统的性能和稳定性探索合适的机器学习算法与技术； 2. 改造现有分布式数据工具链，集成智能化功能，实现从DSL解析到中间表示生成的智能优化； 3. 提高分布式数据系统的总体性能和可靠性。