字节跳动测试开发专家-质量保障（北京/杭州）
任职要求
1、5年以上测试开发工作经验，熟练使用Python/Java/Go等至少一门编程语言，良好的编码能力； 2、重视用户反馈，能够对用户反馈的问题进行抽象总结，推动产品和质量的优化； 3、扎实的业务测试经验，主导跨团队项目合作…
工作职责
1、负责系统平台团队子方向的质量保证工作，站在用户视角考虑问题，解决用户体验和稳定性问题； 2、根据需求、研发技术方案和交付要求编写测试脚本，搭建自动化测试环境，执行测试及问题跟踪； 3、识别业务中的痛点，对现有流程、质量现状进行优化，探索并提出有效的解决方法并推动落地； 4、参与大团队技术体系的规划和建设，对所负责的方向进行质量抽象，协同研发、测试拿到质量结果。
1. 负责大模型训练、推理、评测、部署等核心链路的质量保障体系建设。 2. 设计并实现自动化评测框架，支持多维度（如准确性、一致性、安全性、推理速度等）的模型能力评估。 3. 构建高质量、可扩展的评测数据集，制定科学、可量化的评测标准与指标体系。 4. 推动CI/CD流程在大模型工程中的落地，保障模型迭代的稳定性与可回溯性。 5. 主导Bad Case分析闭环机制，联动算法、工程与业务团队优化模型表现。
1. 针对ECS异常调度“运维决策大脑”，设计多维的异常调度可验证体系，通过融合存储、心跳、网络状态等多路信号，从根本上解决因单一信号误判导致的业务中断风险，确保自动化决策的精准性； 2. 针对ECS海量线上数据和全链路性能问题，设计和开发创新的测试解决方案与平台，建立精准、高效的性能和稳定性度量体系； 3. 面向失败的可验证性设计，验证系统的韧性架构，尤其针对规模性故障（机房、核心系统依赖），推动核心组件的降级、熔断、故障恢复能力，通过故障注入等方式验证系统的鲁棒性； 4. 作为产品线研发安全生产的构建者，负责在多产品/复杂系统层面构建并落地完善的研发安全生产规范和流程，保障系统的可容灾、可观测、可处置、可运维、可快速恢复； 5. 主导跨产品、大型复杂系统的质量保障工作，组织和推动高水准的稳定性演练（如容灾、红蓝对抗），培养团队的研发安全生产意识和专业能力； 6. 对AIOps/SRE及质量保障领域的技术发展趋势有前瞻性判断，负责测试技术预研、技术难点攻关，推动技术变革与创新，为产品线带来显著收益。
1. 负责蚂蚁 AI 基础设施中推理、后训练、管控面链路、AI 存储等关键基础设施的质量保障工作，面向重点项目中的业务压力与挑战，补位项目不确定模块/组件的质量保障工作。 2. 主导项目全链路质量保障和风险识别工作，搭建质量技术保障体系、制定质量保障规范、推进测试工作执行。与项目中多角色、多合作团队形成积极有效的沟通和互动，驱动问题解决，保障交付质量。 3. 主动创新，通过技术手段解决质量保障工作中的复杂技术问题，提升测试效能、加深质量工作技术积累。
1、构建AI模型和产品相关的质量保障体系； 2、深入理解业务需求和AI应用场景，参与需求评审，识别风险点和测试重点，设计测试策略和测试用例； 3、持续优化测试策略和流程，沉淀测试方法、工具和平台，提高整体测试效率和质量； 4、跟踪线上质量问题，进行问题复现和根因定位，推动线上问题解决； 5、与产品、研发团队紧密合作，保障AI产品全链路质量。