腾讯资深测试开发工程师（AI评测方向）
任职要求
1.大学本科及以上学历，计算机科学与技术、软件工程、大数据技术、人工智能、智能科学与技术等专业； 2.精通Python程序开发，有良好的编码风格及创新优化意识，具备较强的程序开发能力； 3.有大模型训练或模型评估经验，熟悉大模型评测方法 , 有大模型Bench数据接入…
工作职责
1.负责腾讯云AI Coding产品质量保障工作，深度参与产品质量体系建设，识别全链路上的质量风险，建立稳定性保障体系，推动稳定性建设落地； 2.腾讯云AI 产品相关的评测工作，包含AI算法的评测体系建设、评测集构建、以及相关评测工程化建设等； 3.负责AI算法的评测标准和评测流程制定，构建评测集，并推进评测执行，分析评测结果，对模型质量给予充分评估； 4.建设相关评测工具/平台，推动评测工程化和无人化。
1. 负责AI类产品（包括大模型应用、智能对话系统、AIGC工具等）的功能、性能、可靠性、数据质量及AI特有维度（如输出一致性、幻觉识别、提示词鲁棒性、偏见与公平性）的测试策略制定与执行； 2. 设计并开发面向AI场景的自动化测试框架与工具链，覆盖模型API接口测试、批量推理验证、评测数据集自动化比对、反馈闭环验证等关键环节； 3. 构建和维护AI测试数据集、评测基准及效果度量体系，协同算法团队开展模型迭代的质量评估与回归验证； 4. 参与AI产品需求与技术方案评审，识别AI特性相关质量风险（如上下文依赖异常、长程推理失效、多模态输入兼容性等），推动可测性设计落地； 5. 持续优化测试效能，推动AI测试能力嵌入CI/CD流程，实现模型版本、服务版本、前端应用的端到端质量门禁。
1、根据软件功能设计文档编写测试用例； 2、对app、web端进行全面测试，撰写测试，并对测试结果进行分析； 3、对产品上线后的质量进行监控； 4、管理产品缺陷，推动产品缺陷的解决； 5、持续优化测试效能，使用AI工具为测试工作提效。
1、按照产品架构和业务要求，制定和推进测试策略，测试计划和测试方法； 2、通过测试相关流程、策略、方法和工具等创新，努力提升测试的质量和效率； 3、自动化测试框架及业务测试支撑工具开发，web端、APP端、服务端、Windows客户端不限； 4、发现工作中的效率提升点，调研并能够开发相应测试工具和框架，提升测试效率 ； 5、配合产品、开发、测试优化和改进代码结构、发布过程、配置管理，顺利实施持续集成。
1、 参与产品需求和架构设计评审，评估整体技术架构合理性以及相关的可测性，并能预先评估质量风险，制定测试计划和方案，并保证测试按预期完成。 2、通过制定测试相关流程、策略、方法和工具等创新，努力提升测试的质量和效率。 3、沉淀通用测试解决方案，解决测试过程中的复杂问题，并能引入新的思路和技术去解决问题。 4、挖掘测试过程中质量和效率痛点问题，并思考方案，推动问题解决。