字节跳动AI测试开发工程师-豆包手机助手
任职要求
1、计算机及相关专业本科及以上学历，具备AI相关应用质量保障工作经验； 2、具有客户端/服务端、智能硬件、模型算法测试或研发经验； 3、熟悉掌握Java、C、C++、Python、Go等语言中的两种以上； 4、具有技术发展视野，对AI产品/LLM有一定的认知和技术前瞻，有相关测试经验者优先； 5、…
工作职责
1、负责AI产品相关的服务端和客户端质量保障工作，完成端/云模型部署运行的交付工作； 2、参与产品需求、开发设计的评审工作，并提出改进意见； 3、负责AI产品质量体系的搭建，负责重点难点领域测试方案设计和技术选型，承担测试领域技术攻坚； 4、通过业内先进理论技术引入、自主创新等方式，持续在专项领域探索和创新。
1. AI 驱动测试体系建设：使用大模型辅助测试工作，构建 AI 自动生成测试用例能力，利用 AI 提升测试覆盖率和测试效率 2. App 自动化测试建设： 负责 iOS / Android App 自动化测试能力建设，包括但不限于XCTest/XCUITest/Espresso/Appium/Playwright等技术方案。 3. AI Agent 测试探索: 探索基于大模型的 GUI 自动化测试能力，包括但不限于AI 自动理解页面结构/AI 自动执行测试步骤/AI 自动发现异常/AI 自动生成缺陷报告 4. 质量体系建设: 负责测试策略制定/线上质量分析/Crash 分析/性能分析/用户问题定位/建立质量指标体系 AI 自动执行率
岗位职责 - 负责 AI 驱动的测试工具、平台及工作流的设计、开发和落地 - 围绕需求分析、用例设计、缺陷定位、复现路径生成、结果分析等环节，建设可复用的智能化能力 - 将重复性、高成本、低效率的测试问题抽象为工具方案，并持续迭代为团队可使用的系统能力 - 推动测试流程从人工密集型模式向工具密集型模式演进 - 结合业务场景评估大模型、Agent、工作流编排等能力的适用性，并完成工程化落地 - 为 AI 输出建立校验、纠偏和兜底机制，确保工具结果可用、可控、可持续演进
1. 负责AI类产品（包括大模型应用、智能对话系统、AIGC工具等）的功能、性能、可靠性、数据质量及AI特有维度（如输出一致性、幻觉识别、提示词鲁棒性、偏见与公平性）的测试策略制定与执行； 2. 设计并开发面向AI场景的自动化测试框架与工具链，覆盖模型API接口测试、批量推理验证、评测数据集自动化比对、反馈闭环验证等关键环节； 3. 构建和维护AI测试数据集、评测基准及效果度量体系，协同算法团队开展模型迭代的质量评估与回归验证； 4. 参与AI产品需求与技术方案评审，识别AI特性相关质量风险（如上下文依赖异常、长程推理失效、多模态输入兼容性等），推动可测性设计落地； 5. 持续优化测试效能，推动AI测试能力嵌入CI/CD流程，实现模型版本、服务版本、前端应用的端到端质量门禁。
1、负责阿里巴巴国际数字商业集团-数字零售技术部-业务技术平台的质量保障AI产品开发；有较强质量领域的AI相关产品的设计开发能力，包括不限于大模型Agent应用架构设计、工程实现、系统部署及迭代优化(大模型SFT、中长期记忆增强等)； 2、能参与全球化电商、生态化、中台架构改造升级，解决可测性及系统稳定性保障问题。针对核心项目进行AI智能化的测试策略分析、方案制定、测试用例设计、测试任务执行、风险情况跟进等工作； 3、有一定的AI测试产品规划和设计研发能力。可开发或选型高适配的AI测试工具或者框架，提升整体测试效率和质量； 4、分析项目/团队内流程&实践中存在的痛点问题，提出有效可行的AI结合措施并推动落地实施。