京东大模型测试开发工程师
任职要求
1. 计算机或相关专业本科及以上学历；
2. 熟悉Java或Python语言，熟悉性能测试，有AI相关工作经验者优先。
3. 具备很强的逻辑思维能力、问题分析和处理跟进能…工作职责
1. 负责项目全流程质量保证，包括需求分析、参与系统设计，制定测试计划、设计和执行测试用例，自动化用例开发，产品进度&风险把控，缺陷跟踪及定位、协助开发解决问题 2. 负责或带领其他测试开发工程师执行项目测试，合理制定测试计划，保证产品发布质量 3. 通过持续的测试流程和方法创新，利用工程化、体系化的思路方法，构建成熟稳定的质量保证体系，提升研发过程的质量和效率 4. 研究探索前沿技术，改进工具链，提高测试覆盖、有效性和效率，降低维护成本。
1、测试策略设计：制定大语言模型（如QWEN、Deepseek、GPT等）的测试计划，覆盖功能、性能、安全等维度，设计 prompts 测试用例，评估模型在多样化场景下的响应质量（如事实性、逻辑性、无害性）； 2、自动化测试开发：构建自动化测试框架，支持模型迭代的高效验证（如基于Pytest、LangChain、评估指标体系等）； 3、跨团队协作：与工程团队合作提出优化建议，推动模型性能优化。
大装置智能云，支撑从云基础设施到大模型服务的完整产品体系。 欢迎加入测试开发团队，与我们一起打造下一代 AI 基础设施质量标准。 参与商汤大装置智能云核心产品的质量保障，包括： 1. 云平台方向（Cloud） · 云服务、容器平台（K8s）、网络/存储服务的功能与稳定性测试 · 自动化测试、接口测试、性能测试、系统级测试 2. 算力平台方向（Compute） · 多集群 GPU/NPU 算力池、调度平台的测试开发 · 压测、稳定性测试、异常场景验证 3. 大模型平台方向（AI Infra / MaaS） · 大模型推理、训练、评估平台的测试 · 模型性能测试、多模态模型验证、推理链路端到端自动化 4. 测试自动化，CI/CD 方向 · 测试框架、测试工具开发 · CI/CD 构建链路优化与集成 我们会根据你的能力与兴趣匹配到最合适的产品线。
1. 负责大模型训练、推理、评测、部署等核心链路的质量保障体系建设。 2. 设计并实现自动化评测框架，支持多维度（如准确性、一致性、安全性、推理速度等）的模型能力评估。 3. 构建高质量、可扩展的评测数据集，制定科学、可量化的评测标准与指标体系。 4. 推动CI/CD流程在大模型工程中的落地，保障模型迭代的稳定性与可回溯性。 5. 主导Bad Case分析闭环机制，联动算法、工程与业务团队优化模型表现。
1. 负责大模型训练、推理、评测、部署等核心链路的质量保障体系建设。 2. 设计并实现自动化评测框架，支持多维度（如准确性、一致性、安全性、推理速度等）的模型能力评估。 3. 构建高质量、可扩展的评测数据集，制定科学、可量化的评测标准与指标体系。 4. 推动CI/CD流程在大模型工程中的落地，保障模型迭代的稳定性与可回溯性。 5. 主导Bad Case分析闭环机制，联动算法、工程与业务团队优化模型表现。