字节跳动AI测试开发工程师-飞书技术中台
任职要求
1、计算机或相关专业本科及以上学历； 2、扎实的计算机基础知识，掌握至少一种编程语言（Go、Java、C++、Python）及相应框架环境和常用技术组件； 3、熟悉各种服务端测试方法，比如性能压测、自动化等； 4、自驱能力强，对项目质量负责，能主动发现问题，推动质量持续改进； 5、对AI充满好奇心、有较强的动手能力，能及时关注和学习业界最新技术。
工作职责
团队介绍：飞书技术中台是围绕字节跳动飞书产品矩阵所建设的研发团队，一方面助力业务进行AI、搜索等相关前沿技术探索，同时提供安全、数据、架构等基础服务支撑；另一方面也致力于打造行业领先的开放平台、交付（包含私有化）工具平台。以技术为驱动，提升企业内外部的资源利用率、协作效率和创造力。 1、负责飞书知识问答等企业级AI应用质量保障，内容包括但不限于AI产品测试、稳定性、自动化； 2、深入业务主动挖掘产品品质、算法效果、用户体验问题，构建完备的质量防控体系； 3、挖掘质量和效率相关问题，分析并提出明确的改进意见，推动改进落地，提升研发质量和效率； 4、探索大模型时代AI应用质量保障方案，构建符合AI业务特性的质量保障体系。
1、负责飞书创作工具和内容管理类产品的测试开发工作，通过建立系统化的测试技术，推动产品质量不断提高； 2、负责Prompt/Agent/Chain等相关模块的质量保障工作，制定有效的验证机制，评估系统品质、指导相关模块的优化方向； 3、积极参与质量体系规划和建设；完善研发流程中的质量和效率问题，提出明确的改进意见，并推动改进； 4、负责设计、开发质效工具，推动测试技术、工具平台的突破创新。
作为基础模型产品运营专家，我们期待你能以对技术的热情和极强的学习能力，定义运营阵地及核心策略，寻找生态中深度的价值点，将我们的 “手牌”，与外部 AI 社区的持续高涨需求，动态寻找更好更准确的结合点，并持续不断推进品牌心智的建立。此外，由于模型领域的迭代速度，我们需要你持续不断的投入到用户分析，社区反馈，流程问题发现及解决等面向社区和生态的交互层，带回高质量反馈和深度观察，我们期待你： 1. 与产品经理，算法技术团队深度合作，探索运营机会点，负责 AI 基础模型的上线，发版，专项业务的运营规划设定与执行； 2. 对目前模型的能力边界，发展阶段，产品形态等有较为明确的感知和认知，能够与社区算法工程师，开发者，builder 等深度对话并建立信任； 3. 主动使用高效的方式收集用户/客户反馈，发掘关键市场需求及洞见，助力产品功能迭代与测试，跟进上线与推广流程； 4. 连接模型产品与真实用户，定义生态拓展及合作伙伴地图，主动寻找新生态伙伴机遇并形成转化； 5. 能拆解问题，制定详尽运营方案并推进实施，包括文档撰写、用户答疑、FAQ 整理、内容发布、活动运营等； 6. 沉淀 SOP、答疑手册等，落实客户沟通、外部合作与支持事项，保障业务流程顺畅； 7. 管理并指导运营助理执行具体运营任务（如数据采集、运营素材标准化、客户服务、直播支持等）。
1、负责飞书AI产品相关的评测工作，包含AI算法的评测体系建设、评测集构建、以及相关评测工程化建设等； 2、负责ASR、MT、NLP等相关领域产品的交付品质，制定合理的验收机制，来评估模型品质，指导模型优化方向； 3、负责AI算法的评测标准和评测流程制定，构建评测集，并推进评测执行，分析评测结果，对模型质量给予充分评估； 4、建设相关评测工具/平台，推动评测工程化和无人化。
1、负责飞书AI产品相关的稳定性保障工作，深度参与飞书知识问答业务，能够了解业务完整链路，识别全链路上的稳定性风险，建立稳定性保障体系，推动稳定性建设落地； 2、负责AI算法的评测标准和评测流程制定，包含AI算法的评测体系建设、评测集构建、以及相关评测工程化建设等； 3、负责持续建设相关工具/平台，推动稳定性建设/评测工程化和无人化。