字节跳动AI测试开发工程师-飞书技术中台
任职要求
1、计算机或相关专业本科及以上学历； 2、扎实的计算机基础知识，掌握至少一种编程语言（Go、Java、C++、Python）及相应框架环境和常用技术组件； 3、熟悉各种服务端…
工作职责
团队介绍：飞书技术中台是围绕字节跳动飞书产品矩阵所建设的研发团队，一方面助力业务进行AI、搜索等相关前沿技术探索，同时提供安全、数据、架构等基础服务支撑；另一方面也致力于打造行业领先的开放平台、交付（包含私有化）工具平台。以技术为驱动，提升企业内外部的资源利用率、协作效率和创造力。 1、负责飞书知识问答等企业级AI应用质量保障，内容包括但不限于AI产品测试、稳定性、自动化； 2、深入业务主动挖掘产品品质、算法效果、用户体验问题，构建完备的质量防控体系； 3、挖掘质量和效率相关问题，分析并提出明确的改进意见，推动改进落地，提升研发质量和效率； 4、探索大模型时代AI应用质量保障方案，构建符合AI业务特性的质量保障体系。
1、负责飞书创作工具和内容管理类产品的测试开发工作，通过建立系统化的测试技术，推动产品质量不断提高； 2、负责Prompt/Agent/Chain等相关模块的质量保障工作，制定有效的验证机制，评估系统品质、指导相关模块的优化方向； 3、积极参与质量体系规划和建设；完善研发流程中的质量和效率问题，提出明确的改进意见，并推动改进； 4、负责设计、开发质效工具，推动测试技术、工具平台的突破创新。
作为基础模型产品运营专家，我们期待你能以对技术的热情和极强的学习能力，定义运营阵地及核心策略，寻找生态中深度的价值点，将我们的 “手牌”，与外部 AI 社区的持续高涨需求，动态寻找更好更准确的结合点，并持续不断推进品牌心智的建立。此外，由于模型领域的迭代速度，我们需要你持续不断的投入到用户分析，社区反馈，流程问题发现及解决等面向社区和生态的交互层，带回高质量反馈和深度观察，我们期待你： 1. 与产品经理，算法技术团队深度合作，探索运营机会点，负责 AI 基础模型的上线，发版，专项业务的运营规划设定与执行； 2. 对目前模型的能力边界，发展阶段，产品形态等有较为明确的感知和认知，能够与社区算法工程师，开发者，builder 等深度对话并建立信任； 3. 主动使用高效的方式收集用户/客户反馈，发掘关键市场需求及洞见，助力产品功能迭代与测试，跟进上线与推广流程； 4. 连接模型产品与真实用户，定义生态拓展及合作伙伴地图，主动寻找新生态伙伴机遇并形成转化； 5. 能拆解问题，制定详尽运营方案并推进实施，包括文档撰写、用户答疑、FAQ 整理、内容发布、活动运营等； 6. 沉淀 SOP、答疑手册等，落实客户沟通、外部合作与支持事项，保障业务流程顺畅； 7. 管理并指导运营助理执行具体运营任务（如数据采集、运营素材标准化、客户服务、直播支持等）。
团队介绍：字节跳动数据中心与供应链部门，负责字节跳动从芯片到服务器全栈算力基础设施的研发、调度与供给、管理与应用（如数据中心建设、内核操作系统、网络CDN、高性能服务器、编译工具链等），支撑字节跳动全系业务运行的核心力量，为抖音、今日头条、飞书、火山引擎等各类产品提供全面、领先、稳定的百万量级大规模算力基础设施服务。 1、系统软件开发：参与BIOS、BMC固件、Linux内核及操作系统相关模块的开发，解决底层硬件兼容性以及功能扩展问题，实现软硬件一体化集成； 2、系统优化与维护：对BIOS、BMC固件、Linux内核及操作系统进行性能测试、分析、优化，定位并解决系统运行过程中的各类问题，保障系统高效稳定运行； 3、系统监控诊断：设计与实现系统监控诊断相关功能，开发监控工具或模块，实时监测BIOS、BMC固件、Linux内核及操作系统的运行状态，及时发现并预警潜在故障，协助排查和解决系统故障； 4、新技术探索与应用：关注系统软件领域最新技术动态，如人工智能在系统诊断中的应用、系统技术在AI基础设施中的应用等，结合公司业务需求，探索新技术在项目中的可行性，提出创新方案并实践验证。
1、负责飞书AI产品相关的评测工作，包含AI算法的评测体系建设、评测集构建、以及相关评测工程化建设等； 2、负责ASR、MT、NLP等相关领域产品的交付品质，制定合理的验收机制，来评估模型品质，指导模型优化方向； 3、负责AI算法的评测标准和评测流程制定，构建评测集，并推进评测执行，分析评测结果，对模型质量给予充分评估； 4、建设相关评测工具/平台，推动评测工程化和无人化。