夸克千问C端事业群-大模型智能化评测专家-杭州/深圳/上海
任职要求
1. 3-5 年测试工作经验，有多模态算法/大模型/音视频/图像算法等之一工作背景，有服务端算法测试、大模型评测，数据集构造等测试经验； 2. 具有自然语言处理、计算机视觉、语言大模型、多模态大模型、大模型评测、AIGC等相关经验优先； 3. 能够主导大型项目的整体测试工作，包括测试分析、测试用例落地、…
工作职责
1. 负责智能互联多模态算法测试，熟悉算法工程全链路评测，可以独立设计如图像处理算法（如目标检测、图像识别、OCR等）的评测方案，数据集，评测工程等，确保算法精度与性能符合需求； 2. 建设通用的基于大模型场景下的模型评估体系、评测框架及基础评测能力的建设，包括评测集完备性，合理性建设，评测结果智能化判定，能够基于业务需求设计评测方案，开展多维度模型评估，输出专业评测报告； 3. 追踪大模型方向前沿进展，积极主动地学习和探索新的评测及分析的方法和技术。主导项目全链路质量保障和风险识别工作，搭建质量技术保障体系、制定质量保障规范、推进测试工作执行； 4. 协同项目中多角色、多合作团队形成积极有效的沟通和互动，驱动问题解决，保障交付质量。主动创新，通过技术手段解决质量保障工作中的复杂技术问题，提升测试效能、加深质量工作技术积累。
1、高效承接大模型文本、图片、视频等数据标注业务需求，独立承担标注策略制定、项目管理、流程优化、质量把控等工作； 2、对优质内容有一定的判断力和敏感度，能够基于业务数据，进行模型效果监控、评估、分析、反馈，并推动模型优化链路迭代，打造数据飞轮，对模型进行内容改进策略建议； 3、与上下游产品技术通力合作，制定有效的数据策略，推进大模型效果提升和产品化目标达成； 4、同时统筹多个标注/评测项目的管理工作，负责外包、众包人员的组织与协调，推动项目成功交付； 5、 熟悉AI产品，对大模型行业发展及产品动态有充分认知，并能有效应用到实际业务。
阿里巴巴智能信息事业群，聚焦AI在信息服务赛道的创新应用，从工具到服务，持续为用户提供高效、智能的AI应用。智能信息事业群核心产品为夸克、通义、UC浏览器、书旗小说、超级汇川等，以多产品矩阵，覆盖横跨各年龄段的7亿+用户人群，服务超10万+客户。 我们，捍卫阿里智信产品的用户体验！ 我们，梦想做世界级的高效质量团队！ 我们，推行担当、创新、共赢的文化！ 五新战略下的复杂业务场景执行的正确性， 新零售下的千亿级别交易链路的丝般顺滑， 云智能下的用户数字化转型的顺利稳定， 每一个产品背后是我们对完美的坚持！ 云服务、AI算法、IoT等测试方法的创新， 自动化、无人值守、故障演练等测试产品的发展， 用例自动生成，大模型自动化评测，全链路定位分析等AI测试的落地， 每一次测试升级背后需要我们不破不立的勇气！ 来吧，加入我们吧！一起做新时代下世界领先的技术质量人~~
阿里巴巴智能信息事业群，聚焦AI在信息服务赛道的创新应用，从工具到服务，持续为用户提供高效、智能的AI应用。智能信息事业群核心产品为夸克、通义、UC浏览器、书旗小说、超级汇川等，以多产品矩阵，覆盖横跨各年龄段的7亿+用户人群，服务超10万+客户。 负责智能信息基础技术平台系统相关研发，包括不限于以下方向： 1、构建高效可靠的云原生容器平台、提出资源优化模型以提升业务资源效率、参与机器学习工程平台的建设和优化，以及运用技术和标准化方案确保平台服务的稳定性和可维护性。 2、负责开发和优化大模型应用开发框架，创造高效的搜索应用解决方案，并深度参与智能信息系统的基础架构与组件开发，以确保技术的高效集成与实际落地。 3、开发和优化搜索引擎，高并发检索、大数据分布式存储及流批计算等系统，深入搜索业务需求设计实现解决方案，不断提高业务性能、系统稳定性，提升系统效率和成本效益。 4、开发和优化推荐引擎、模型预测和向量检索等基础系统，深入参与信息流推荐业务以实现业务需求，同时基于业务洞察设计新平台或改进现有系统，提升系统效率和成本效益。 5、开发和优化实验平台与系统，紧跟AB测试技术前沿，为业务提供精准的实验设计和分析、优化关键指标，并应用算法提高业务参数寻优的效果和效率。 6、具备数理统计基础，在数据科学、数据分析方向有经验者优先。
阿里巴巴智能信息事业群，聚焦AI在信息服务赛道的创新应用，从工具到服务，持续为用户提供高效、智能的AI应用。智能信息事业群核心产品为夸克、通义、UC浏览器、书旗小说、超级汇川等，以多产品矩阵，覆盖横跨各年龄段的7亿+用户人群，服务超10万+客户。 如果你想加入到业界最先进的文本及多模态大模型的训练和Agent应用相关的项目中； 如果你想参与内容数据的采集、存储及处理，支持大模型训练语料及AI搜索业务数据供给； 如果你想接触世界领先的大数据处理与应用的技术和平台，获得大数据浪潮之巅的各类大牛的指导； 那就加入我们吧！