蚂蚁金服蚂蚁集团-大模型评测工程师-蚂小财
任职要求
1.本科及以上学历，计算机相关专业，计算机&金融交叉学科优先; 2.Java/python编程扎实，具备大型分布式系统开发及架构经验； 3.有股票、财富管理相关背景优先考虑，有大模型应用…
工作职责
1.负责智能理财助理相关质量保障工作，拆解评估对象，深入评估模型，设计评测指标，制定评测方案，自动化评测能力建设及指标解读归因； 2.建设通用的基于大模型场景下的模型评估体系、评测框架及基础评测能力的建设，包括评测集完备性，合理性建设，评测结果智能化判定。
1.以大模型为代表的AI技术能力的建设和优化，打造业界领先的AI技术系统。主要职责包括AI系统结构设计，大模型训练数据构建，大模型能力评测，大模型推理效果和效率优化等； 2.紧密跟踪、探索大模型方向前沿技术，依托丰富且体系化的业务生态，实践大模型等AI技术在金融领域的应用与落地。 3.负责智能理财助理-蚂小财的产品研发，为上亿用户提供专业有温度的智能理财服务； 4.负责系统架构规划与设计，技术难题攻关，解决各类潜在系统技术风险，保障系统的安全、稳定、快速运行。
1.负责以大模型为代表的AI技术能力的建设和优化，打造业界领先的AI技术系统，主要职责包括后训练、大模型训练数据构建、大模型能力评测、大模型推理效果和效率优化、RAG等； 2.参与金融智能相关项目的算法设计与开发，包括但不限于智能理财助理蚂小财、股票、金融供给、金融Copilot、投研及投顾观点生成等； 3.负责金融大模型（如知识注入、对齐等）算法的研究和应用落地； 4.紧密跟踪、探索大模型方向前沿技术，依托丰富且体系化的业务生态，实践大模型算法的创新应用与落地，鼓励并支持将技术研究成果沉淀为论文和专利。
1、负责大模型（包括不限于T2V、I2V、MLLM模型）评测工作和评测体系建设，包括设计制定和完善评测方案、评测指标、评测数据收集和更新、评测执行，并输出专业评测报告； 2、参与评测相关自动化评测工具开发及维护，最大化提高评测效率； 3、以算法手段，对基座大模型和AI Native应用进行分阶段、端到端评测； 4、参与构建评测Agent工具链、对战平台、模型竞技场、模型效果判别模型、应用数据飞轮等工具链建设； 5、站在用户角度，对产品、算法发提出建设性的意见，在评测参与的各个流程中以用户视角保证产品体验。
1、以算法视角，参与快手大模型（包括不限于LLM，T2I，T2V、I2V、MLLM模型）评测工作和评测体系建设； 2、参与评测相关自动化评测工具开发及维护，最大化提高评测效率。