蚂蚁金服蚂蚁集团-多模态AI风控算法工程师-杭州
任职要求
1.扎实的ML/DL基础,熟悉主流深度学习框架与多模态大模型技术栈,具备一定工程能力与模型训练/部署经验;
2.对电商/短剧内容风控场景有兴趣,具备良好的逻辑思维,能快速理解…工作职责
1.主导多模态风控系统的分层架构演进,合理组合经典ML、LLM与Agent技术,设计弹性处理链路,平衡高并发推理成本与长尾难题识别效果; 2.构建面向商品/音视频的模型训练体系,设计Prompt自迭代、SFT/RL对齐及Harness Agent架构;建立badcase驱动的模型自优化机制,持续提升隐性风险识别与自动化演进能力; 3.设计数据闭环与Rubric评估体系,打通风险策略与算法的双向转化;作为技术Owner推动端端落地,建立灰度验证与效果回溯机制,实现算法与策略运营的协同进化。
1、深度参与 Apache Paimon 湖格式核心架构设计与研发,推动开源生态发展,致力于打造全球领先的全模态湖仓企业级产品; 2、深度参与多模态数据湖的设计与推广,并协同各大计算引擎,包括AI相关推理与训练生态进行对接与全链路的研发; 3、积极参与 Apache Paimon 开源社区核心贡献与标准制定,推动版本演进,携手社区共建前沿技术,提升影响力; 4、深度参与DLF湖仓产品的研发与能力建设,对接内外部客户对湖仓的需求,抽象总结为产品技术能力,支撑大规模企业级应用场景。
参与阿里云MaaS平台多模态AI搜索系统的核心算法研发,致力于打造行业领先的下一代智能搜索体验,构建新一代跨模态检索引擎与智能问答体系,赋能云上企业客户与生态开发者。 你需要参与以下一个或多个方向的工作: 1、多模态表征与排序模型优化:参与研究和开发业界领先的多模态表征模型与重排序模型,提升海量图文、视频等多模态数据检索在复杂业务场景下的准确性与相关性; 2、多模态检索增强生成(mRAG)链路优化:参与实际场景的多模态RAG链路的核心算法攻坚,包括多模态Query理解、跨模态意图识别、复杂文档解析(如PDF/图表混合检索)及最终的多模态内容生成; 3、长视频理解模型优化:参与研发高效的长视频搜索范式,攻克超长序列下的长程依赖难题,提升模型对视频深层语义的捕捉能力及复杂场景下的视频问答质量。落地的核心目标与指标。
参与大规模多模态模型(VLM)和大型语言模型(LLM)的数据飞轮研发工作,包括: ①多模态数据处理、标注与向量抽取流程搭建; ②参与模型推理加速、特征向量抽取、模型对齐与效果评估编写和维护Python代码,用于数据读取、模型调用、可视化和统计; ③支持embedding数据库(如FAISS/Milvus)的基础流程 参与模型分析,包括hidden states、attention、logits对比协助完成实验报告与技术文档;