字节跳动多模态算法工程师-医疗大模型

1. 基于多模态大模型，设计并实现医疗险两核智能体架构，支持对话文本、病历图片、医疗票据等多源异构数据的统一理解与推理。 2. 负责多模态大模型在智能核保、智能核赔、两核咨询场景的微调、对齐与优化。 3. 负责模型线上效果评估、AB实验、推理性能优化，保障高并发、高稳定性的业务落地。 4. 跟踪多模态大模型、医疗AI、智能体前沿技术，推动技术创新在医疗险两核场景落地。

整体岗位描述：负责结合自然语言处理（NLP）和计算机视觉（CV）技术，开展微表情分析、心理疾病诊疗、欺诈识别等模型研发工作。参与设计和实现多模态大模型，推动技术在情感计算、金融风控、心理健康等领域的应用。 1.负责多模态算法的研究与开发，包括但不限于微表情识别、情绪分析、心理疾病诊疗、金融风控等； 2.结合NLP和CV技术，设计和实现跨模态数据融合算法，如文本与图像的联合建模； 3.与团队协作，推动算法模型在实际场景中的落地应用； 4.关注前沿技术动态，探索多模态技术在心理健康、金融风控领域的创新应用。

团队介绍 蚂蚁集团CRO线全面风险管理部，致力于搭建适配整个集团各业务板块发展的敏捷、有效的全面风险管理体系。从集团层面提升并完善公司的风险治理体系框架，以科技驱动搭建集团智能化风险能力和内控管理能力，为公司管理团队提供全面风险视角下的决策支持，助力业务可持续健康发展。 1、深入理解业务及AI风险，设计研发智能化风险感知算法能力； 2、负责公司战略级业务蚂蚁医疗健康大模型的风险管理； 3、积极探索大模型等前沿技术在风险管理场景应用落地。

-主要负责健康医疗业务的策略研发工作，提升大语言模型的应用效果。 -积极探索多模态大模型等前沿技术领域并结合业务落地。 -预训练和微调大语言模型，基于医疗健康行业数据，训练更适合业务需求场景的大语言模型。 -建设医疗健康行业的大模型知识库，带领团队完成数据处理加工，知识体系化及数据飞轮基础设施建设。