蚂蚁金服研究型实习生-超长多模态理解模型
任职要求
研究领域： -目前正在攻读计算机科学或相关STEM领域的学士,硕士或博士学位 -具有一种或多种通用编程语言的经验,包括但不限于: Java,C/C ++ 、Python、JavaScript或Go -具有上述研究领域的相关经验,包括行业经验或作为参与实验室研究 优先录用： -对技术研究充满热情,具有产生新思想和创新的能力; 在自学,问题分析和解决方面表现出色 -在国际会议上或核心期刊发表一份或多份出版物或论文 -至少3个月的全职工作
工作职责
研究领域： 人工智能 项目简介： 在当今信息爆炸的时代，长文本的处理能力成为了学术界和工业界的研究热点，尤其是大语言模型（LLM）在这一领域的广泛应用。然而，许多现存的长文档、书籍和网页并不仅仅以文本的形式呈现，它们通常还包含着丰富的其他模态信息，如图表、图像、视频等。这些信息往往以图文混合的形式整合在一起，带来了更为复杂的理解和分析挑战。同时，它们的长度也不是现有的VLM可以处理得。 本研究课题旨在探讨如何增强大语言模型对超长多模态信息的理解能力，以便其能够更加准确地响应用户的问题。
研究领域： 人工智能 项目简介： 随着数字化转型加速，安全领域积累了大量超长复杂数据，如多模态接口流量、细粒度行为日志等，其单条数据长度常达数万字符，且蕴含专业领域知识与隐蔽风险特征。传统机器学习模型受限于语义理解能力不足，面临风险误判率高、上下文关联断裂等瓶颈。尽管大语言模型展现出卓越的认知推理潜力，但在处理超长安全数据时仍存在注意力漂移、关键信息丢失等问题，导致风险检测准召率下降。本项目聚焦大模型在安全场景下的长文本处理边界突破，通过创新数据表征与推理架构，构建适配安全领域特性的超长数据处理范式，为提升安全威胁的智能化研判提供技术支撑。
专注于文档理解、推理、生成大模型的研究、探索和开发，具体职责包括： 1、通过研究长文本压缩算法、multi-agent协同、long cot、数据自动合成技术等提升超长文本、多文档能力； 2、通过研究PPO、DPO、RFT、GRPO等强化学习技术，提升文档大模型的推理能力、复杂指令遵循和泛化性； 3、研究文档创作技术，提升大模型的写作、纠错、改写、仿写、风格化、长文本输出、字数遵循等创作能力； 4、研究多模态文档解析和理解技术，提升多模态文档细粒度理解、多模态多页长文档、多模态复杂推理等技术； 5、研究面向法律行业文档理解和推理关键技术。
1. 负责提升电商B2B场景下，多模态大模型对用户超长个性化上下文建模能力。 2. 负责基于强化学习提升大模型多步骤工具调用能力，实现亿人亿面用户仿真能力。 3. 构建大模型的角色扮演能力，构建高保真用户模拟器及评估体系，提升Agent训练效率。 4. 负责LLM的前沿技术探索，沉淀可复用的垂域Agent体系化构建方案。
你将从事的领域 西门子数字化工业集团是数字化和自动化的技术创新者，致力于为人类当下以及未来的美好世界，打造可持续的工业创新。作为工业领域值得信赖的数字化转型合作伙伴，我们与客户共同创造，帮助他们变得更加智能、互联，用无限的数据节约有限的资源。我们通过引入前沿技术如数字孪生、工业元宇宙、工业人工智能等不断推动中国工业，向前、向新、向绿，书写由“制造”向“智造”再到“质造”的创新故事。加入我们，共赴数字化与可持续发展的明日世界！ 从Sales 100加速职业成长 Sales 100项目培养面向数字化工业未来的复合型人才，是倾注组织核心资源着力打造的品牌培训生项目。自2005年创立至今，Sales 100项目紧跟西门子科技快速发展步伐，持续升级迭代，至今已成功举办25届，培养700余名优秀毕业生，成就了大批高素质复合型人才。在Sales 100项目一年期带薪脱产培训中，你将与来自全国各地的同期学友一起学习和体验到： -百年企业文化及先进管理理念 -西门子数字化工业的前沿科技 -制造业各类型行业知识与经验 -先进制造业项目真实场景实习 -商业意识与市场研究分析开发 -商业演讲及高效沟通组织协作 -统化学习能力及成长型心智 -个人职场发展优势及必备技能 没有初入职场的无所适从，无需担心工作岗位的技能缺失，不必忧虑职场人际的复杂与挑战……Sales 100项目将为你提供强大而专业的支持团队，涵盖培训项目组、业务部门、成长导师、技术团队、人力资源、管理层、外聘讲师等，给予学员全方位的支持与辅导，帮助每一位应届生入职后快速转变、自信成长、不断超越。 我的工作职责是什么？ 初心：我们发现，为客户，为西门子，为这个世界，去缔造更美好未来的初心，是支持我们改变自己，追求卓越的永恒动力。 职责：我们需要与客户共同创造，提供专业的数字化企业解决方案，帮助客户变得更加智能、互联，助力西门子在工业领域成为客户值得信赖的数字化转型合作伙伴。 在纷繁复杂的业务生态圈中，西门子数字化工业集团的销售人员扮演着4种重要角色： • 客户顾问：从宏观环境、市场机遇、最新技术等角度为客户提供全方位的信息、建议，激发客户需求； • 客户伙伴：通过建立信任、共建生态、共同成长等，与客户及其利益相关方建立并维持长期稳定的合作关系； • 客户共创者：通过方案共创、携手创新，协作共进，协同客户实现可持续发展； • 客户赋能者：助力客户成为行业驱动者，共同探索新的领域，协同描绘愿景，赋能客户，共同缔造美好未来。 你将成为“数字化工业”的懂行人，“数字化企业解决方案”的提供者，客户值得信赖的“亲密伙伴”；一名具备“成长型心智”，通过持续学习与挑战，不断突破自我、拓宽边界、提升思维，又能有效使用持续增强的影响力赋能自己，也赋能他人的复合型人才。