您现在的位置是:热点 >>正文
突破瓶颈!上交大与上海AI Lab携手提升多模态大模型反思能力
热点1852233人已围观
简介...
多模态大模型(MLLM)在解决复杂问题方面逐渐展现出强大的潜力。然而,这些模型在处理复杂推突破理时常常显得 “耿直”,缺乏反思能力,导致在面对需要多次尝试的挑战时难以回头。为了解决这一问题,瓶颈上海交通大学与上海人工智能实验室的研究团队推出了一个名为 MM-HELIX 的创新项目,旨在让 AI 学习!上像人类一样进行长链反思性推理。
MM-HELIX 不仅仅是一个项目,更是一个全面的生态系统。团队首先构交大建了一个被称为 “终极考场” 的 MM-HELIX 基准测试,以评估多模态大模型的反思推理能力。这个基准与上测试涉及42种高度复杂的任务,涵盖了算法、图论、谜题和策略游戏等领域。测试结果显示,即便是当前海A最顶尖的模型,准确率依然低迷,特别是在多模态输入下,表现更为惨淡。这一结果无疑强调了提升 AII 反思能力的重要性。
为帮助多模态大模型更好地学习反思,研究团队还打造了一个名为 MM-HELIX-1La00K 的数据集,包含10万个高质量样本,旨在通过 “步骤启发式响应生成”(SERG)流程来教会模b携型如何进行反思和复盘。此过程大幅缩短了解题时间,并有效减少了不必要的冗余思考。
此外,团队还提手提出了一种自适应混合策略优化算法(AHPO),作为智能导师,帮助模型在学习过程中逐渐从依赖专家指导转升多向自主探索。这种动态教学机制让模型在不断提高准确率的同时,也能够培养独立思考的能力。
经过这一系列创模态新,搭载 MM-HELIX 的 Qwen2.5-VL-7B 模型在基准测试中准确率提升了18.6%。这一大模进步不仅突破了原有模型的瓶颈,还展现出反思能力的强大泛化性,证明了该项目对 AI 发展的重大意义。
Tags:
相关文章
甲骨文大跃进背后:与 OpenAI 的 3000 亿美元巨额合同揭示未来风险
热点甲骨文(Oracle)最近的股价飙升让人惊叹,单日涨幅超过40%,创始人拉里・埃里森一度登顶全球首富。这一切的背后,似乎隐藏着一份惊人的秘密:甲骨文的业绩增长几乎全部依赖于与 OpenAI 签订的30...
【热点】
阅读更多百度搜索推出 AI 短剧平台,开启公测助力创作者
热点10月16日,百度搜索正式宣布其 AI 短剧生成平台的公测上线。这一平台旨在通过亿元创作基金和百亿流量的支持,全面提升创作者的内容创作能力,助力他们实现长久的 IP 变现。 该平台具备自动生成和人机协...
【热点】
阅读更多图书馆借阅应用强推AI功能引众怒!读者和图书管理员集体抵制
热点一场关于AI是否应该介入传统阅读体验的激烈争论正在图书馆界上演。知名电子书和有声书借阅应用Libby刚刚宣布推出AI驱动的新功能"启发我",然而这一看似贴心的升级却意外地招致了读者和图书管理员们的强烈...
【热点】
阅读更多