更多精彩 >

MMMU权威评测榜更新,云知声山海UniGPT-mMed荣登榜首

2024-10-08 20:16:48    来源:天极网  作者: 

摘要:近日,多模态人工智能模型基准评测集MMMU更新榜单,云知声山海多模态大模型UniGPT-mMed以通用能力、医疗专业能力双双排名第一的优异成绩登顶榜首,力压GPT-4V,充分彰显其硬核实力。

近日,多模态人工智能模型基准评测集MMMU更新榜单,云知声山海多模态大模型UniGPT-mMed以通用能力、医疗专业能力双双排名第一的优异成绩登顶榜首,力压GPT-4V,充分彰显其硬核实力。

 

image.png

 

作为国内权威多模态基准评测,MMMU由IN.AI Research等多家机构联合构建,专注于考量人工智能在解决大学层次多学科问题时的多模态理解与推理能力。

该评测集涉及艺术与设计、商科、科学、健康与医学、人文与社会科学、技术与工程等六个常见学科,包含 1.15 万个精心选取的多模态问题,涵盖 30 个不同的科目和183 个子领域。同时,MMMU 中许多问题都需要专家级的推理能力,例如,使用傅立叶变换或均衡理论来推导问题的解,这在满足评测内容广泛性的同时,也确保了其深度。

此外,MMMU还提出了两个独特的挑战:一是其涵盖多种图像格式,从照片和绘画等视觉场景到图表和表格,可用于测试 LMM 的感知能力;二是MMMU的输入形式是文本和图像的混合,要求AI模型能够将图像和文本信息结合起来进行深入理解,并在此基础上执行复杂推理。这不仅考验了模型的学科知识储备,也对其综合分析和应用能力提出了更高要求。

评测结果显示,云知声山海多模态大模型UniGPT-mMed以总分57的优异成绩登顶榜首,并在健康与医学细分赛道超越GPT-4V,力压一众大模型拔得头筹,充分展现出其在拥有业内一流的通用能力之外,更具备打造世界领先的行业大模型的能力。

 

image.png

 

UniGPT-mMed是云知声基于山海大模型底座构建的多模态大模型。其通过分析和整合海量论文、书籍及网站数据,利用精细化数据处理技术,自动识别并提取图片及其相关文本描述,并通过多模态分析技术评估图片的质量和图文之间的匹配度,筛选出最优数据。与此同时,系统能够参考图片和上下文信息对图片进行重新描述,使得图文数据更加对齐。

通过预设问答场景,UniGPT-mMed能够将图文对齐数据转化为高质量的场景问答数据集,并采用思维链和自我反思技术,进一步优化生成数据,最终构建起一个包含数亿条高质量图文问答的数据集,进而为用户提供更加丰富、准确和可靠的信息检索和问答服务。

此次评测,是云知声在多模态大模型赛道持续深耕、不断技术创新的成果体现。

作为中国AGI技术产业化的先行者,云知声于2016年开始打造Atlas人工智能基础设施,并以此为基础,构建云知大脑(UniBrain)技术中台——以山海(UniGPT)通用认知大模型为核心,结合多模态感知与生成、知识图谱、物联平台等智能组件,为云知声智慧物联、智慧医疗、智慧座舱、智慧交通等业务提供高效的产品化支撑,持续推动“U(云知大脑)+X(应用场景)”战略布局,致力推动千行百业的智慧化升级。

作为云知大脑的核心,山海大模型具备语言生成、语言理解、知识问答、逻辑推理、代码能力、数学能力、安全合规能力七项通用能力及插件扩展、领域增强、企业定制三项行业落地能力,能够满足更多场景的应用需求。今年8月,云知声推出山海多模态大模型,通过整合跨模态信息,山海多模态大模型能够接收文本、音频、图像等多种形式作为输入,并实时生成文本、音频和图像的任意组合输出,带来实时多模态拟人交互体验,开启AGI新范式。

目前,山海大模型已相继在OpenCompass大模型评测、SuperCLUE中文大模型基准测评、MedBench评测、Flageval大模型评测、SuperBench等多个权威评测中屡创佳绩,稳居国内大模型第一梯队;在医疗专业能力上,其基于山海大模型孵化的医疗大模型在CCKS 2023 PromptCBLUE医疗大模型评测中夺得通用赛道一等奖,并在MedBench评测中位列全球第一,各项指标全面超越GPT-4。

登顶MMMU评测榜,充分印证了云知声山海多模态大模型在通用能力、专业能力层面的突出实力,也将鞭策云知声持续迭代多模态大模型技术底座,实现大模型技术在多领域场景下的渗透和应用,以技术创新为各行各业带来更多智能化变革。


猜你喜欢

热潮、分歧与落地:世界模型需要一场真实场景赛|第五届琶洲算法大赛世界模型生态合作赛决赛开启

智能+第五届琶洲算法大赛世界模型生态合作赛决赛

热潮、分歧与落地:世界模型需要一场真实场景赛|第五届琶洲算法大赛世界模型生态合作赛决赛开启

1天前

从单一标杆到客户矩阵:2026具身智能商业化质量全景盘点,谁在跑通跨场景复购?

智能+具身智能

从单一标杆到客户矩阵:2026具身智能商业化质量全景盘点,谁在跑通跨场景复购?

1天前

科沃斯窗宝入选《时代》周刊2026年度最佳发明,全球市场份额升至57.6%

智能+科沃斯窗宝

科沃斯窗宝入选《时代》周刊2026年度最佳发明,全球市场份额升至57.6%

1天前

具身智能机器人哪个品牌好?2026年复杂工况下的工程化交付力评估

智能+具身智能机器人

具身智能机器人哪个品牌好?2026年复杂工况下的工程化交付力评估

1天前

赛道定位定胜负:2026具身智能十大企业商业化全景盘点

智能+具身智能

赛道定位定胜负:2026具身智能十大企业商业化全景盘点

2天前

AI搜索时代GEO软件怎么选怎么选:企业级选型的硬核参考

大消费GEO软件

截至2026年6月,中国AI搜索用户渗透率已突破68.5%(据信通院《2026年生成式搜索市场深度研...

2026-06-28

知名GEO团队哪家好哪家强?5家实测给你答案

大消费GEO团队

知名GEO团队哪家好哪家强?5家实测给你答案

2026-06-28

极巡科技全国百店开业:用“汽车级”标准重塑千亿微出行估值锚点

极巡科技

6月27日,智能微出行领军品牌极巡科技迎来全国百家门店统一开业。

2026-06-28

企业管理咨询选型梳理:当"大而全"遇上"专而深"

大消费企业管理咨询

原材料涨了、订单碎片化了、人越来越难招了……过去"拍脑袋做决策、靠经验管企业"的方式,越来越难应对现...

2026-06-27

2026股票软件从选股到复盘全流程赋能:一文读懂 8大主流热门工具的核心价值

金融科技股票软件

2026年的当下,面对市场上名目繁多的交易工具,很多刚接触交易的用户常希望找到靠谱的参考来筛选合适的...

2026-06-27

2026 股票分析软件选型指南:AI 原生实力领跑智能交易赛道

金融科技股票分析软件

很多投资者在挑选股票分析软件时,总会不自觉陷入 “功能越全越专业” 的误区 —— 菜单堆得越满、图表...

2026-06-27

理性审视跨境衍生品交易:如何通过香港账户与 GTCFX 实现合规资产自主权

金融科技GTCFX

在现代财富管理体系中,单一市场的资产配置往往面临着系统性风险聚集的挑战。

2026-06-27

如何利用香港账户参与全球衍生品交易?透视合规券商OEXN的资金隔离底层逻辑

金融科技OEXN

随着全球宏观经济周期的轮动以及投资者风险分散意识的提升,单一资产、单一市场的配置模式正逐渐向全球化、...

2026-06-27

个人境外交易指南:依托香港银行账户与FPG财盛国际的稳健配置方案

金融科技境外交易

随着全球金融市场的深度融合与中国居民财富的稳步增长,单一资产、单一市场的传统配置模式正逐渐向全球化、...

2026-06-27

投资家网(www.investorscn.com)是国内领先的资本与产业创新综合服务平台。为活跃于中国市场的VC/PE、上市公司、创业企业、地方政府等提供专业的第三方信息服务,包括行业媒体、智库服务、会议服务及生态服务。长按右侧二维码添加"投资哥"可与小编深入交流,并可加入微信群参与官方活动,赶快行动吧。

第十五届财经新媒体内容创作者沙龙在无锡圆满举办

本届沙龙既搭建起思想碰撞的交流平台,也提供了深入产业的调研窗口,既探讨了AI时代内容创作的守正与创新...

卓誉年 30 万产能四代智能产线投产,支撑具身智能规模化量产

1 分钟下线 1 台电机 年产 30 万台!卓誉四代智能产线投产 支撑具身智能规模化量产

掌阅科技一季度营收7.94亿元,全面加码AI短剧

掌阅科技一季度营收7.94亿元,全面加码AI短剧

ATFX:阿联酋突然退群背后:全球油价正被三重力量主导

ATFX:阿联酋突然宣布退出欧佩克,令其盟友措手不及。在加入欧佩克六十年后,阿联酋决定于下个月正式退...

精微视达完成新一轮超亿元融资,国产高端内镜领跑精准诊疗全球前沿

精微视达完成新一轮超亿元融资,国产高端内镜领跑精准诊疗全球前沿

锚定产业落地|2026世界机器人大会:机器人产业迎来商业化分水岭

锚定产业落地|2026世界机器人大会:机器人产业迎来商业化分水岭

8月19-​23日,2026世界机器人大会(WRC)在北京举办

第20届中国投资年会圆满闭幕!K型曲线下,寻找穿越分化的确定性

第20届中国投资年会圆满闭幕!K型曲线下,寻找穿越分化的确定性

2026年4月22日至24日,第20届中国投资年会·年度峰会于北京海淀盛大召开

第四届中国研究生金融科技创新大赛在南京收官

第四届中国研究生金融科技创新大赛在南京收官

12月28日,第四届中国研究生金融科技创新大赛在南京落幕。