更多精彩 >

MMMU权威评测榜更新,云知声山海UniGPT-mMed荣登榜首

2024-10-08 20:16:48   来源:天极网  作者: 

摘要:近日,多模态人工智能模型基准评测集MMMU更新榜单,云知声山海多模态大模型UniGPT-mMed以通用能力、医疗专业能力双双排名第一的优异成绩登顶榜首,力压GPT-4V,充分彰显其硬核实力。

近日,多模态人工智能模型基准评测集MMMU更新榜单,云知声山海多模态大模型UniGPT-mMed以通用能力、医疗专业能力双双排名第一的优异成绩登顶榜首,力压GPT-4V,充分彰显其硬核实力。

 

image.png

 

作为国内权威多模态基准评测,MMMU由IN.AI Research等多家机构联合构建,专注于考量人工智能在解决大学层次多学科问题时的多模态理解与推理能力。

该评测集涉及艺术与设计、商科、科学、健康与医学、人文与社会科学、技术与工程等六个常见学科,包含 1.15 万个精心选取的多模态问题,涵盖 30 个不同的科目和183 个子领域。同时,MMMU 中许多问题都需要专家级的推理能力,例如,使用傅立叶变换或均衡理论来推导问题的解,这在满足评测内容广泛性的同时,也确保了其深度。

此外,MMMU还提出了两个独特的挑战:一是其涵盖多种图像格式,从照片和绘画等视觉场景到图表和表格,可用于测试 LMM 的感知能力;二是MMMU的输入形式是文本和图像的混合,要求AI模型能够将图像和文本信息结合起来进行深入理解,并在此基础上执行复杂推理。这不仅考验了模型的学科知识储备,也对其综合分析和应用能力提出了更高要求。

评测结果显示,云知声山海多模态大模型UniGPT-mMed以总分57的优异成绩登顶榜首,并在健康与医学细分赛道超越GPT-4V,力压一众大模型拔得头筹,充分展现出其在拥有业内一流的通用能力之外,更具备打造世界领先的行业大模型的能力。

 

image.png

 

UniGPT-mMed是云知声基于山海大模型底座构建的多模态大模型。其通过分析和整合海量论文、书籍及网站数据,利用精细化数据处理技术,自动识别并提取图片及其相关文本描述,并通过多模态分析技术评估图片的质量和图文之间的匹配度,筛选出最优数据。与此同时,系统能够参考图片和上下文信息对图片进行重新描述,使得图文数据更加对齐。

通过预设问答场景,UniGPT-mMed能够将图文对齐数据转化为高质量的场景问答数据集,并采用思维链和自我反思技术,进一步优化生成数据,最终构建起一个包含数亿条高质量图文问答的数据集,进而为用户提供更加丰富、准确和可靠的信息检索和问答服务。

此次评测,是云知声在多模态大模型赛道持续深耕、不断技术创新的成果体现。

作为中国AGI技术产业化的先行者,云知声于2016年开始打造Atlas人工智能基础设施,并以此为基础,构建云知大脑(UniBrain)技术中台——以山海(UniGPT)通用认知大模型为核心,结合多模态感知与生成、知识图谱、物联平台等智能组件,为云知声智慧物联、智慧医疗、智慧座舱、智慧交通等业务提供高效的产品化支撑,持续推动“U(云知大脑)+X(应用场景)”战略布局,致力推动千行百业的智慧化升级。

作为云知大脑的核心,山海大模型具备语言生成、语言理解、知识问答、逻辑推理、代码能力、数学能力、安全合规能力七项通用能力及插件扩展、领域增强、企业定制三项行业落地能力,能够满足更多场景的应用需求。今年8月,云知声推出山海多模态大模型,通过整合跨模态信息,山海多模态大模型能够接收文本、音频、图像等多种形式作为输入,并实时生成文本、音频和图像的任意组合输出,带来实时多模态拟人交互体验,开启AGI新范式。

目前,山海大模型已相继在OpenCompass大模型评测、SuperCLUE中文大模型基准测评、MedBench评测、Flageval大模型评测、SuperBench等多个权威评测中屡创佳绩,稳居国内大模型第一梯队;在医疗专业能力上,其基于山海大模型孵化的医疗大模型在CCKS 2023 PromptCBLUE医疗大模型评测中夺得通用赛道一等奖,并在MedBench评测中位列全球第一,各项指标全面超越GPT-4。

登顶MMMU评测榜,充分印证了云知声山海多模态大模型在通用能力、专业能力层面的突出实力,也将鞭策云知声持续迭代多模态大模型技术底座,实现大模型技术在多领域场景下的渗透和应用,以技术创新为各行各业带来更多智能化变革。


猜你喜欢

2025我国AI核心产业将破万亿,现存相关企业超491万家

天眼查智能+

2025我国AI核心产业将破万亿,现存相关企业超491万家

1天前

商汤全面出击,冲在「AI 国产化」第一线

商汤智能+

如果说 2025 年年初最火爆的 AI 话题是 DeepSeek R1,那么近日横空出世的「摩尔线程...

2天前

智能融合・协同共赢 | 卓益得全球合作伙伴大会暨张江机器人谷生态论坛圆满举办

智能+张江机器人谷生态论坛

本次论坛的成功举办,正是张江机器人谷全链条产业生态与创新生态的集中体现。

4天前

鸿蒙电脑专业版发布,智能安全开启企业办公效率新篇章

华为智能+

12月11日,华为正式公布两项鸿蒙电脑新进展——华为擎云 HM740以及鸿蒙电脑专业版操作系统发布。

2025-12-11

iRobot深陷危机或易主中国,国内现存机器人相关企业超102.2万家

天眼查智能+

iRobot深陷危机或易主中国,国内现存机器人相关企业超102.2万家

2025-12-10

原创

难以想象!200亿国产巨头,把传感器做到了世界第一

新能源新能源汽车

中国传感器巨头称霸世界,要上市了!

2025-07-24

原创

茶叶巨头冲击IPO,又失败了

八马茶业

豪门联姻难助茶叶巨头IPO?

2025-07-24

中博聚力斩获CFS机构大奖,双赛道布局彰显"真一新"力量

金融科技中博聚力

2025年07月16日-17日,以“穿越变革浪潮,共筑经济韧性”为主题的CFS 第十四届财经峰会暨2...

2025-07-24

林氏木业家具怎么样?大数据+综艺植入打造年轻化家居品牌

大消费林氏家具

在娱乐内容蓬勃发展的当下,综艺节目已成为品牌营销的重要阵地。

2025-07-24

上市公司俱乐部成功举办「并购与上市实战营」,助力企业资本化转型

金融科技上市公司俱乐部

月11日至12日,由上市公司俱乐部主办,铭辰集团、东虹桥中心、初华资本等9家顶级机构联合协办的「并购...

2025-07-24

豫见中国郎,首场县级郎酒品牌日落地中牟

大消费郎酒

7月20日,“2025中牟郎酒品牌日”在河南中牟召开。中国郎七大战略产品盛装亮黄河之滨,近600名商...

2025-07-24

百度法律智能体&北京知识产权保护协会「携手律师走进百度」活动顺利举行!

智能+百度法律智能体

2025年7月22日,一场汇聚科技与法律智慧的盛会在北京百度总部拉开帷幕。

2025-07-24

文创礼品万亿赛道在此聚合!2025北京礼品展打造七大主题商机

大消费文创礼品

伴随文化消费市场持续升温,文创产业正成为经济增长新引擎。

2025-07-24

“科技追光之旅”登陆杭州,阳光新能源共赴新能源电站科普盛宴

新能源阳光新能源

盛夏,户外热浪翻涌,而杭州低碳科技馆内却人潮涌动,一场别开生面的暑期科技之旅正在这里举行。

2025-07-24

投资家网(www.investorscn.com)是国内领先的资本与产业创新综合服务平台。为活跃于中国市场的VC/PE、上市公司、创业企业、地方政府等提供专业的第三方信息服务,包括行业媒体、智库服务、会议服务及生态服务。长按右侧二维码添加"投资哥"可与小编深入交流,并可加入微信群参与官方活动,赶快行动吧。

京杭对话:杭州,凭什么吸引北京创新企业?

京杭对话:杭州,凭什么吸引北京创新企业?

从一张精准的产业蓝图,到一个敏捷的创新操作系统,再到一片丰沃的赋能土壤,杭州的生产性服务业正在这条路...

第19届中国投资年会·有限合伙人峰会在沪成功举办

第19届中国投资年会·有限合伙人峰会在沪成功举办

11月27日,由投中信息和投中网主办的第19届中国投资年会·有限合伙人峰会在上海举办。

“京杭聚势,共启新篇”:招商新路径,奏响区域协同发展强音

“京杭聚势,共启新篇”:招商新路径,奏响区域协同发展强音

在区域经济协同发展的大背景下,京杭两地的经济协作正以一种全新的姿态加速推进。

第19届中国投资年会·有限合伙人峰会即将在沪启幕

第19届中国投资年会·有限合伙人峰会即将在沪启幕

作为中国股权投资领域备受瞩目的年度盛会,第19届中国投资年会·有限合伙人峰会定于2025年11月26...

投资家网主办:“智造未来-人工智能与机器人”专场路演成功举办

投资家网主办:“智造未来-人工智能与机器人”专场路演成功举办

投资家网联合深圳市龙岗区人工智能(机器人)署于9月28日联合主办“智造未来——人工智能与机器人”专场...