更多精彩 >

MMMU权威评测榜更新,云知声山海UniGPT-mMed荣登榜首

2024-10-08 20:16:48   来源:天极网  作者: 

摘要:近日,多模态人工智能模型基准评测集MMMU更新榜单,云知声山海多模态大模型UniGPT-mMed以通用能力、医疗专业能力双双排名第一的优异成绩登顶榜首,力压GPT-4V,充分彰显其硬核实力。

近日,多模态人工智能模型基准评测集MMMU更新榜单,云知声山海多模态大模型UniGPT-mMed以通用能力、医疗专业能力双双排名第一的优异成绩登顶榜首,力压GPT-4V,充分彰显其硬核实力。

 

image.png

 

作为国内权威多模态基准评测,MMMU由IN.AI Research等多家机构联合构建,专注于考量人工智能在解决大学层次多学科问题时的多模态理解与推理能力。

该评测集涉及艺术与设计、商科、科学、健康与医学、人文与社会科学、技术与工程等六个常见学科,包含 1.15 万个精心选取的多模态问题,涵盖 30 个不同的科目和183 个子领域。同时,MMMU 中许多问题都需要专家级的推理能力,例如,使用傅立叶变换或均衡理论来推导问题的解,这在满足评测内容广泛性的同时,也确保了其深度。

此外,MMMU还提出了两个独特的挑战:一是其涵盖多种图像格式,从照片和绘画等视觉场景到图表和表格,可用于测试 LMM 的感知能力;二是MMMU的输入形式是文本和图像的混合,要求AI模型能够将图像和文本信息结合起来进行深入理解,并在此基础上执行复杂推理。这不仅考验了模型的学科知识储备,也对其综合分析和应用能力提出了更高要求。

评测结果显示,云知声山海多模态大模型UniGPT-mMed以总分57的优异成绩登顶榜首,并在健康与医学细分赛道超越GPT-4V,力压一众大模型拔得头筹,充分展现出其在拥有业内一流的通用能力之外,更具备打造世界领先的行业大模型的能力。

 

image.png

 

UniGPT-mMed是云知声基于山海大模型底座构建的多模态大模型。其通过分析和整合海量论文、书籍及网站数据,利用精细化数据处理技术,自动识别并提取图片及其相关文本描述,并通过多模态分析技术评估图片的质量和图文之间的匹配度,筛选出最优数据。与此同时,系统能够参考图片和上下文信息对图片进行重新描述,使得图文数据更加对齐。

通过预设问答场景,UniGPT-mMed能够将图文对齐数据转化为高质量的场景问答数据集,并采用思维链和自我反思技术,进一步优化生成数据,最终构建起一个包含数亿条高质量图文问答的数据集,进而为用户提供更加丰富、准确和可靠的信息检索和问答服务。

此次评测,是云知声在多模态大模型赛道持续深耕、不断技术创新的成果体现。

作为中国AGI技术产业化的先行者,云知声于2016年开始打造Atlas人工智能基础设施,并以此为基础,构建云知大脑(UniBrain)技术中台——以山海(UniGPT)通用认知大模型为核心,结合多模态感知与生成、知识图谱、物联平台等智能组件,为云知声智慧物联、智慧医疗、智慧座舱、智慧交通等业务提供高效的产品化支撑,持续推动“U(云知大脑)+X(应用场景)”战略布局,致力推动千行百业的智慧化升级。

作为云知大脑的核心,山海大模型具备语言生成、语言理解、知识问答、逻辑推理、代码能力、数学能力、安全合规能力七项通用能力及插件扩展、领域增强、企业定制三项行业落地能力,能够满足更多场景的应用需求。今年8月,云知声推出山海多模态大模型,通过整合跨模态信息,山海多模态大模型能够接收文本、音频、图像等多种形式作为输入,并实时生成文本、音频和图像的任意组合输出,带来实时多模态拟人交互体验,开启AGI新范式。

目前,山海大模型已相继在OpenCompass大模型评测、SuperCLUE中文大模型基准测评、MedBench评测、Flageval大模型评测、SuperBench等多个权威评测中屡创佳绩,稳居国内大模型第一梯队;在医疗专业能力上,其基于山海大模型孵化的医疗大模型在CCKS 2023 PromptCBLUE医疗大模型评测中夺得通用赛道一等奖,并在MedBench评测中位列全球第一,各项指标全面超越GPT-4。

登顶MMMU评测榜,充分印证了云知声山海多模态大模型在通用能力、专业能力层面的突出实力,也将鞭策云知声持续迭代多模态大模型技术底座,实现大模型技术在多领域场景下的渗透和应用,以技术创新为各行各业带来更多智能化变革。


猜你喜欢

华为鸿蒙智家亮相AWE2025高峰论坛,引领未来空间智能化

智能+华为鸿蒙智家

2025年中国家电及消费电子博览会(AWE)在上海新国际博览中心举办,作为全球消费电子与智能科技领域...

6小时前

传统制造数智新生的背后:京东政企业务与厂二代的携手破局

京东智能+

人工智能、民营经济无疑是今年两会期间的焦点话题。

6小时前

VITURE独占美国AR市场52%份额,受邀亮相英伟达AI盛会GTC

智能+VITURE

日前,国际权威数据机构 IDC 发布 2024 年 Q4 美国 AR/VR 市场报告,前五名分别为 ...

4天前

风投机构——Web3革命背后的“造雨者”

智能+Web3

午夜时分,以太坊创始人Vitalik Buterin在ETHWaterloo黑客松现场踱步,身旁是几...

6天前

AI赋能软件测试:2025两会后的智能化革命与行业新机遇

AI技术智能+

2025年两会的召开,人工智能(AI)再次成为各界关注的焦点。

2025-03-14

低利率时代,民生加银鹏程多元配置显身手

金融科技民生加银

自2024年以来1年期、10年期国债收益率的持续下行,分别一度跌破1.0%和1.6%,固定收益类资产...

2025-02-21

原创

腾讯游戏首次接入DeepSeek,《和平精英》引领游戏交互革新

腾讯游戏智能+DeepSeek

腾讯旗下战术竞技手游《和平精英》宣布,将接入DeepSeek,为数字代言人“吉莉”注入人工智能。

2025-02-21

原创

问界M9或将升级新功能,稳居豪华车细分市场销量冠军

新能源问界

2月20日,华为常务董事、终端 BG 董事长、智能汽车解决方案 BU 董事长余承东公布了华为车语系统...

2025-02-21

“网络发展新图景成就展”亮相国博

创新创业中国国家博物馆

由中国国家博物馆、工业和信息化部新闻宣传中心、中国图片社共同举办的“网络发展新图景成就展”,2月20...

2025-02-21

开启全球化新时代,TCL正式成为奥林匹克全球合作伙伴

TCL创新创业

在未来合作中,TCL将在以电视、空调、冰箱、洗衣机等为主的智能终端及面板显示领域,为奥林匹克运动提供...

2025-02-21

阿里与苹果“AI联盟”背后,汇通达网络(9878.HK)的“双重绑定”优势

上市公司汇通达网络

近日,阿里和苹果的“AI联盟”引发关注,被誉为一场教科书式的双赢。

2025-02-21

华仁药业成功中标国家药品集采 加速实施扭亏转盈各项举措

上市公司华仁药业

在最新一轮的国家药品集中采购(集采)中,华仁药业(股票代码:300110)凭借其高质量的产品和具有竞...

2025-02-21

微众银行携手深圳市服务贸易协会举办春茗交流会,与科创企业共话AI赋能产业数智化升级

微众银行创新创业

微众银行科技金融参会代表向大家分享了微众银行特色的数字化企业金融产品服务体系,丰富了企业对于科技金融...

2025-02-21

Sun Life永明扎根香港133周年:以先见行稳健,与香港共绘百年蓝图

创新创业Sun  Life

百年企业,价值不止于商业成就,更在于能否回应时代诉求。

2025-02-21

原创

裁员上万人,又一汽车巨头扛不住了!

新能源汽车德国

难以想象!德国,居然败在了汽车工业上

2025-02-20

投资家网(www.investorscn.com)是国内领先的资本与产业创新综合服务平台。为活跃于中国市场的VC/PE、上市公司、创业企业、地方政府等提供专业的第三方信息服务,包括行业媒体、智库服务、会议服务及生态服务。长按右侧二维码添加"投资哥"可与小编深入交流,并可加入微信群参与官方活动,赶快行动吧。

沙特天空塔投资设立专项基金带领中国氢能独角兽扎根沙特

2016年注册于北京的中氢新能技术有限公司,下设位于大兴的装备制造公司、位于海淀区的技术研究院、材料...

挑战奔驰的明星车企,突然“翻车”了

一度无比高光的理想汽车,猝不及防遭遇重挫。

深圳天使母基金姚小雄:将来股权投资行业竞争是服务能力的竞争

2024年1月10日,由投资家网主办,财经锐眼、有时间协办,北京微金科技有限公司承办的“第十二届股权...

避免卡脖子,硬科技如何“逆境”突围?

2024年1月10日,由投资家网主办,财经锐眼、有时间协办,北京微金科技有限公司承办的“第十二届股权...

VC/PE眼中的“专精特新”

2024年1月10日,由投资家网主办,财经锐眼、有时间协办,北京微金科技有限公司承办的“第十二届股权...

第二届中匈可再生能源、新材料商业投资峰会将盛大启幕

第二届中匈可再生能源、新材料商业投资峰会将盛大启幕

第二届中匈可再生能源、新材料商业投资峰会于2025年4月9日在匈牙利布达佩斯盛大启幕。

雕刻耐心|第18届中国投资年会·有限合伙人峰会在沪召开

雕刻耐心|第18届中国投资年会·有限合伙人峰会在沪召开

“中国投资年会”作为私募股权行业的年度盛会,已成功举办了18届,吸引了全国VC/PE领域从业者的广泛...

雕刻耐心|第18届中国投资年会·有限合伙人峰会即将启幕

雕刻耐心|第18届中国投资年会·有限合伙人峰会即将启幕

2024年的一级市场,“耐心”是最高命题,也引发了持续全年的讨论。

不响不辍|第18届中国投资年会·年度峰会在沪召开

不响不辍|第18届中国投资年会·年度峰会在沪召开

5月8-10日,由投中信息、投中网主办的“第18届中国投资年会·年度峰会”在上海外滩W酒店盛大召开。