更多精彩 >

清华系团队给大模型织了一张“智能算力电网”

2026-06-05 11:55:12    来源:公众号 QbitAI  作者: 

摘要:AI芯片,正在机房里猛猛吃灰。

允中 发自 凹非寺
量子位 | 公众号 QbitAI

AI芯片,正在机房里猛猛吃灰。

海外高端GPU供不应求、又贵又难买;

国产芯片产能好不容易上来了,结果是「能用但不好用」,生态不全、适配难、推理优化门槛高,大量国产卡就这么空转着,电费照烧,却产不出一颗能用的Token。

企业想用AI,偏偏卡在了最不该卡的环节,算力

所有人都在比谁的模型参数更大,但真正决定AI能不能落地的,其实是另一件没那么性感的事:一颗Token,能不能被稳定、便宜、规模化地生产出来。

死磕这件事的,是一支从中国超级计算体系里走出来的年轻团队,是石科技

img

AI生成

这家公司成立于2021年,由国家超级计算无锡中心的核心科研团队联合组建,是国内最早将超算智算并行优化的技术进行产业化的团队之一。

名字取自“实事求是,甘为基石”,寄托着创始团队对算力基础设施地位的深刻认知。其创始人兼董事长闫博文,出生于1993年,毕业于清华大学,是清华计算机系博士后。

这家公司瞄准的是通过自主研发的并行优化技术,将高性能计算(HPC)与人工智能计算深度融合,专治各种异构算力资源调度的“疑难杂症”。

在他们看来,现在的AI行业根本不需要再多一个算力转租平台,要打破国产算力空转的僵局,必须彻底跳出传统租赁的浅层模式。

是石科技给出的解法直击本质:

紧扣“Token标准化、国产化、效率提升”这三件事,直接重构算力变现路径,重磅打造国产TOKEN调优工厂。

大模型也有了算力“电网”:插上插头,算力秒变Token产能

是石科技TOKEN工厂的第一层技术底座,来自异构算力的全域整合与深度国产化适配。

区别于行业常见的单一算力资源模式,是石科技搭建了全域异构算力资源池,全面兼容NVIDIA GPU、国产AI芯片(包括昇腾、昆仑芯、天数、太初、瀚博半导体等),以及云厂商算力、边缘算力等多源渠道。

通过智能调度与弹性扩缩容技术,实现算力资源的统一纳管、智能分配与动态扩容,让企业不再受困于“算力采购难、资源碎片化”。

img

AI生成

打个比方,这就像一张“全域智能电网”。

过去每家工厂只能用自己的发电机(单一算力),买不到柴油就停产,发电机坏了就瘫痪。

是石科技则类似于搭建了一张覆盖全国的算力网络,把各地的风电、水电、火电、太阳能电(各种算力)全部接入统一电网

企业需要用电时,只需“插上插头”,电网就会自动调度、分配与你需求最匹配的电给你,你完全不用关心电是从哪个具体的电网节点送过来的。

更关键的是,是石科技团队完成了主流国产AI芯片的深度适配与专项优化,打通了框架适配、算子兼容、通信优化、性能调优全链路

img

AI生成

在这张电网的“变电与稳压”作用下,原本闲置、难调通的国产算力,在这里能被高效转化为稳定、可用、低成本的标准化Token推理产能

通过不断提升算力利用效率,以及充分利用闲时的算力,或者根据客户需求定制专属算力资源,国产Token就可以真正变成可商用的产能优势。

对此,一位长期从事AI基础设施的工程师评价说:

过去我们买了国产卡,总要花几个月去调驱动、改框架、修bug。是石科技把这条路铺好了。国产卡不再是“摆设”,而是真正能跑生产的引擎。

把芯片性能榨干到极限:吞吐暴涨50%,Token成本硬砍40%

如果说算力池化是底座,那么推理优化就是TOKEN工厂的核心技术壁垒。

是石科技团队深耕高性能计算领域多年,在严格恪守企业级SLA服务标准的前提下,从算子、内存、调度、解码等全维度进行技术革新。

CUDA Kernel算子级优化、PagedAttention内存优化、Continuous Batching连续批处理、混合精度推理……这些技术被系统性地部署在TOKEN工厂的生产线上。

配合FlashAttention、推测解码、KV Cache精细化管理、模型并行(TP/PP)等前沿加速方案,GPU等国产芯片的资源利用率大幅提升,Token吞吐总量显著增加,单位Token生产成本大幅下降。

更重要的是,传统推理中常见的延迟抖动、TTFT与TPOT波动等问题得到了有效控制——

Token生成变得高效、稳定、高品质。实测数据显示,在同等算力条件下,是石科技的推理优化方案可将吞吐量提升30%-50%,单位Token成本降低40%。

img

AI生成

治好“宕机焦虑”:99.9%高可用,把推理做成不断电流水线

规模化的Token生产,不能建立在脆弱的单点算力之上。

是石科技构建了一套多Provider互补与容灾体系:

  • 资源互补:流量峰值时自动弹性扩容;

  • 技术互补:接入特定模型和技术能力(如超低延迟、多模态)

  • 区域互补:跨地域部署,降低延迟,满足各行业合规要求。

自动Fallback故障切换机制,搭配“自有集群承载主要流量、合作伙伴集群兜底容灾”的流量分配模式,彻底规避单点算力故障导致的业务中断风险。

img

AI生成

99.9%的高可用性服务保障,让Token的规模化生产、调度、输出全程稳定可控。

想象一下飞机引擎的“多冗余设计”,即便一台引擎失效,其他引擎能够自动补位,飞机照常飞行。

是石科技相当于给AI推理服务装了三套引擎——包括自己的引擎、合作伙伴的引擎、备用引擎。

哪怕其中一套突然熄火,系统会在0.1秒内自动切换到另一套,用户完全感知不到。

从技术上看,这已经不是渐进式的改良,而是从“算力资源”到“优质Token产能”的价值跃迁。

当前,国产AI算力替代进程持续提速。

标准化、可量产、低成本的Token产能,已成为AI产业落地的核心生产资料。

是石科技的目标已经明确:

建成中国最大、技术最先进、服务最完善的国产TOKEN调优工厂。

让千行百业降低AI落地门槛,让国产算力生态真正实现规模化、高质量发展,推动中国AI产业迈入工业化、标准化的全新阶段。

当行业还在追逐单一模型的精度时,是石科技选择了一条更有挑战但更具长期价值的道路——

做夯实AI推理底座的工厂,做可进化、可复用、可普惠的Token生产力平台。

这条路投入更大、周期更长、协调更复杂。

但一旦走通,它改变的将不只是某一家企业的推理成本,而是整个适合中国AI产业高效发展的国产算力生态。


猜你喜欢

万亿赛道分水岭:中国具身智能第一梯队10强落定,大湾区领跑

智能+中国具身智能

从央视春晚机器人集体亮相,到达沃斯论坛上中国具身智能代表向全球分享类脑架构,再到工厂、零售、生物制药...

11小时前

聚焦大模型成本与稳定性,中关村科金发布全新 MaaS 服务体系

智能+中关村科金

随着生成式AI在全球范围内加速渗透,Token正在成为衡量大模型应用规模与成本结构的核心单位。

3天前

广东省委副书记、省长孟凡利莅临树根科技调研人工智能产业发展

智能+树根科技

7月6日,省委副书记、省长孟凡利到广州市调研部分人工智能企业,强调要认真落实广东加快推进新型机电一体...

4天前

“十五五”布局下的产业追问:具身智能如何跨越数据与量产鸿沟?

智能+具身智能

从春晚舞台到机器人马拉松,从一级市场融资持续升温到国家"十五五"规划前瞻布局,具身智能与人形机器人正...

4天前

情感智能新突破:一眸科技构建人类身心情智维度专属“世界模型”

智能+一眸科技

近日,笔者实地探访了专注于情感与认知AI的前沿公司——一眸科技。

5天前

春日经济:赏花热带动消费潮,现存赏花经济相关企业超811万家

大消费天眼查

春日经济:赏花热带动消费潮,现存赏花经济相关企业超811万家

2026-04-01

天眼查荣膺 2026 年度中国独角兽企业,以数据科技赋能新质生产力

独角兽天眼查

3 月 29 日,2026 中关村论坛年会全球独角兽企业大会在北京盛大召开,大会权威发布 2026 ...

2026-04-01

中小学春假研学游升温,现存研学相关企业超2.5万家

大消费天眼查

中小学春假研学游升温,现存研学相关企业超2.5万家

2026-04-01

AI新农机“小而精” 助力高效种田,现存AI相关企业超509万家

天眼查智能+

AI新农机“小而精” 助力高效种田,现存AI相关企业超509万家

2026-04-01

赏花经济:从景观流量到产业价值的生态革新之路

大消费天眼查

春日回暖,繁花次第绽放,赏花经济作为季节性消费的重要引擎,正从单一的自然景观观赏,演变为融合生态、文...

2026-04-01

农机发力春耕,现存农业机械相关企业超286万家

大消费天眼查

农机发力春耕,现存农业机械相关企业超286万家

2026-04-01

数字消费券激活养老大市场,现存养老相关企业超41.7万家

大消费天眼查

数字消费券激活养老大市场,现存养老相关企业超41.7万家

2026-04-01

AI赋能家电产业焕新升级,现存家电相关企业超2254万家

大消费天眼查

AI赋能家电产业焕新升级,现存家电相关企业超2254万家

2026-04-01

我国充电设施突破2100万大关,现存充电桩相关企业超91万家

大消费天眼查

我国充电设施突破2100万大关,现存充电桩相关企业超91万家

2026-04-01

外卖低价战被监管收场,现存外卖相关企业超378万家

大消费天眼查

外卖低价战被监管收场,现存外卖相关企业超378万家

2026-04-01

投资家网(www.investorscn.com)是国内领先的资本与产业创新综合服务平台。为活跃于中国市场的VC/PE、上市公司、创业企业、地方政府等提供专业的第三方信息服务,包括行业媒体、智库服务、会议服务及生态服务。长按右侧二维码添加"投资哥"可与小编深入交流,并可加入微信群参与官方活动,赶快行动吧。

掌阅科技一季度营收7.94亿元,全面加码AI短剧

掌阅科技一季度营收7.94亿元,全面加码AI短剧

ATFX:阿联酋突然退群背后:全球油价正被三重力量主导

ATFX:阿联酋突然宣布退出欧佩克,令其盟友措手不及。在加入欧佩克六十年后,阿联酋决定于下个月正式退...

精微视达完成新一轮超亿元融资,国产高端内镜领跑精准诊疗全球前沿

精微视达完成新一轮超亿元融资,国产高端内镜领跑精准诊疗全球前沿

优选空天科工在阿联酋设立总部,正式进入中东市场

中东已成为中国一些知名公司的投资热土。

第20届中国投资年会圆满闭幕!K型曲线下,寻找穿越分化的确定性

第20届中国投资年会圆满闭幕!K型曲线下,寻找穿越分化的确定性

2026年4月22日至24日,第20届中国投资年会·年度峰会于北京海淀盛大召开

第四届中国研究生金融科技创新大赛在南京收官

第四届中国研究生金融科技创新大赛在南京收官

12月28日,第四届中国研究生金融科技创新大赛在南京落幕。

京杭对话:杭州,凭什么吸引北京创新企业?

京杭对话:杭州,凭什么吸引北京创新企业?

从一张精准的产业蓝图,到一个敏捷的创新操作系统,再到一片丰沃的赋能土壤,杭州的生产性服务业正在这条路...

第19届中国投资年会·有限合伙人峰会在沪成功举办

第19届中国投资年会·有限合伙人峰会在沪成功举办

11月27日,由投中信息和投中网主办的第19届中国投资年会·有限合伙人峰会在上海举办。