十万个冷笑话2

超节点、超集群、TPU方案涌现 算力“拼系统”时代产业最关心Token性价比|WAIC观察_我的网站

整蛊专家

一 |     财联社7月21日讯(记者 付静)“我们真正关注的是Token性价比:在保证模型效果和服务质量的前提下,以更低的综合成本生成更多高质量Token。

二 | 据《北京时间》1月9日报道,第一批登上火星的宇航员面临的最大障碍之一是缺水。人们需要水来喝,农作物需要水来生长,甚至制造火箭燃料返回地球。因此,缺乏可用的液态水是人类登陆火星的主要障碍。但是火星上有很多冰。美国宇航局的一项新研究表明,我们可以在冰上钻孔,以获得足够的水来维持火星上的人类生命。”2026世界人工智能大会(WAIC)期间,云天励飞-U(688343.SH)方面在接受财联社记者采访时表示。去年,在火星表面下发现了冰川,这一重大发现为第一批宇航员登陆火星提供了“取之不尽,用之不竭”的水。研究人员说,在火星上的8个地方发现了地下冰川,有些位于地表以下几英尺(1米)的深处,还有一些位于地表以下100米或更深处。研究人员分析了火星勘测轨道飞行器收集的数据,发现地下冰川的成分“几乎是纯冰”。

三 |          当下,模型层面训推规模迈向万卡,应用侧C端多款智能体涌现,AI进化为生产生活“搭子”,B端的人工智能真实场景落地也在加速。美国宇航局的一项研究模拟了钻冰和融化冰从冰川中取水的过程。在这些需求的带动下,产业链频频传递出“算力供不应求”信号。         财联社记者多方采访获悉,算力进入“拼系统”时代,构建超节点、超集群已经成为主流做法,且收获了下游各行业的积极反应。德克萨斯州航空航天公司(Aerospace Corporation)的高级执行官斯蒂芬霍夫曼(Stephen Hoffman)领导的研究人员说:“火星表面曾经有很多水,但现在人们一致认为火星表面非常干燥。几项研究表明,火星的许多地方都有丰富的水资源,包括那些被认为是人类在火星上登陆的替代着陆点的地方。与此同时,TPU路线正在同步发力,华东地区首座国产TPU千卡智算集群已经落成。如果这些水资源可以用于载人登陆火星,那么执行这些任务的方式将发生巨大变化。研究小组考虑使用一个名为罗德井的水库,这个水库是在20世纪60年代发明的,并被用于在偏远地区提供水源,例如阿蒙森-斯科特南极勘测站。多种方案涌现背后,产业最关心的则是Token性价比。研究小组写道:“对现有的从地下冰川中提取水的技术进行评估,我们发现了一种可以从火星中提取水的技术:在火星冰川覆盖的表面上钻孔,加热冰以形成地下水库。”罗德井的原理是从表面钻孔,钻孔进入冰中,通过融化冰形成一个水库,然后从水库中提取水。         “超节点是未来几年重点方向” 下游已给出积极反应          WAIC期间,华为昇腾950超节点(Atlas 950 SuperPoD)真机、超节点集群Atlas 950 SuperCluster、首个全国产十万卡AI超集群曙光8000(登峰)真机、燧原科技与中兴通讯(000063.SZ)联合打造的正交架构方案“云燧ESL64-O”超节点、阿里云磐久AL128超节点服务器、沐曦股份-U(688802.SH)新一代AI超节点曦景S600、摩尔线程-U(688795.SH)MTT C256超节点、壁仞科技(06082.HK)分布式解耦架构超节点方案、百度智能云超节点“天池”等格外吸睛。

四 |          华为昇腾950超节点 图片来源:财联社记者/摄          “云燧 ESL64-O”超节点 图片来源:受访者供图          中兴超节点方案 图片来源:受访者供图          中国电子云则发布了自研的翎枢6020轻量型、翎枢6032平衡型、翎枢6064性能型三款超节点产品。         中国电子信息产业集团有限公司首席科学家、中国电子云总工程师朱国平介绍,翎枢超节点将千百张GPU融合为单一逻辑超级单卡,通过Tbps级超高带宽、百纳秒级超低时延、统一内存编址提升算力释放效率。通过不断加热储液罐,可以获得稳定的液态水。

五 | 翎枢超节点覆盖20-64卡黄金算力区间,相比其他超节点方案,优势在于成本更低、生态开放,可兼容现有风冷、液冷机房。在火星上,一口罗德井一天能产生380升的水。         云天励飞方面也告诉财联社记者,公司未来三年计划推出DeepVerse100P、DeepVerse100D和DeepVerse100L三款芯片,分别针对Prefill、Decode Attention和Decode FFN进行优化,未来在此基础上构建面向万卡异构集群的分离式AI推理基础设施。这相当于美国人每天人均用水量,但大约是国际空间站宇航员用水量的10倍。         财联社记者采访获悉,产业链下游已对超节点、超集群产品有了积极反应。研究人员说,火星探测器可以改装成具有钻井能力。根据最近在《科学》杂志上发表的一篇文章,尽管冰在火星上早已为人所知,但更好地了解冰的深度和分布对于未来载人登陆火星至关重要。中科曙光(603019.SH)方面提供的数据显示,曙光8000集群正式上线首周即需求爆满,应用满载运行,目前日均处理作业数突破15万个,单日处理作业峰值超过50万个。亚利桑那大学月球和行星实验室的研究员肖恩·伯恩说:“水对任何地方的人来说都是必不可少的,随身携带是非常不方便的。截至目前,曙光8000已完成近千项超智融合应用适配,覆盖大模型训练、高通量推理、科学计算等多个万卡级规模场景。         上线后快速满载,意味着科研机构、企业和开发者对超大规模、高质量算力的现实需求正在加速释放,也表明十万卡级算力已开始持续承接更加广泛的科研和产业任务。”“以前,我们设想在火星上获取水的方法是从空气或岩石中获取水,”伯恩说。         据悉,曙光8000采用全球首创的高密度机柜结构,单个计算单元算力密度较其他超节点提升20倍,在有限空间内实现更高算力部署;自研scaleFabric类IB原生RDMA高速互连技术,实现十万卡规模稳定互连。

六 |          另据媒体报道,华为昇腾384超节点目前已商用落地750多套,规模应用于互联网、运营商、金融、教育、医疗、交通、制造等行业。现在,我们想象从火星表面以下的冰中获取水。不需要高科技的解决方案,只要一桶水就够了。水源靠近火星上的人类登陆点,而不是极地。火星南半球和北半球有地下冰川,纬度在55到58度之间。研究人员认为,这些冰川形成相对较晚,因为其表面相对平坦,没有受到其他天体撞击形成的撞击坑。冰川靠近极地地区,火星上的冬天非常寒冷,不适合人类长期生存。         一位算力从业者告诉财联社记者,内部连接是超节点及算力集群发展面临的核心问题。

七 | 但是,如果能在这些冰川上钻一口井,研究人员将对火星气候的演变和生命的可能性有一个很好的了解。“超节点架构、超节点内部的连接,这可能是我们现在包括未来几年重点(攻克)方向,核心是要解决GPU或TPU之间高速互联的问题,通过交换芯片提供单个节点大容量,比如可以提供64卡、128卡这种超大规模的连接,在这个基础上组建更大的千卡、万卡集群。”          据悉,在AI算力基础设施与数据中心网络架构中,Scale-Up、Scale-Out和Scale-Across分别为三种不同层次的扩展模式:Scale-Up(纵向扩展)聚焦于超节点内部的紧密耦合,Scale-Out(横向扩展)侧重于集群之间的规模扩张,Scale-Across(跨域互联)则致力于数据中心之间的广域协同,旨在打破单数据中心的物理极限。         “Scale-Out相对来说更成熟,Scale-Up的挑战更大,这是我们要重点解决的。现在单个GPU Scale-Up领域的带宽都达到TB的级别,单交换机的交换容量可能要达到100T以上。

八 | 解决了这个问题之后,才能组成大规模的集群。

九 | 大规模集群要为芯片解决的,就是把极限带宽提高。”前述从业者介绍。

十 |          财联社记者也从中兴通讯方面获悉,针对AI大模型规模化落地的网络升级要求,其构建的智能算力网络底座,主要聚焦Scale-Out机间网络(优化单集群内部通信效率,实现稳定降本、调优增效)与Scale-Across跨域互联(实现跨数据中心、跨地域的算力资源高效调度)两大核心场景。         TPU路线同步发力 产业最关心Token性价比          除了近几年持续热门的GPU路线,财联社记者还了解到,杭州电信、中兴通讯与中昊芯英联合打造了华东地区(杭州)首座国产TPU千卡智算集群,该集群亦是中国电信体系内首个大规模国产TPU集群部署项目。         “选择做千卡集群而不是万卡集群,是因为我们想把它做成试验田。我们先把千卡级的软件栈系统集成到千卡集群上,在Token Factory上能提供不错的服务,在服务逐步做透的情况下逐步开展二期、三期。未来,我们也希望逐步从千卡向万卡集群迈进,在万卡集群上运行国产模型的训练推理,而且满足所有商用需求所需要的性价比。”中昊芯英创始人、CEO杨龚轶凡告诉财联社记者。

十一 |          谈及GPU与TPU两条路线如何选择,中国电信杭州分公司智算中心总经理王良表示,“并不见得每个芯片都是全能选手,不同芯片在不同场景下有独特的长处,比如TPU擅长做张量运算,我们评估推理能力是TPU的长处。

十二 | ”          王良还介绍,“上述TPU千卡集群落地后运行得很好,尤其是今年的Token风口起来以后,市场上对Token的需求量很大。最近(我们)和中昊芯英测试完PD分离,这一技术把TPU的优势进一步放大,已经比较满足当初的设计目标。”          据悉,该集群基于“泰则®”智算平台构建,将面向大模型训练、AI推理、科学计算等场景提供全自主算力支撑,该集群二期规划今年9月上线投产。

十三 | “          王良进一步谈到,调优将是一项非常重要的工作。他介绍,“现在所有的大模型厂商、芯片厂商,都是拿出百米冲刺的速度在跑马拉松,芯片厂商每年都会发布一个新版本,而大模型厂商每个季度都会发一个新版本,这里面的适配工作量是很大的。我们在持续的调优工作中发现,从年初到现在,TPU集群通过调优实现了超过10倍的效率提升。原来每百万Token的成本如果是100元,现在就差不多能降到10元以下。

十四 | ”          WAIC期间,多位受访的算力产业人士均谈及了Token成本问题。         对于模型厂商、AI应用企业和算力运营方而言,真正影响商业化效率的是在一定时间和成本条件下,能够稳定生成多少有效Token。

十五 |          财联社记者另从AI基础设施及智算云提供商九章云极方面了解到,AI从技术竞赛迈向规模交付,主要面临四个核心卡点:算力成本高企、多芯片计价割裂、GPU利用率困于30%红线、研发缺乏标准化体系。         据悉,九章智算云在全球范围内已部署12个数据中心,算力总规模约22 EFLOPS,配备6600余张GPU卡,具备日产64亿词元(Token)的生产能力。从产出量看,DeepSeek-V4是当前产出最大的模型,日产24.5亿TOKEN,占比38%,随后依次为KIMI 2.5、Qwen-3.5、GLM-5、MiniMax-2.5。其弹性算力体系,已使得某头部模型厂商的项目综合成本最高节省了82.1%。         云天励飞方面则告诉财联社记者,降低Token成本是一项系统工程,从底层的IP、EDA、芯片设计和封装测试,到服务器、互联、软件栈和算力平台,再到模型及应用,各环节都会影响最终的Token生成效率。

十六 |          据了解,目前国内主流大模型的公开API价格已明显分层。根据不同模型能力和服务方式,常规文本模型的输入价格大致为每百万Token几角钱至十余元,输出价格大致为每百万Token一两元至数十元。         “现在的问题不是将百万Token成本价格从2毛降到1毛,更多的是提升Token价值,这是算力基建和模型要协力解决的问题。如果价值的问题可以解决,定价2块或10块大家都不觉得贵。”前述算力从业者也表示。         (财联社记者 付静)。

Current article:http://9aip.ningshunsaotuiqiao.shop/news/20260826_5729567.html

Published on:04:09:00


用户评论
用户名:
E-mail:
评价等级:               
评价内容: