作为算力基础设施,竞购英伟达高端显卡芯片已经成了一种“抢跑游戏”。而决定AI大模型创业公司成败的要素之一,“就是你到底有没有能力调动最起码100张以上的英伟达显卡。”一家AI创业公司负责人对「市界」表示。
像卖爱马仕一样卖芯片今年以来,大模型和AI2.0既是最火热的创富梦,也越来越成为一个昂贵的“权力的游戏”。在技术、资本、人才等构建出的种种门槛中,还有一张重要的入场门票——你有没有“门路”能搞到足够的英伟达高端显卡。
王非是华东地区一家服务器定制企业的销售部经理,他向「市界」描述了最近英伟达显卡的紧俏程度:“需求太火爆,有些人从机房里把芯片禁运政策生效前购买的A10080GB拆出来倒卖。”这些旧芯片不只没有保修,相比于去年8月前后8万多元的单价,价格还涨到了10万多元。
即便已经旧货拆卖、物尽其用,显卡的供应还是严重不足。“需要拿现款去,对方才愿意卖给你。”而相对显存较小、训练效率低的A10040GB即便有全新的,也乏人问津。“询价的多,成交的少。”
具体而言,这批抢手的显卡指的是英伟达旗下的“Tesla”系列产品。在训练AI大模型时,比传统CPU更高效的GPU(图形处理器,又称显示芯片),尤其是高端GPU一芯难求。
2020年和2022年,英伟达先后推出了A100芯片、H100芯片,其中A100显卡又提供80GB、40GB两个显存版本,H100则提供80GB显存。显存越大,所能运行的神经网络也就越大。
2022年9月开始,美国禁止英伟达等向中国出口高端GPU芯片。为应对禁运政策,英伟达又在2022年和2023年分别推出了特供中国版的显卡A800和H800。
不过如今,在政策允许范围内的A800芯片,在市场上也出现了供货周期拉长、价格上浮的现象。王非透露:“在大模型火爆之前,A800大概两周即可到货。但现在我跟客户保守估计要在8周内,即便是最乐观的情况,也需要4-6周。”
供职于北京一家显卡分销企业的郭丽婕对「市界」表示:现在公司的A800单卡报价为8.75万元,已经超出了A800在2022年11月时8万-8.5万元的价格区间。而且,8.75万元只是实时报价,显卡还有继续涨价的趋势。“我告诉客户确定要了再找我聊,现在的库存也不多。”
另一家位于深圳的显卡供应商,则给A800开出了8.95万元的报价——更高的溢价意味着等待时间较短,需要大约两周的货期。
作为算力基础设施,竞购英伟达高端显卡芯片已经成了一种“抢跑游戏”。而决定AI创业公司成败的要素之一,“就是你到底有没有能力调动最起码100张以上的英伟达显卡。”一家AI创业公司负责人对「市界」讲到。
他透露:“在去年8月之前,通过国内正规渠道,还能买到A100显卡,也可以采购海外版A100。在此之后,国内A100被切断了货源,从海外采购海关也不会放行。”
不过那些允许被特供中国的A800和H800芯片对于紧缺算力的AI中小公司而言,同样是遥不可及。
王非透露:“一般来说英伟达的货先到国内总代,再被我们这类厂家分走,销售给做AIGC项目的客户。目前H800虽然已经发售,预计单卡售价会在20万起,也没有进入我们这一级市场。现在能拿到H800的,应该只有阿里云、腾讯云这种有资格从英伟达原厂直接采购的大厂商。”
在市场紧俏的背景下,H800等高端芯片已经提前被大厂包揽。目前,国内仅有腾讯云官宣“用上”了H800。4月14日,腾讯云发布了基于H800的大规模算力集群,并将其定义为H800的“全国首发”。
据《晚点LatePost》了解,字节今年向英伟达订购了超过10亿美元的GPU,仅字节一家公司今年的订单可能已接近英伟达去年在中国销售的商用GPU总和。大公司的合作方式主要是和英伟达原厂直接谈采购,能否抢到卡,更多是看商业关系,比如以往是不是英伟达的大客户。
而在庞大的需求面前,据传英伟达甚至开始学起了爱马仕,在购买抢手的GPU时,也需购买其它产品作为取得优先供应权的“配货”。
在这场大模型研发竞速赛中,相比超级大厂,更多小玩家只能先把名字写进等待名单。而无论哪一方历经荡涤、最终胜出,作为算力供应者的英伟达都能稳拿订单,笑到最后。
黄仁勋的运气有多好?在商界一直有一种说法:当淘金者蜂拥而至时,获得财富就变成了小概率事件。最后挣到钱的,更可能是站在淘金者身边“卖铲子”的人。
一位科技赛道的投资人对「市界」回忆:在前几年的AI行业资本寒冬中,“泡沫破灭时,投资人和企业突然意识到,(算法创业)成本极高,都是在亏钱,反而让上游赚钱了。”
而在AI这个近年来最大的科技风口面前,英伟达便是那个第一批站在上游、得以幸运“起飞”的公司。
在今年5月举办的英伟达业绩电话会上,英伟达创始人、总裁兼CEO黄仁勋直言:今年1月以来出现的新产品需求“不可思议地陡峭”,公司订单“多到难以置信”。
不仅市场对英伟达产品疯狂竞逐,资本也展现出了慷慨的态度。5月30日,英伟达成为全球首家市值突破万亿美元的芯片设计商。
当有记者向黄仁勋提问:“(在新一轮AI浪潮中)英伟达获得的丰厚回报是因为运气,还是因为有先见之明?”黄仁