太仓网站建设,太仓网络公司,太仓网站制作,太仓网页设计,网站推广-昆山云度信息科技有限公司太仓网站建设,太仓网络公司,太仓网站制作,太仓网页设计,网站推广-昆山云度信息科技有限公司

广西大学唐纪良主任科员,广西大学唐记良

广西大学唐纪良主任科员,广西大学唐记良 新订单12月才能交付!英伟达GPU持续缺货涨价 客户“勒紧裤带”节约使用

  在持续已久的“AI热潮”中,各家争相推出的大模型、AI应用,都进一步推升了对算力(lì)狂热的需求。本周已有(yǒu)报道指(zhǐ)出英伟达后续(xù)对(duì)AI顶(dǐng)级规格芯(xīn)片需(xū)求明显看增,紧(jǐn)急向台(tái)积(jī)电追加预订先进封装(zhuāng)产能(néng)。

  需求飙(biāo)涨下,英伟(wěi)达GPU价(jià)格自然也是水涨船高。据集微网消息(xī),有代理商透露(lù),英(yīng)伟达(dá)A100价格从去年12月开始上涨(zhǎng),截至(zhì)今(jīn)年(nián)4月上半月,其5个月(yuè)价格(gé)累计涨幅(fú)达到37.5%;同期A800价格(gé)累计涨幅达20.0%。

  同时,英伟达GPU交(jiāo)货(huò)周期(qī)也(yě)被拉(lā)长,之前拿(ná)货周期大约(yuē)为一(yī)个月,现(xiàn)在基(jī)本都(dōu)需要三(sān)个(gè)月(yuè)或更(gèng)长(zhǎng)。甚至,部分新订单“可能要到12月才能(néng)交付(fù)”。

  供需(xū)的巨(jù)大鸿沟面前,在这(zhè)一情形之下(xià),众多客户也不得不(bù)“勒紧腰带”。上述文章指出,国内可用(yòng)于训练(liàn)AI大模型(xíng)的(de)A100大约有4万-5万(wàn)个,供(gōng)应相当吃(chī)紧,一些(xiē)云服务厂商已严格限制内部使(shǐ)用这些(xiē)先进芯片,以将其保留至(zhì)需要强(qiáng)力运(yùn)算的任务。

  值得一提的(de)是,类(lèi)似的(de)事(shì)情(qíng)在微软内部也早(zǎo)已发(fā)生(shēng)。3月已(yǐ)有外(wài)媒报道(dào)指出,微(wēi)软内部陷(xiàn)入(rù)AI服务器硬件短缺(quē)的窘境,不得不对AI硬件资源采(cǎi)取“配(pèi)额供给(gěi)”机制,限制公司(sī)内部(bù)其他AI工具开发团队的(de)资(zī)源用量。

  拉(lā)长时间线来(lái)看,有GPU业(yè)内人(rén)士指出,实际(jì)上从去年6月起,英(yīng)伟达就已(yǐ)宣布上调A100价格(gé),涨幅(fú)20%左右,渠(qú)道商在加(jiā)紧囤货(huò)。至于英伟达A800,在ChatGPT火爆之(zhī)前就已出现涨价,但反映(yìng)到市场则有一定的滞后性,赶上(shàng)ChatGPT爆(bào)火这(zhè)一时(shí)间点,更放大了这(zhè)一现象。

  “英(yīng)伟达(dá)GPU涨价与(yǔ)ChatGPT有一定的关联性,且(qiě)交货周(zhōu)期也受到(dào)了(le)连带的影响(xiǎng),导致市(shì)场上出(chū)现了众(zhòng)多炒卡的行为。”

  此外,在(zài)海(hǎi)外电(diàn)商平台上,英伟达(dá)新旗舰级GPU H100的价格在4月中(zhōng)旬就已炒到了(le)超(chāo)过(guò)4万美元(yuán)。

  随着如今各(gè)家(jiā)科(kē)技巨头争相推出(chū)自家大模型,GPU需求量仍在持续(xù)攀升(shēng)。OpenAI指出,AI大模(mó)型要持续取得突破,所需要消耗的计算资源每(měi)3~4个月就(jiù)要翻一倍,资金(jīn)也(yě)需要通过指数级增长获得匹配。

  据财通证券测算,2023/2024/2025年(nián)大(dà)模型有(yǒu)望为广西大学唐纪良主任科员,广西大学唐记良(wèi)GPU市(shì)场贡(gòng)献69.88/166.2/209.95亿美元增量。

  其中在训练端,以目(mù)前主流的(de)训练端GPU英伟达A100测算,假(jiǎ)设ASP为1万美元,2广西大学唐纪良主任科员,广西大学唐记良023/2024/2025年全(quán)球训练端GPU需求市(shì)场(chǎng)规模(mó)预(yù)计分别(bié)为0.74/2.00/4.07亿(yì)美元(yuán);

  在推理端,以目(mù)前英伟(wěi)达(dá)用于推理端(duān)计(jì)算的A10测(cè)算,假设ASP为2800美元(yuán),2023/2024/2025年全球推理(lǐ)端(duān)GPU需求市场规(guī)模(mó)预计分别为69.14/164.2/205.88亿(yì)美(měi)元。

  业内(nèi)人(rén)士(shì)也表(biǎo)示(shì),AI大模型训练成本之一是基(jī)础算力,大概需(xū)要(yào)384-3000块左右的A100才能基(jī)本(běn)满足要求(qiú),如果价格持续上(shàng)涨(zhǎng),无(wú)论是互联网(wǎng)、AI大(dà)厂、还是创(chuàng)业新(xīn)贵,要追加的(de)投入都可能远超当(dāng)初(chū)。

未经允许不得转载:太仓网站建设,太仓网络公司,太仓网站制作,太仓网页设计,网站推广-昆山云度信息科技有限公司 广西大学唐纪良主任科员,广西大学唐记良

评论

5+2=