绿茶通用站群绿茶通用站群

流量是gb大还是mb大,gb和mb谁大一点

流量是gb大还是mb大,gb和mb谁大一点 新订单12月才能交付!英伟达GPU持续缺货涨价 客户“勒紧裤带”节约使用

  在(zài)持续已久的“AI热潮(cháo)”中(zhōng),各家(jiā)争相推出的大模(mó)型、AI应用,都进一步推升了对算力狂热的需求。本周已有报道指出英伟(wěi)达后续对AI顶(dǐng)级规(guī)格(gé)芯(xīn)片需(xū)求明显看增,紧急向(xiàng)台积电(diàn)追加预订先进封装产(chǎn)能。

  需求飙涨(zhǎng)下,英(yīng)伟达GPU价格(gé)自然也(yě)是水涨船高。据集微网消(xiāo)息,有代理商透(tòu)露(lù),英伟达A100价格从(cóng)去年12月开始上涨,截至(zhì)今年4月(yuè)上(shàng)半月,其5个(gè)月价格累计涨幅达(dá)到(dào)37.5%;同(tóng)期A800价格(gé)累计涨幅达(dá)20.0%。

  同时,英(yīng)伟(wěi)达GPU交(jiāo)货周期(qī)也(yě)被拉长,之前拿货周期大约为一个(gè)月,现在基(jī)本都需(xū)要(yào)三个(gè)月或更(gèng)长。甚(shèn)至,部分新订单“可(kě)能要(yào)到12月(yuè)才能交付(fù)”。

  供(gōng)需的巨大(dà)鸿沟面前,在(zài)这(zhè)一情形(xíng)之下,众多客(kè)户也不(bù)得不“勒(lēi)紧腰(yāo)带”。上述文(wén)章指(zhǐ)出,国内可用于(yú)训练AI大模型的(de)A100大约有4万(wàn)-5万(wàn)个,供(gōng)应相(xiāng)当吃紧,一些云服务厂商已严格限制内部使用这些先(xiān)进芯片,以将其保(bǎo)留至需要强力运算的任务。

  值得一提的是(shì),类似的事情在微软(ruǎn)内部也(yě)早已(yǐ)发生(shēng)。3月(yuè)已有(yǒu)外媒(méi)报道(dào)指出(chū),微软内部陷入AI服务器硬件(jiàn)短缺的(de)窘(jiǒng)境,不(bù)得(dé)不对AI硬件资源采取“配额供给”机制,限制公司内部其他AI工具开发团队(duì)的资源用量。

  拉长时间(jiān)线来看(kàn),有GPU业内人(rén)士指出,实际上从去年6月起,英伟达就已宣布上调(diào)A100价格,涨幅20%左(zuǒ)右,渠(qú)道商在加紧囤货(huò)。至(zhì)于英伟达A800,在ChatGPT火爆之前(qián)就已出(chū)现涨价(jià),但反映到(dào)市场则有(yǒu)一定的滞(zhì)后性,赶上ChatGPT爆(bào)火这(zhè)一时间(jiān)点,更(gèng)放大了(le)这一现象。

  “英(yīng)伟达GPU涨价与ChatGPT有一定(dìng)的(de)关联性,且(qiě)交货周(zhōu)期(qī)也受到了连带的影响,导致市场上(shàng)出现了众多炒(chǎo)卡的(de)行为。”

  此(cǐ)外,在海(hǎi)外电商平台(tái)上,英伟达新旗舰级GPU H100的(de)价格在4月中旬就已炒到了超过(guò)4万美元(yuán)。

  随着如(rú)今各家(jiā)科技巨头争(zhēng)相推出自家大(dà)模型,GPU需求量(liàng)仍在持续攀升。OpenAI指出(chū),AI大模型要持(chí)续(xù)取得突破,所需要消(xiāo)耗的流量是gb大还是mb大,gb和mb谁大一点计算资(zī)源每3~4个月就要翻一倍(bèi),资(zī)金也需(xū)要通过(guò)指数(shù)级增长(zhǎng)获得(dé)匹配。

  据财通证券测算,2023/2024/2025年大模(mó)型有望为GPU市场贡献69.88/166.2/209.95亿美元(yuán)增量(liàng)。

  其中在训(xùn)练(liàn)端,以目前主流的训(xùn)练端(duān)GPU英伟达A100测(cè)算,假设ASP为1万美元,2023/2024/2025年(nián)全球训练端GPU需(xū)求(qiú)市场规模预计分别为0.74/2.00/4.07亿(yì)美元;

  在(zài)推理端,以目前英伟达(dá)用于(yú)推理(lǐ)端计算(suàn)的(de)A10测算,假设ASP为2800美元,2023/2024/2025年全球(qiú)推理(lǐ)端GPU需求市场规模预(yù)计(jì)分别为69.14/164.2/205.88亿美元(yuán)。

  业内人士也表示,AI大模型训练成本之一是基(jī)础(chǔ)算力(lì),大概需要384-3000块左右的(de)A100才能基本满足要求,如果价格持续(xù)上(shàng)涨,无论是(shì)互联(lián)网、AI大厂(chǎ流量是gb大还是mb大,gb和mb谁大一点ng)、还是创业新贵,要追加的投入都(dōu)可能远超当初。

未经允许不得转载:绿茶通用站群 流量是gb大还是mb大,gb和mb谁大一点

评论

5+2=