绿茶通用站群绿茶通用站群

学生党如何自W,如何自我安抚

学生党如何自W,如何自我安抚 新订单12月才能交付!英伟达GPU持续缺货涨价 客户“勒紧裤带”节约使用

  在持续(xù)已久的(de)“AI热潮”中(zhōng),各家争相推出的大模型、AI应(yīng)用,都(dōu)进一步推(tuī)升(shēng)了对算力狂(kuáng)热的需求。本周已有(yǒu)报道指出(chū)英伟达后续对AI顶(dǐng)级规(guī)格芯(xīn)片需求明显(xiǎn)看(kàn)增,紧急向台积电追加预订先进封装(zhuāng)产(chǎn)能。

  需求(qiú)飙涨下,英伟(wěi)达GPU价格自(zì)然也是(shì)水涨船高。据集(jí)微(wēi)网消息,有代理商透(tòu)露,英伟达A100价格从去(qù)年12月开始上(shàng)涨(zhǎng),截(jié)至今(jīn)年(nián)4月上(shàng)半月,其5个月价格累计(jì)涨幅达到37.5%;同期A800价格累(lèi)计涨幅达20.0%。

  同时(shí),英(yīng)伟达GPU交(jiāo)货周期也(yě)被拉长,之(zhī)前拿货周期(qī)大约为一个月,现(xiàn)在基本都需要三(sān)个(gè)月或更长。甚至,部分新订单“可能要到12月才能交付”。

  供需的巨大鸿(hóng)沟面前,在学生党如何自W,如何自我安抚(zài)这一情形之下(xià),众多客户也不得不“勒(lēi)紧(jǐn)腰带(dài)”。上(shàng)述文章指出,国内可用于训练AI大模型(xíng)的A100大约有4万-5万个,供应相(xiāng)当吃紧,一些云(yún)服务厂商已严格限制内(nèi)部使用(yòng)这些先进芯片(piàn),以(yǐ)将其保留至需要(yào)强力运算(suàn)的任(rèn)务(wù)。

  值得一提的(de)是(shì),类似的事情在微(wēi)软内(nèi)部也早已发生。3月已有外(wài)媒(méi)报道指出,微软内部陷入AI服务器(qì)硬件短(duǎn)缺的窘境,不得(dé)不对AI硬件资(zī)源采取“配额供给(gěi)”机制,限制公司内部其(qí)他AI工具开发团队的(de)资源用量。

  拉长时间线来看,有GPU业(yè)内人(rén)士(shì)指出(chū),实际上从去年6月起,英伟达就已(yǐ)宣(xuān)布上(shàng)调(diào)A100价格,涨幅20%左右,渠道商在加(jiā)紧囤货。至于英伟(wěi)达A800,在ChatGPT火(huǒ)爆之前就已出现涨价,但(dàn)反映(yìng)到市场则(zé)有(yǒu)一定的滞后性,赶上(shàng)ChatGPT爆火这一时间点,更放大了这一现(xiàn)象。

  “英伟(wěi)达GPU涨价与(yǔ)ChatGPT有一定的关联性,且(qiě)交货周期也(yě)受到了连(lián)带的影响(xiǎng),导致市场上出现了众多炒卡的(de)行(xíng)为。”

  此外,在海(hǎi)外电商平台(tái)上,英(yīng)伟达新旗舰级GPU H100的(de)价格在4月中(zhōng)旬就已炒到了(le)超(chāo)过(guò)4万美元。

  随着如今(jīn)各家科技(jì)巨头争相推出(chū)自家(jiā)大模型,GPU需求(qiú)量仍(réng)在持续(xù)攀升。OpenAI指出,AI大模型要持续取得突破,所需要消耗的计(jì)算(suàn)资源每3~4个月就要翻(fān)一倍,资金也需要通过指数级(jí)增长(zhǎng)获得匹配。

  据财通证券测算,2023/2024/2025年(nián)大模型有(yǒu)望为GPU市场贡献(xiàn)69.88/166.2/209.95亿美元增量。

  其中在训练端,以目前(qián)主流的训(xùn)练(liàn)端GPU英伟达(dá)A100测算,假(jiǎ)设ASP为1万美元,2023/2024/2025年全(quán)球训练(liàn)端GPU需求(qiú)市(shì)场规模预计分别为0.74/2.00/4.07亿(yì)美(měi)元;

  在推理端,以目前英(yīng)伟达(dá)用于推(tuī)理端计算(suàn)的A10测算,假设(shè)ASP为2800美元,2023/2024/2025年(nián)全球推理(lǐ)端GPU需(xū)求市(shì)场规模预计分别为69.14/164.2/205.88亿美元。

  业内人士(shì)也(yě)表示,AI大模(mó)型训练成本之一是基(jī)础算力,大概需(xū)要(yào)384-3000块左(zuǒ)右(y学生党如何自W,如何自我安抚òu)的(de)A100才能基(jī)本(běn)满足要(yào)求,如果价格持续上涨,无论是互联网、AI大(dà)厂、还是创业新贵,要追(zhuī)加(jiā)的投入(rù)都可能远超当初(chū)。

未经允许不得转载:绿茶通用站群 学生党如何自W,如何自我安抚

评论

5+2=