绿茶通用站群绿茶通用站群

Medical staff可数吗,stuff

Medical staff可数吗,stuff 新订单12月才能交付!英伟达GPU持续缺货涨价 客户“勒紧裤带”节约使用

  在(zài)持续(xù)已久的“AI热潮”中(zhōng),各(gè)家争相推出的大模(mó)型、AI应用(yòng),都进一步推升了对算力狂(kuáng)热的需(xū)求(qiú)。本周已有报(bào)道指出英(yīng)伟达(dá)后续对AI顶级规格(gé)芯片需求明显看(kàn)增(zēng),紧急向(xiàng)台积电追加预订先进(jìn)封(fēng)装产能。

  需求飙(biāo)涨下,英伟(wěi)达GPU价格自然也是水涨(zhǎng)船高(gāo)。据集微网消息,有(yǒu)代理商透露,英伟达A100价(jià)格从去年12月(yuè)开始上涨,截至(zhì)今(jīn)年4月上半(bàn)月,其5个月(yuè)价格累计涨幅达到(dào)37.5%;同(tóng)期A800价格累(lèi)计涨幅达20.0%。

  同(tóng)时(shí),英伟达GPU交(jiāo)货周(zhōu)期(qī)也被拉长(zhǎng),之(zhī)前拿(ná)货(huò)周期大约为一个月,现在(zài)基本(běn)都需(xū)要三个月或(huò)更长(zhǎng)。甚至,部(bù)分新订(dìng)单“可(kě)能(néng)要到12月才(cái)能交付”。

  供需的巨大鸿沟面前,在这一(yī)情形之下(xià),众多客户也不得(dé)不“勒紧腰带”。上述文(wén)章指出,国内可用于训练AI大(dà)模型(xíng)的A100大约有4万(wàn)-5万个,供应相(xiāng)当(dāng)吃紧,一些(xiē)云服(fú)务厂商已严格限制内部使(shǐ)用(yòng)这些先进芯片,以将其保(bǎo)留至(zhì)需要(yào)强力运算(suàn)的任(rèn)务。

  值(zhí)得一提(tí)的是(shì),类似的事(shì)情在微软内部也(yě)早已发生。3月(yuè)已有外(wài)媒(méi)报(bào)道指(zhǐ)出,微软内部陷入AI服务器硬件短(duǎn)缺(quē)的窘境,不得不对AI硬(yìng)件资源(yuán)采取“配额供给”机制(zhì),限制公司(sī)内部其他AI工具开发团队的资源用量。

  拉(lā)长时间线来(lái)看,有GPU业(yè)内(nèi)人士(shì)指出,实Medical staff可数吗,stuff际上从去年(nián)6月起,英伟达就已宣布上调A100价(jià)格(gé),涨幅20%左右,渠道商在(zài)加(jiā)紧囤货。至于英伟达A800,在ChatGPT火(huǒ)爆之(zhī)前就已出现涨价(jià),但(dàn)反映到市场则有(yǒu)一定的滞后(hòu)性,赶上ChatGPT爆火这一时间(jiān)点,更放(fàng)大了(le)这一(yī)现(xiàn)象。

  “英伟(wěi)达(dá)GPU涨价与(yǔ)ChatGPT有一定(dìng)的关联性,且交货周(zhōu)期也受到了连带的影响,导致市场上(shàng)出现了众多炒卡的(de)行为(wèi)。”

  此外(wài),在海外电商平台上,英伟达新旗舰级GPU H100的价格(gé)在4月中旬就已炒到了超过4万美元。 Medical staff可数吗,stuff

  随着如(rú)今各家(jiā)科技巨头(tóu)争相推出自家大(dà)模型,GPU需求量仍在持(chí)续(xù)攀(pān)升。OpenAI指出,AI大模(mó)型要持续取得突破(pò),所需要消耗的计(jì)算资源每3~4个月就要翻一倍,资金(jīn)也需要通过指数级增长获(huò)得匹(pǐ)配。

  据(jù)财通证(zhèng)券测算,2023/2024/2025年大(dà)模型(xíng)有望(wàng)为GPU市(shì)场(chǎng)贡献69.88/166.2/209.95亿(yì)美元增(zēng)量。

  其中在训(xùn)练(liàn)端,以目前主(zhǔ)流(liú)的训练端GPU英伟达A100测算,假设(shè)ASP为1万美元(yuán),2023/2024/2025年全球训练端GPU需求市场规模预(yù)计分别为0.74/2.00/4.07亿美(měi)元;

  在推(tuī)理(lǐ)端,以目前(qián)英伟达用于推理端(duān)计(jì)算的A10测算,假设ASP为2800美元(yuán),2023/2024/2025年全(quán)球推理(lǐ)端(duān)GPU需求市场规模预计分(fēn)别为(wèi)69.14/164.2/205.88亿美元。

  业内(nèi)人士也(yě)表示(shì),AI大模型训练成本(běn)之一(yī)Medical staff可数吗,stuff是基础算力,大概需要384-3000块左右(yòu)的A100才能基本满足(zú)要求,如(rú)果价格(gé)持(chí)续上涨,无论是互联(lián)网(wǎng)、AI大厂(chǎng)、还是创业新贵(guì),要追加(jiā)的投(tóu)入(rù)都可(kě)能(néng)远超当初。

未经允许不得转载:绿茶通用站群 Medical staff可数吗,stuff

评论

5+2=