久久精品免费看国产成人,四虎国产精品亚洲一区久久,伊人精品久久久7777,成人欧美一区二区三区在线,99精品国产福利一区二区,亚洲精品成人毛片久久久,久久精品99精品免费观看 ,99热久久这里只有精品免费,久久精品免费一区二区三区

英偉達發布新人工智能芯片,CEO黃仁勛:大模型運行成本將大幅降低
來源:富途牛牛 發布時間:2023-08-09 08:49:01

8月9日,英偉達宣布推出一款新芯片,旨在在人工智能硬件領域抵御競爭對手,包括AMD、谷歌和亞馬遜。

據估計,目前英偉達在AI芯片市場占據了超過80%的市場份額。該公司的專長是圖形處理單元(GPU),已成為支撐生成式人工智能軟件(如谷歌的Bard和OpenAI的ChatGPT)的大型AI模型的首選芯片。但由于科技巨頭、云服務提供商和初創企業爭奪GPU容量來開發自己的AI模型,英偉達的芯片供應短缺。


(資料圖片僅供參考)

英偉達最新發布的芯片GH200,與該公司目前最高端的AI芯片H100采用相同的GPU。但GH200還配備了141GB的尖端內存和一個72核的ARM中央處理器。

英偉達CEO黃仁勛在周二的演講中表示:“我們給這個處理器加了一些提升?!彼a充說:“這個處理器是為全球數據中心的規模而設計的?!?/p>

據黃仁勛透露,這款新芯片將于明年第二季度在英偉達的經銷商處上市,并計劃在年底前提供樣品。英偉達的代表拒絕透露價格。

通常,處理AI模型的過程至少分為兩個部分:訓練和推理。

首先,使用大量數據對模型進行訓練,這個過程可能需要數月時間,有時需要數千個GPU,例如英偉達的H100和A100芯片。

然后,該模型將在軟件中用于進行預測或生成內容,這個過程稱為推理。與訓練類似,推理需要大量的計算資源,并且每次軟件運行時都需要大量的處理能力,例如生成文本或圖像時。但與訓練不同,推理是幾乎持續進行的,而訓練只在需要更新模型時才需要進行。

黃仁勛表示:“你可以將幾乎任何大型語言模型放入其中,它將進行瘋狂的推理。大型語言模型的推理成本將大幅降低?!?/p>

英偉達的新芯片GH200專為推理而設計,因為它具有更大的內存容量,可以容納更大的AI模型在單個系統中。英偉達副總裁伊恩·巴克在與分析師和記者的電話會議上表示,英偉達的H100具有80GB的內存,而新的GH200則有141GB的內存。英偉達還宣布推出了一種將兩個GH200芯片組合到一臺計算機中的系統,以支持更大的模型。

巴克表示:“更大的內存使得模型可以常駐在單個GPU上,而不需要多個系統或多個GPU來運行?!?/p>

此次宣布正值英偉達的主要GPU競爭對手AMD推出面向AI的芯片MI300X,該芯片支持192GB的內存,并被市場推廣為適用于AI推理。谷歌和亞馬遜等公司也正在設計自己的定制AI芯片用于推理。

編輯/jayden

標簽:

猜你喜歡

英偉達發布新人工智能芯片,CEO黃仁勛:大模型運

8月9日,英偉達宣布推出一款新芯片,旨在在人工智能硬件領域抵御競爭對更多

2023-08-09 08:49:01

減肥藥還能降低心血管風險,華爾街瘋狂做多相關概

在諾和諾德宣布旗下一款減肥藥對心臟有益后,華爾街對瘦身概念股的熱情更多

2023-08-09 08:57:22

公告精選︱理想汽車Q2營收同比大增約228%;中國電

重磅公告1、$中國電信(00728 HK)$:上半年凈利潤202億元,同比增長10 2更多

2023-08-09 08:48:41

生成式AI添利器!英偉達推出超級芯片GH200 Grace

摘要GH200Grace芯片搭載全球首款HBM3e處理器,可通過英偉達的NVLink技更多

2023-08-09 07:49:55

喜憂參半!Rivian上調全年產量指引,但預計虧損仍

美東時間周二,$RivianAutomotive(RIVN US)$公布了2023財年第二季度財更多

2023-08-09 07:50:42

市值暴跌超萬億,蘋果急需AI大模型「新解藥」

「慢半拍」的蘋果,加速追趕AI大模型。在交出連續三個季度負增長的業績更多

2023-08-09 05:49:44

英偉達宣布推出新一代GH200 Grace Hopper超級芯

英偉達宣布推出新一代GH200GraceHopper超級芯片,同時宣布基于GH200構更多

2023-08-09 05:58:40

股票下跌的原因,只有這一點是最直接的

一、風險偏好是如何影響股價的?如果只看直接原因,股價為什么會下跌呢更多

2023-08-09 05:58:54

穆迪重磅下調10家美國銀行評級,并將一些知名銀行

香港萬得通訊社報道,穆迪下調了許多美國中小銀行的信用評級,并將幾家更多

2023-08-08 22:46:57

拒絕認輸!小摩頑固空頭堅持唱衰美股,看好防御板

智通財經APP獲悉,摩根大通全球市場策略團隊表示,如果美國經濟軟著陸更多

2023-08-08 22:58:51