近日,英偉達(dá)公布了 2023 財(cái)年及其第四季度財(cái)報(bào)。在加密貨幣低迷、消費(fèi)需求疲軟、去庫存的種種壓力下,英偉達(dá)在 2023 財(cái)年的總營收基本與上一財(cái)年持平,約為 270 億美元。其中,第四季度營收為 60.5 億美元,較去年同期下降了 21%。
盡管如此,其業(yè)績表現(xiàn)依然好于分析師此前的預(yù)期。財(cái)報(bào)發(fā)布當(dāng)天,英偉達(dá)股價(jià)大漲 14%,市值達(dá)到 5800 億美元。事實(shí)上,人們對(duì)英偉達(dá)的樂觀情緒已經(jīng)蔓延數(shù)月。自今年 1 月以來,英偉達(dá)的市值漲幅最高達(dá) 60%。
這多虧了 OpenAI,其發(fā)布的 ChatGPT 和 DALL-E 2 這樣的大型語言模型(Large Language Model)將生成式 AI 引入了公眾的視線——幾乎所有軟件將被 AI 重塑,黃仁勛更是將其比作「AI 的 iPhone 時(shí)刻」。
就此,時(shí)代的風(fēng)口由元宇宙和 web3 突然切換到生成式 AI,F(xiàn)AAMG 等硅谷巨頭們匆忙備戰(zhàn)隨時(shí)「開打」。而英偉達(dá),穩(wěn)穩(wěn)地成為這場時(shí)代之戰(zhàn)的「*軍火商」。
作為當(dāng)下「AI 超級(jí)周期的跳動(dòng)心臟」,英偉達(dá)的 GPU(圖形處理芯片)是訓(xùn)練和操作機(jī)器學(xué)習(xí)模型的*選擇,因而被視為「2023 年云資本支出重心轉(zhuǎn)向人工智能的*受益者」。
其實(shí),這不是英偉達(dá)*次乘上時(shí)代的風(fēng)車——加速計(jì)算、深度學(xué)習(xí)、挖礦、元宇宙,英偉達(dá)屢次踩中時(shí)代的風(fēng)口。在它成立的短短 30 年里,芯片江湖已然換了人間,當(dāng)年與 90 家顯卡商廝殺落敗的初創(chuàng)公司,早已成為市值最高的芯片霸主。
英偉達(dá)屢次「躺贏」,離不開其掌舵者黃仁勛的戰(zhàn)略眼光——總是能精準(zhǔn)預(yù)判下一個(gè)技術(shù)變革,提前下手。在近日的財(cái)報(bào)電話會(huì)上,黃仁勛透露了:這一次,他提前看到的未來及其相應(yīng)的戰(zhàn)略布局。面對(duì)大語言模型加持的生成式 AI,「核彈廠」的野心遠(yuǎn)非提供「軍火」。
01
ChatGPT 大戰(zhàn)
背后的「戰(zhàn)爭*」
去年 11 月底以來,OpenAI 讓人們見識(shí)到了「通用智能」的厲害,依托大語言模型的 ChatGPT 所展現(xiàn)的思維鏈條(Chain of Thought)和自發(fā)涌現(xiàn)的各種能力(Emergence)令人驚艷——盡管 ChatGPT 本身沒有知識(shí)和智慧,但是它做到了「讓你以為它有知識(shí)甚至智慧」的程度。
不久前,在加州大學(xué)伯克利分校哈斯商學(xué)院的爐邊談話上,黃仁勛興奮地評(píng)價(jià) ChatGPT 將開啟科技行業(yè)的新紀(jì)元,也是人工智能和計(jì)算行業(yè)有史以來最美妙的事情。
他說:「上一次看到一項(xiàng)如此多才多藝、可以解決問題并經(jīng)常以多種方式帶給人們驚喜的科技是什么時(shí)候?它可以寫一首詩,可以填寫電子表格,可以編寫 SQL 查詢并執(zhí)行,可以寫 Python 代碼……對(duì)于很多一直致力于此的人來說,我們一直在等待這一刻,這是人工智能的 iPhone 時(shí)刻。我現(xiàn)在可以將它用作 API 并連接到電子表格、PPT、各個(gè)應(yīng)用程序,它有讓一切變得更好的潛力」。
這是「AI 將重塑所有軟件」的際遇,而要讓生成式 AI 能夠像 ChatGPT 這樣展現(xiàn)五花八門的通識(shí)才能,必須依托像 GPT3.5 這樣的底層大語言模型。人們將其比作移動(dòng)互聯(lián)網(wǎng)時(shí)代里安卓或 iOS。因此,大語言模型也就成為大廠和創(chuàng)業(yè)公司的必爭之地。
無論是「造」出這樣一個(gè)大模型,還是運(yùn)行這樣一個(gè)大模型,都需要極大的算力,需要成千上萬個(gè) GPU。據(jù)報(bào)道,OpenAI 用了 10000 個(gè)英偉達(dá)的 GPU 來訓(xùn)練 ChatGPT。花旗集團(tuán)估計(jì),ChatGPT 的使用可能會(huì)在 12 個(gè)月內(nèi)為英偉達(dá)帶來 30 億至 110 億美元的銷售額。
此前,《中國電子報(bào)》采訪業(yè)內(nèi)人士表示,「大模型技術(shù)涉及 AI 開發(fā)、推理、訓(xùn)練的方方面面,所謂模型的『大』主要是參數(shù)量大、計(jì)算量大,需要更大體量的數(shù)據(jù)和更高的算力支撐。對(duì)于 GPU 廠商來說,大模型是值得期待的算力紅利,尤其是通用性極強(qiáng)的英偉達(dá)」。
全球來看,大算力芯片領(lǐng)域主要有兩個(gè)玩家,英偉達(dá)和 AMD,從市占率來說,英偉達(dá)遠(yuǎn)超 AMD。根據(jù) John Peddie Research 的數(shù)據(jù),英偉達(dá)占據(jù)了 GPU 市場約 86% 的份額。
這也就不難理解,在炙手可熱的生成式 AI 浪潮下,英偉達(dá)被視為*的潛在贏家。從財(cái)報(bào)上看,這波生成式 AI 對(duì)于英偉達(dá)的需求主要反映在數(shù)據(jù)中心業(yè)務(wù)。事實(shí)上,2023 整個(gè)財(cái)年的四個(gè)季度,數(shù)據(jù)中心已經(jīng)替代了英偉達(dá)起家的支柱業(yè)務(wù)——游戲,成為*大業(yè)務(wù)。
2022 財(cái)年第 4 季度——2023 財(cái)年第 4 季度,英偉達(dá)各個(gè)板塊的營收| 截圖來源:Nvidia
2023 財(cái)年,數(shù)據(jù)中心總收入增長了 41%,達(dá)到創(chuàng)紀(jì)錄的 150.1 億美元。僅就第四季度而言,數(shù)據(jù)中心收入為 36.2 億美元,貢獻(xiàn)了英偉達(dá)全公司收入的 60% 左右。
數(shù)據(jù)中心增長的基本盤來自于新一代旗艦產(chǎn)品 H100 的出貨量持續(xù)走高、云的滲透率持續(xù)增長、以及超大規(guī)??蛻魯U(kuò)大了 AI 布局。
就 H100 而言,其收入在第二季度就已經(jīng)遠(yuǎn)遠(yuǎn)高于 A100,后者的營收份額連續(xù)下降。據(jù)悉,H100 在訓(xùn)練方面比 A100 快 9 倍,在基于 Transformer 的大型語言模型推理方面比 A100 快 30 倍。
同時(shí),英偉達(dá)正在為越來越多的、快速增長的云服務(wù)商(Cloud Service Providers,簡稱 CSP)提供服務(wù),包括甲骨文和一些專注于 GPU 的云服務(wù)提供商(GPU specialized CSPs)。在過去的 4 個(gè)季度中,CSP 客戶貢獻(xiàn)了數(shù)據(jù)中心收入的 40% 左右。
02
下一步:AI 即服務(wù)
財(cái)報(bào)電話會(huì)上,老黃透露了英偉達(dá)的新動(dòng)向——AI企業(yè)級(jí)服務(wù)上云。盡管更多信息會(huì)在十幾天后的 GTC 大會(huì)上才宣布,但英偉達(dá)正與*的云服務(wù)商合作提供 AI 即服務(wù)(AI-as-a-service),讓企業(yè)可以訪問英偉達(dá)的 AI 平臺(tái)。據(jù)官方消息,客戶將能夠把 NVIDIA AI 的每一層(包括 AI 超級(jí)計(jì)算機(jī)、加速庫軟件或預(yù)訓(xùn)練的生成式 AI 模型等)作為云服務(wù)來使用。
老黃闡述道,「技術(shù)突破的積累使 AI 到了一個(gè)拐點(diǎn)。生成式 AI 的多功能性和能力引發(fā)了世界各地企業(yè)開發(fā)和部署 AI 戰(zhàn)略的緊迫感。然而,AI 超級(jí)計(jì)算機(jī)基礎(chǔ)設(shè)施、模型算法、數(shù)據(jù)處理和訓(xùn)練技術(shù)仍然是大多數(shù)人無法克服的障礙?!?/p>
基于這樣的行業(yè)痛點(diǎn),英偉達(dá)商業(yè)模式的下一個(gè)層次是:幫助每個(gè)企業(yè)客戶都能使用AI。
客戶使用自己的瀏覽器,就可以通過 NVIDIA DGX Cloud 來使用 NVIDIA DGX AI 超級(jí)計(jì)算機(jī),該服務(wù)已經(jīng)在 Oracle Cloud Infrastructure 上可用,預(yù)計(jì)不久后也將在 Microsoft Azure、Google Cloud 和其他平臺(tái)上線。在 AI 平臺(tái)軟件層,客戶將能夠訪問 NVIDIA AI Enterprise,以訓(xùn)練和部署大型語言模型或其他 AI 工作負(fù)載。而在 AI 模型即服務(wù)層,英偉達(dá)將向希望為其業(yè)務(wù)建立專有生成式 AI 模型和服務(wù)的企業(yè)客戶提供 NeMo 和 BioneMo 可定制 AI 模型。
就其市場前景,黃仁勛認(rèn)為,ChatGPT 讓人們意識(shí)到計(jì)算機(jī)編程的民主化,幾乎任何人都可以用人類語言向機(jī)器解釋要執(zhí)行的特定任務(wù)。因此,全世界 AI 基礎(chǔ)設(shè)施的數(shù)量將會(huì)增長,「你會(huì)看到這些 AI 工廠無處不在」。人工智能的生產(chǎn)將會(huì)像制造業(yè)一樣,在未來,幾乎每個(gè)公司都會(huì)以智能的形式生產(chǎn)軟件產(chǎn)品。數(shù)據(jù)進(jìn)來了,只做一件事,利用這些數(shù)據(jù)產(chǎn)生一個(gè)新的更新模型。
他進(jìn)一步解釋了 AI 工廠,「當(dāng)原材料進(jìn)入時(shí),建筑或基礎(chǔ)設(shè)施就會(huì)啟動(dòng),然后一些改進(jìn)的東西就會(huì)出現(xiàn),這是非常有價(jià)值的,這就是所謂的工廠。所以我希望在世界各地看到 AI 的工廠。其中一些將托管在云中。其中一些將是本地的。會(huì)有一些很大,有些會(huì)非常大,然后會(huì)有一些更小。所以我完全期待這會(huì)發(fā)生?!?/p>
事實(shí)上,老黃關(guān)于 AI 工廠愿景正在發(fā)生,上個(gè)月,他在公開演講中聲稱,自從 ChatGPT 出現(xiàn)以來,可能已經(jīng)有大約 500 家新創(chuàng)業(yè)公司開發(fā)出令人愉快的、有用的 AI 應(yīng)用程序。
基于這一前景,英偉達(dá)對(duì)數(shù)據(jù)中心的未來充滿信心。CFO Cress 表示,通過新的產(chǎn)品周期、生成式 AI 以及人工智能在各個(gè)行業(yè)的持續(xù)采用,數(shù)據(jù)中心部門將持續(xù)實(shí)現(xiàn)增長。她說:「除了與每個(gè)主要的超大規(guī)模云服務(wù)商合作外,我們還與許多消費(fèi)互聯(lián)網(wǎng)公司、企業(yè)和初創(chuàng)企業(yè)合作。這一機(jī)會(huì)意義重大,推動(dòng)數(shù)據(jù)中心的強(qiáng)勁增長,并將在今年加速增長?!?/p>
03
汽車向上,游戲向下
除了數(shù)據(jù)中心,英偉達(dá)其他的業(yè)務(wù)板塊——游戲、汽車、專業(yè)視覺等,本季度的表現(xiàn)則有好有壞。
其中,車用業(yè)務(wù)表現(xiàn)亮眼。財(cái)年總收入增長 60%,達(dá)到創(chuàng)紀(jì)錄的 9.03 億美元。第四季度收入創(chuàng)下 2.94 億美元的紀(jì)錄,較去年同期增長 135%,較上一季度增長 17%。
無論是環(huán)比還是同比,車用業(yè)務(wù)均持續(xù)增長。根據(jù)英偉達(dá),這些增長反映了自動(dòng)駕駛解決方案的銷售增長,面向電動(dòng)汽車制造商的計(jì)算解決方案以及 AI 座艙解決方案的銷售強(qiáng)勁。電動(dòng)汽車和傳統(tǒng) OEM 客戶的新項(xiàng)目助推了這一增長。
值得注意的是,在今年 1 月初舉行的 CES 大會(huì)上,英偉達(dá)宣布與富士康建立戰(zhàn)略合作伙伴關(guān)系,共同開發(fā)基于 NVIDIA DRIVE Orin 和 DRIVE Hyperion 的自動(dòng)駕駛汽車平臺(tái)。
相比之下,游戲業(yè)務(wù)依然深處泥潭之中。
過去幾個(gè)季度,RTX 4080 銷售疲軟、視頻游戲行業(yè)下滑、加密貨幣市場疲軟、以及去庫存壓力等因素,讓英偉達(dá)的游戲業(yè)務(wù)持續(xù)低迷,尤其第三季度,游戲業(yè)務(wù)營收同比暴跌 51%。但就像 CFO Cress 所言,「*點(diǎn)可能已經(jīng)過去,而且事情可以改善前進(jìn)?!?/p>
第四季度,英偉達(dá)游戲營收為 18.3 億美元,同比下降 46%,環(huán)比增長 16%,整個(gè)財(cái)年收入下降 27%。該季度和財(cái)年的同比下降反映了銷售減少,背后是全球宏觀經(jīng)濟(jì)低迷和中國放開疫情管控對(duì)游戲需求的影響。
但環(huán)比三季度,英偉達(dá)的游戲業(yè)務(wù)還是取得了一定增長。這是由于受到基于 Ada Lovelace 架構(gòu)的新 GeForce RTX GPU 的推出推動(dòng)。黃仁勛也肯定了這一看法,他說:「游戲業(yè)正在從新冠肺炎疫情后的低迷中復(fù)蘇,而且玩家們熱烈歡迎使用 AI 神經(jīng)渲染的 Ada 架構(gòu) GPU?!?/p>
近日,游戲行業(yè)一個(gè)復(fù)蘇的好跡象是:動(dòng)視暴雪(Activision Blizzard)在第四季度實(shí)現(xiàn)了營收正增長,超出了預(yù)期。但仍要警惕——?jiǎng)右暠┭┰?PC 和主機(jī)上銷售游戲,而只有 PC 銷售與英偉達(dá)相關(guān),主機(jī)制造商使用 AMD 顯卡。
此外,在財(cái)報(bào)發(fā)布的前一天,英偉達(dá)宣布與微軟簽訂了一項(xiàng)為期 10 年的協(xié)議,將 Xbox PC 游戲陣容引入 GeForce NOW,包括《我的世界(Minecraft)》、《光環(huán)(Halo)》和《微軟模擬飛行(Microsoft Flight Simulator)》。待微軟完成收購動(dòng)視之后,GeForce NOW 將新增《使命召喚(Call of Duty)》和《守望先鋒(Overwatch)》等游戲。
除了游戲業(yè)務(wù)之外,專業(yè)視覺和 OEM 這兩個(gè)部門的業(yè)務(wù)也較上一年有大幅下降。從中可以看出:半導(dǎo)體市場正在經(jīng)歷罕見的下行周期。
專業(yè)視覺業(yè)務(wù)第四季度收入為 2.26 億美元,較去年同期下降 65%,較上一季度增長 13%。財(cái)年總收入下降 27% 至 15.4 億美元。該季度和財(cái)年同比下降反映了向合作伙伴銷售較少以幫助減少渠道庫存。環(huán)比增長是由臺(tái)式工作站 GPU 推動(dòng)的。
OEM 和其他收入同比下降 56%,環(huán)比增長 15%。財(cái)年收入下降 61%。該季度和財(cái)年同比下降是由筆記本 OEM 和加密貨幣挖掘處理器(CMP)推動(dòng)的。在財(cái)年 2023 中,CMP 收入微不足道,而在財(cái)年 2022 中為 5.5 億美元。
04
風(fēng)口上的贏家,
為什么又是英偉達(dá)
英偉達(dá) 30 年的發(fā)展史可以分為兩段。從 1993 年到 2006 年,英偉達(dá)的目標(biāo)是在競爭激烈的圖形卡市場中存活下來,并創(chuàng)造了 GPU 這一革命性的技術(shù);從 2006 年到 2023 年的轉(zhuǎn)型,則主要是如何利用 CUDA 這一平臺(tái),將 GPU 應(yīng)用于機(jī)器學(xué)習(xí)、深度學(xué)習(xí)、云計(jì)算等領(lǐng)域。
后者讓英偉達(dá)走上人工智能之旅,今天市值已經(jīng)超過老牌霸主英特爾和 AMD,也是在今天生成式 AI 熱潮下,英偉達(dá)再次站上風(fēng)口的前提。
在 2019 年的一次主題演講中,黃仁勛分享了英偉達(dá)一次次重溯行業(yè)的緣起——找到了真正重要的問題并堅(jiān)持。他說:「這使我們能夠一次又一次地發(fā)明、重塑我們的公司、重溯我們的行業(yè)。我們發(fā)明了GPU。我們發(fā)明了編程著色。是我們讓電子游戲變得如此美麗。我們發(fā)明了 CUDA,它將 GPU 變成了虛擬現(xiàn)實(shí)的模擬器。」
回到英偉達(dá)的起點(diǎn)。當(dāng)時(shí) Windows 3.1 剛剛問世,個(gè)人電腦革命才剛剛要開始。英偉達(dá)想要能找到一種方法讓 3D 圖形消費(fèi)化、民主化,讓大量的人能夠接觸到這項(xiàng)技術(shù),從而創(chuàng)造一個(gè)當(dāng)時(shí)不存在的全新行業(yè)——電子游戲。他們認(rèn)為,如果做成,就有可能成為世界上最重要的技術(shù)公司之一。
原因在于:三維圖形主要表現(xiàn)為對(duì)現(xiàn)實(shí)的模擬,對(duì)世界的模擬相當(dāng)復(fù)雜,如果知道如何創(chuàng)建難辨真假的虛擬現(xiàn)實(shí),在所做的一切中模擬物理定律,并將人工智能引入其中,這一定是世界上*的計(jì)算挑戰(zhàn)之一。它沿途衍生的技術(shù),可以解決驚人的問題。
最有代表性的案例,就是通過 CUDA 等方案為計(jì)算、人工智能等帶來了革新性影響,也讓它在這一波生成式AI浪潮中處于*生態(tài)位。
盡管 GPU 作為計(jì)算設(shè)備的發(fā)現(xiàn)經(jīng)常被認(rèn)為有助于引領(lǐng)圍繞深度學(xué)習(xí)的「寒武紀(jì)大爆炸」,但 GPU 并不是單獨(dú)工作的。英偉達(dá)內(nèi)外的專家都強(qiáng)調(diào),如果英偉達(dá)在 2006 年沒有將 CUDA 計(jì)算平臺(tái)添加到組合中,深度學(xué)習(xí)革命就不會(huì)發(fā)生。
CUDA(Compute Unified Device Architecture)計(jì)算平臺(tái)是英偉達(dá)于 2006 年推出的軟件和中間件堆棧,其通用的并行計(jì)算架構(gòu)能夠使得 GPU 解決復(fù)雜的計(jì)算問題。通過 CUDA,研究人員可以編程和訪問 GPU 實(shí)現(xiàn)的計(jì)算能力和*并行性。
而在英偉達(dá)發(fā)布 CUDA 之前,對(duì) GPU 進(jìn)行編程是一個(gè)漫長而艱巨的編碼過程,需要編寫大量的低級(jí)機(jī)器代碼。使用免費(fèi)的 CUDA,研究人員可以在在英偉達(dá)的硬件上更快、更便宜地開發(fā)他們的深度學(xué)習(xí)模型。
CUDA 的發(fā)明起源于可程式化 GPU 的想法。英偉達(dá)認(rèn)為,為了創(chuàng)造一個(gè)美好的世界,*件要做的事情就是先模擬它,而這些物理定律的模擬是個(gè)超級(jí)電腦負(fù)責(zé)的問題,是科學(xué)運(yùn)算的問題,因此,關(guān)鍵在于:怎么把一個(gè)超級(jí)電腦才能解決的問題縮小、并放進(jìn)一臺(tái)正常電腦的大小,讓你能先模擬它,然后再產(chǎn)生畫面。這讓英偉達(dá)走向了可程式化 GPU,這是個(gè)無比巨大的賭注。
彼時(shí),英偉達(dá)花了三四年時(shí)間研發(fā) CUDA,最后卻發(fā)現(xiàn)所有產(chǎn)品的成本都不得不上升近一倍,而在當(dāng)時(shí)也并不能給客戶帶來價(jià)值,客戶顯然不愿意買單。
若要讓市場接受,英偉達(dá)只能提高成本,但不提高售價(jià)。黃仁勛認(rèn)為,這是計(jì)算架構(gòu)的事情,必須要讓每一臺(tái)電腦都能跑才能讓開發(fā)者對(duì)這種架構(gòu)有興趣。因此,他繼續(xù)堅(jiān)持,并最終打造出了 CUDA。但在那段時(shí)間,英偉達(dá)的利潤「摧毀性」地下降,股票掉到了 1.5 美元,并持續(xù)低迷了大約 5 年,直到橡樹嶺國家實(shí)驗(yàn)室選擇了英偉達(dá)的 GPU 來建造公用超級(jí)電腦。
接著,全世界的研究人員開始采用 CUDA 這項(xiàng)技術(shù),一項(xiàng)接著一項(xiàng)的應(yīng)用,一個(gè)接著一個(gè)的科學(xué)領(lǐng)域,從分子動(dòng)力學(xué)、計(jì)算物理學(xué)、天體物理學(xué)、粒子物理學(xué)、高能物理學(xué)……這些不同的科學(xué)領(lǐng)域開始采用 CUDA。兩年前,諾貝爾物理學(xué)獎(jiǎng)和化學(xué)獎(jiǎng)得主,也都是因?yàn)橛?CUDA 的幫助才得以完成自己的研究。
當(dāng)然,CUDA 也為英偉達(dá)的游戲提供了動(dòng)力,因?yàn)樘摂M世界里和現(xiàn)實(shí)世界的流體力學(xué)是一樣的,像是粒子物理學(xué)的爆炸、建筑物的崩塌效果,和英偉達(dá)在科學(xué)運(yùn)算中觀察到的是一樣的,都是基于同樣的物理法則。
然而,CUDA 發(fā)布后的前六年里,英偉達(dá)并未「全力投入」AI,直到 AlexNet 神經(jīng)網(wǎng)絡(luò)的出現(xiàn)。
在即將到來的 GTC 大會(huì)上,黃仁勛邀請(qǐng)了 OpenAI 聯(lián)創(chuàng)兼首席科學(xué)家 Ilya Sutskever,而 Sutskever 見證了英偉達(dá)這段在人工智能領(lǐng)域崛起的故事。
Sutskever 與 Alex Krizhevsky 及其博士生導(dǎo)師 Geoffrey Hinton 一起創(chuàng)建了 AlexNet,這是計(jì)算機(jī)視覺領(lǐng)域開創(chuàng)性的神經(jīng)網(wǎng)絡(luò),在 2012 年 10 月贏得了 ImageNet 競賽。獲獎(jiǎng)?wù)撐谋砻髟撃P蛯?shí)現(xiàn)了前所未有的圖像識(shí)別精度,直接導(dǎo)致了此后十年里人工智能的主要成功故事——從 Google Photos、Google Translate 和 Uber 到 Alexa 和 AlphaFold 的一切。
根據(jù) Hinton 的說法,如果沒有英偉達(dá),AlexNet 就不會(huì)出現(xiàn)。得益于數(shù)千個(gè)計(jì)算核心支持的并行處理能力,英偉達(dá)的 GPU 被證明是運(yùn)行深度學(xué)習(xí)算法的*選擇。Hinton 甚至在一次演講上告訴在場的近千名研究人員都應(yīng)該購買 GPU,因?yàn)?GPU 將成為機(jī)器學(xué)習(xí)的未來。
在 2016 年接受福布斯采訪時(shí),黃仁勛說自己一直都知道英偉達(dá)圖形芯片的潛力不止于為最新的視頻游戲提供動(dòng)力,但他沒想到會(huì)轉(zhuǎn)向深度學(xué)習(xí)。
事實(shí)上,英偉達(dá)的深度神經(jīng)網(wǎng)絡(luò) GPU 的成功是「一個(gè)奇怪的幸運(yùn)巧合」,一位名叫 Sara Hooker 的作者在 2020 年發(fā)表的文章「硬件彩票」探討了各種硬件工具成功和失敗的原因。
她說,英偉達(dá)的成功就像「中了彩票」,這在很大程度上取決于「硬件方面的進(jìn)展與建模方面的進(jìn)展之間的正確對(duì)齊時(shí)刻」。這種變化幾乎是瞬間發(fā)生的?!敢灰怪g,需要 13000 個(gè) CPU 的工作兩個(gè) GPU 就解決了」她說?!高@就是它的戲劇性。」
然而,英偉達(dá)并不同意這種說法,并表示,從 2000 年代中期開始英偉達(dá)就意識(shí)到 GPU 加速神經(jīng)網(wǎng)絡(luò)的潛力,即使他們不知道人工智能將成為最重要的市場。
在 AlexNet 誕生的幾年后,英偉達(dá)的客戶開始購買大量 GPU 用于深度學(xué)習(xí),當(dāng)時(shí),Rob Fergus(現(xiàn)任 DeepMind 研究科學(xué)家)甚至告訴英偉達(dá)應(yīng)用深度學(xué)習(xí)研究副總裁 Bryan Catanzaro,「有多少機(jī)器學(xué)習(xí)研究人員花時(shí)間為 GPU 編寫內(nèi)核,這太瘋狂了——你真的應(yīng)該研究一下」。
黃仁勛逐漸意識(shí)到 AI 是這家公司的未來,英偉達(dá)隨即將把一切賭注押在 AI 身上。
于是,在 2014 年的 GTC 主題演講中,人工智能成為焦點(diǎn),黃仁勛表示,機(jī)器學(xué)習(xí)是「當(dāng)今高性能計(jì)算領(lǐng)域最激動(dòng)人心的應(yīng)用之一」?!钙渲幸粋€(gè)已經(jīng)取得令人興奮的突破、巨大的突破、神奇的突破的領(lǐng)域是一個(gè)叫做深度神經(jīng)網(wǎng)絡(luò)的領(lǐng)域?!裹S仁勛在會(huì)上說道。
此后,英偉達(dá)加快布局 AI 技術(shù),再也不只是一家 GPU 計(jì)算公司,逐漸建立了一個(gè)強(qiáng)大的生態(tài)系統(tǒng),包括芯片、相關(guān)硬件以及一整套針對(duì)其芯片和系統(tǒng)進(jìn)行優(yōu)化的軟件和開發(fā)系統(tǒng)。這些*的硬件和軟件組合平臺(tái),可以最有效地生成 AI。
可以說,GPU + CUDA 改變了 AI 的游戲規(guī)則。中信證券分析師許英博在一檔播客節(jié)目中評(píng)價(jià)道:英偉達(dá)一直在做一件非常聰明的事情,就是軟硬一體。在 GPU 硬件半導(dǎo)體的基礎(chǔ)上,它衍生出來了基于通用計(jì)算要用的 CUDA。這促成了英偉達(dá)拿到了軟件和硬件的雙重規(guī)模效應(yīng)。
在硬件端,因?yàn)樗菆D形和計(jì)算的統(tǒng)一架構(gòu),它的通用性保證了它有規(guī)模性,而規(guī)模性攤薄了它的研發(fā)成本,所以硬件上本身通過規(guī)模性可以拿到一個(gè)比較優(yōu)勢(shì)的研發(fā)成本。
在軟件端,因?yàn)樗旋嫶蟮拈_發(fā)者的生態(tài),而這些寶貴的軟件開發(fā)人員,即便是這些軟件開發(fā)人員換了一個(gè)公司,但他可能還是在繼續(xù)用 CUDA 的軟件。