黃仁勛親自給OpenAI送貨,全球首臺(tái)DGX H200開(kāi)箱了
今天,黃仁勛又來(lái)送 AI 芯片了,還是超強(qiáng)悍的那種。
OpenAI 聯(lián)合創(chuàng)始人、總裁 Greg Brockman 發(fā)推,曬出了自己、OpenAI CEO 奧特曼與英偉達(dá)創(chuàng)始人兼 CEO 黃仁勛的合照。
他表示,老黃親自為 OpenAI 送來(lái)了全球第一臺(tái) Nvidia DGX H200 超級(jí)計(jì)算機(jī),此舉意在雙方共同推進(jìn) AI、計(jì)算和人類(lèi)的發(fā)展。
不過(guò),網(wǎng)友更關(guān)注的依然是 OpenAI 聯(lián)合創(chuàng)始人、首席科學(xué)家 Ilya Sutskever。自去年 12 月 15 日轉(zhuǎn)推了 OpenAI 的一個(gè)帖子以來(lái),他已經(jīng)在 X 上「消失」了四個(gè)多月。
有網(wǎng)友調(diào)侃到,Ilya 是不是在邊上的箱子里呢?
還有人 P 了一張 Ilya 與奧特曼搭肩的合照。
把最強(qiáng) AI 算力贈(zèng)送給業(yè)界先進(jìn)研究機(jī)構(gòu),這件事英偉達(dá)已不是第一次做了。
今年 2 月,馬斯克還在 X 上回憶了老黃向 OpenAI 捐贈(zèng) DGX-1 服務(wù)器的那張經(jīng)典照片。作為 OpenAI 的聯(lián)合創(chuàng)始人,彼時(shí)馬斯克還沒(méi)有因?yàn)椤咐鏇_突」和開(kāi)源等問(wèn)題與 OpenAI 反目成仇。
2016 年,黃仁勛親自向 OpenAI 贈(zèng)送了全球第一臺(tái) DGX-1,馬斯克也在接收現(xiàn)場(chǎng)。
或許就是這個(gè)舉動(dòng),催生了 ChatGPT 的到來(lái)。
DGX-1 被英偉達(dá)稱(chēng)作為「AI 超級(jí)計(jì)算機(jī)」,當(dāng)時(shí)捐贈(zèng)的版本價(jià)值 12.9 萬(wàn)美元,集成了 8 塊 Tesla P100(Pascal 架構(gòu))GPU,整個(gè)系統(tǒng)的機(jī)器學(xué)習(xí)算力為 170 teraflops(FP16)。
在此之后,英偉達(dá)陸續(xù)推出了 DGX-2(Volta 架構(gòu))、DGX A100 服務(wù)器(Ampere 架構(gòu)),持續(xù)引領(lǐng)了 AI 算力的最高水平。
今天贈(zèng)送給 OpenAI 的 DGX H200,是去年 11 月在全球超算大會(huì)上推出的最新產(chǎn)品。英偉達(dá)在官方博客中曾表示:H200 Tensor Core GPU 具有改變游戲規(guī)則的性能和內(nèi)存功能,可增強(qiáng)生成式 AI 和高性能計(jì)算 (HPC) 工作負(fù)載。單塊 H200 的 FP16 算力是 1979 TFLOPS。
作為首款采用 HBM3e 的 GPU,H200 借助更大更快的內(nèi)存可加速生成式 AI 和大型語(yǔ)言模型 (LLM) 的運(yùn)行,同時(shí)推進(jìn) HPC 工作負(fù)載的科學(xué)計(jì)算。
老黃送顯卡,看來(lái)正在成為英偉達(dá)的慣例。不過(guò)還有一個(gè)不得不說(shuō)的故事,就是神經(jīng)網(wǎng)絡(luò)剛剛興起的時(shí)候,英偉達(dá)曾經(jīng)「拒絕」過(guò)人工智能先驅(qū) Geoffrey Hinton。
2009 年 Hinton 的研究小組在使用英偉達(dá)的 CUDA 平臺(tái)訓(xùn)練神經(jīng)網(wǎng)絡(luò)來(lái)識(shí)別人類(lèi)語(yǔ)音。他對(duì)研究結(jié)果的質(zhì)量感到驚訝,并于當(dāng)年晚些時(shí)候的一次會(huì)議上介紹了這些結(jié)果。Hinton 聯(lián)系了英偉達(dá),「我發(fā)了一封電子郵件說(shuō),聽(tīng)著,我剛剛告訴一千名機(jī)器學(xué)習(xí)研究人員,他們應(yīng)該去購(gòu)買(mǎi)英偉達(dá) GPU。你能給我免費(fèi)寄來(lái)一份嗎?」結(jié)果英偉達(dá)拒絕了。
盡管受到冷落,Hinton 仍然鼓勵(lì)他的學(xué)生使用 CUDA,其中包括傳奇學(xué)者 Alex Krizhevsky。2012 年,Krizhevsky 和他的研究伙伴 Ilya Sutskever 在預(yù)算緊張的情況下從亞馬遜購(gòu)買(mǎi)了兩張 GeForce 顯卡,訓(xùn)練視覺(jué)識(shí)別神經(jīng)網(wǎng)絡(luò),這才有了一代經(jīng)典 AlexNet。
不過(guò)在 2018 年 9 月,在一次慶祝英偉達(dá)多倫多 AI 實(shí)驗(yàn)室(Toronto AI Lab)成立的會(huì)上,黃仁勛送給了 Hinton 一塊 TITAN V 顯卡。這也算是彌補(bǔ)了當(dāng)初拒絕 Hinton 的遺憾。
圖源:https://twitter.com/PengDai_ca/status/1043496117244170240
除了交付 AI 算力,英偉達(dá)在投資領(lǐng)域也有新的動(dòng)向。本周三據(jù)彭博社等媒體報(bào)道,英偉達(dá)正式宣布有意收購(gòu) AI 基礎(chǔ)設(shè)施管理平臺(tái) Run:ai。該交易的價(jià)值并未透露,但估計(jì)約為 7 億美元。
Run:ai 由 Omri Geller(首席執(zhí)行官)和 Ronen Dar (首席技術(shù)官)于 2018 年創(chuàng)立。該公司開(kāi)發(fā)了一個(gè)并行算力的編排和虛擬化軟件層,以滿(mǎn)足在 GPU 和類(lèi)似芯片組上運(yùn)行的人工智能工作負(fù)載的獨(dú)特需求。Run:ai 基于 Kubernetes 的 AI 云容器平臺(tái)通過(guò)自動(dòng)分配必要的計(jì)算能力(從部分 GPU 到多個(gè) GPU,再到多個(gè) GPU 節(jié)點(diǎn)),能夠幫助用戶(hù)有效地池化和共享 GPU。
不斷擴(kuò)充朋友圈,同時(shí)資助構(gòu)建 GPU 算力的公司,英偉達(dá)的 AI 版圖已越來(lái)越大。