又一位 DeepMind 高級研究科學(xué)家離開了谷歌，創(chuàng)建了自己的初創(chuàng)公司。

在近日召開的英偉達(dá) GTC 的一個小組討論會上，谷歌 DeepMind 高級研究科學(xué)家、RT-2 作者 Pete Florence 以 Generalist AI 聯(lián)合創(chuàng)始人兼首席執(zhí)行官的身份出席。

人工智能浪潮的來臨讓英偉達(dá)這家公司獲得了巨大的財務(wù)成功，與此同時，NVentures 也成為一家格外活躍的風(fēng)險投資公司。但目前我們無從得知 Pete Florence 的公司獲得了多少來自英偉達(dá)的投資。

「我們基本上仍處于隱秘狀態(tài)，」Pete Florence 在 GTC 討論會上表示，暫時無法具體說明自己的初創(chuàng)公司在做什么。但答案也很明顯了，公司將專注于機(jī)器人技術(shù)。

因為他在回答「如果他的初創(chuàng)公司獲得巨大成功，世界會變成什么樣子」問題時，是這么說的：

「我們的目標(biāo)是制造能做任何事情的機(jī)器人。想象一下，在這個世界上，體力勞動的邊際成本將趨于 0?！?/span>

「讓通用機(jī)器人成為現(xiàn)實」

Florence 表示，自己創(chuàng)辦這家公司的使命是「讓通用機(jī)器人成為現(xiàn)實」。

根據(jù)其領(lǐng)英個人資料，F(xiàn)lorence 一年前離開了 DeepMind。他加入了 DeepMind 前同事的行列 —— 選擇一條喜歡的賽道，創(chuàng)辦自己的公司。

在加入谷歌之前，他在麻省理工學(xué)院獲得了計算機(jī)科學(xué)博士學(xué)位，師從 Russ Tedrake。Tedrake 教授在機(jī)器人學(xué)領(lǐng)域有著顯著的成就和廣泛的影響力，研究領(lǐng)域包括機(jī)器人動力學(xué)分析、控制器設(shè)計和仿真等。

4 年多的谷歌 DeepMind 生涯中，Pete Florence 參與了很多項具備里程碑意義的機(jī)器人和大模型研究，其中最具代表性的有 PaLM-E、RT-2。

隨著 GPT-4 等大型語言模型與機(jī)器人研究的結(jié)合愈發(fā)緊密，人工智能正在越來越多地走向現(xiàn)實世界，因此具身智能相關(guān)的研究也正受到越來越多的關(guān)注。在這一領(lǐng)域，谷歌始終處于比較前沿的位置。

PaLM-E 是一種多模態(tài)具身視覺語言模型（VLM），2023 年 3 月發(fā)布。該模型集成了參數(shù)量 540B 的 PaLM 和參數(shù)量 22B 的視覺 Transformer（ViT），使用文本和來自機(jī)器人傳感器的多模態(tài)數(shù)據(jù)（比如圖像、機(jī)器人狀態(tài)、場景環(huán)境信息等）作為輸入，輸出以文本形式表示的機(jī)器人運(yùn)動指令，進(jìn)行端到端的訓(xùn)練。PaLM-E 實現(xiàn)了對具身任務(wù)的決策方案預(yù)測，不涉及機(jī)器人動作的實際控制，需要依賴低級別的現(xiàn)成策略或規(guī)劃器來將決策方案「翻譯」為機(jī)器人動作。

RT-2 是全球第一個控制機(jī)器人的視覺 - 語言 - 動作（VLA）模型。這個模型讓機(jī)器人不僅能解讀人類的復(fù)雜指令，還能看懂眼前的物體（即使這個物體之前從未見過），并按照指令采取動作。比如，你讓機(jī)器人拿起桌上「已滅絕的動物」。它會抓起眼前的恐龍玩偶。RT-2 被認(rèn)為是機(jī)器人制造和編程方式的重大飛躍。

只需要像對話一樣下達(dá)命令，它就能在一堆圖片中辨認(rèn)出霉霉，并送給她一罐可樂。

這些研究讓谷歌 DeepMind 機(jī)器人團(tuán)隊始終保持著技術(shù)領(lǐng)先性，本月，團(tuán)隊有發(fā)布了用于控制機(jī)器人的新模型，這些模型的論文中還 4 次引用了 Florence 的成果。

核心團(tuán)隊來自 OpenAI、波士頓動力、DeepMind

在 Pete Florence 之外，這家公司的其他核心成員都來自知名科技公司。

同為谷歌 DeepMind 機(jī)器人團(tuán)隊前成員的 Kamyar Ghasemipour，也加入了 Generalist AI 成為創(chuàng)始成員。

OpenAI 前工程負(fù)責(zé)人 Evan Morikawa，曾領(lǐng)導(dǎo)過 ChatGPT、GPT-4、DALL?E 和 API 上線，從 OpenAI 離職后加入了這家初創(chuàng)公司。

團(tuán)隊成員還有前波士頓動力高級機(jī)器人科學(xué)家 Andrew Barry 和 Deep Mind 研究科學(xué)家 Andy Zeng。Andrew Barry 的個人主頁顯示，他擔(dān)任的職位是聯(lián)合創(chuàng)始人和 CTO。Andy Zeng 的社交媒體則沒有透露更多信息。