OpenAI，剛被截胡了？

緊追著OpenAI的「Her」，谷歌也正式官宣：發(fā)布AI語(yǔ)音功能！

就在剛剛「谷歌制造」的主題演講中，谷歌宣布推出語(yǔ)音模式Gemini Live。不久后，Gemini Live就會(huì)在Gemini移動(dòng)應(yīng)用程序中上線。

谷歌和OpenAI的軍備競(jìng)賽，再一次打響。

看看OpenAI那邊，三個(gè)月前石破天驚的「Her」如今依舊沒(méi)個(gè)聲響，這是妥妥要被谷歌截胡的節(jié)奏啊。

在場(chǎng)的谷歌領(lǐng)導(dǎo)Rick Osterloh也意味深長(zhǎng)地表示：「我們聽(tīng)到太多關(guān)于AI的承諾，和即將推出的口號(hào)了。今天，我們要展示的是真實(shí)的進(jìn)展！」

此外，在這次演講中，谷歌還詳細(xì)展示了Gemini會(huì)如何更深入地集成到安卓、應(yīng)用程序和新的Pixel設(shè)備中。

在一口氣發(fā)布的Pixel 9系列手機(jī)中，谷歌也探索了「AI+手機(jī)」的新樣態(tài)：Gemini、安卓、Pixel的融合，會(huì)孵化出怎樣的端側(cè)AI產(chǎn)品形態(tài)。

現(xiàn)在，憑借AI加持的安卓，谷歌能擊敗蘋(píng)果嗎？

谷歌的「Her」，也來(lái)了

根據(jù)谷歌介紹，Gemini Live是一款全新的移動(dòng)對(duì)話體驗(yàn)。

如果我們想要頭腦風(fēng)暴一下，根據(jù)自己的技能和學(xué)歷能找到什么樣的工作，Gemini可以立刻跟我們實(shí)時(shí)對(duì)話。

這個(gè)感覺(jué)，就仿佛口袋里有了一個(gè)隨時(shí)可以聊天的貼心助手。

而且同OpenAI一樣，谷歌的語(yǔ)音功能，同樣可以讓用戶(hù)以自然的對(duì)話語(yǔ)言和它交流，它的回應(yīng)也用的是真人般的聲音和節(jié)奏。

請(qǐng)聽(tīng)下面這個(gè)音頻，幾種男聲和女聲的音色都很自然。

為了讓我們擁有最自然的體驗(yàn)，谷歌一口氣推出了10種聲音，我們可以隨心選擇自己最喜歡的語(yǔ)調(diào)和風(fēng)格。

另外，Gemini Live還支持免提功能。即使Gemini應(yīng)用程序在后臺(tái)，或者手機(jī)正在鎖定，我們依然可以和它對(duì)話，就仿佛在普通的電話中一樣。

還有，我們可以隨時(shí)打斷它、更改話題——看著很眼熟對(duì)吧？沒(méi)錯(cuò)，OpenAI的語(yǔ)音能做的，它都有。

五月份OpenAI驚艷全場(chǎng)的高級(jí)語(yǔ)音功能「Her」，如今依舊在鴿，上個(gè)月底也只是選擇性地向一小部分Alpha測(cè)試參與者開(kāi)放。

在速度上，谷歌明顯吊打了OpenAI。

現(xiàn)在只要花每月19.99美元，就可以在安卓設(shè)備上使用Gemini Live了，只要進(jìn)入谷歌Gemini應(yīng)用程序即可。

目前開(kāi)放的是英語(yǔ)版本，而iOS版本和更多語(yǔ)言的支持，還會(huì)在未來(lái)幾周內(nèi)推出。

另一方面，在用戶(hù)規(guī)模上，谷歌的高級(jí)語(yǔ)音模式也會(huì)接觸比OpenAI更廣泛的潛在用戶(hù)。

要知道，如今全世界有超過(guò)30億的安卓用戶(hù)，和22億的iOS用戶(hù)。

而OpenAI的語(yǔ)音功能鴿了的部分原因，恐怕是跟紅隊(duì)測(cè)試中AI的異常表現(xiàn)有關(guān)。

它的行為令人不安，甚至存在潛在的危險(xiǎn)。而未經(jīng)同意模仿用戶(hù)的聲音，還有可能被用于欺詐等惡意目的。

這些安全問(wèn)題，谷歌就完全解決了嗎？目前沒(méi)人知道，但很明顯——不想屈居人后的谷歌，決定這次也豁出去一把。

但翻了兩次車(chē)

唯一不足的是，Gemini Live現(xiàn)場(chǎng)演示，出現(xiàn)了一些小插曲。

谷歌高管Dave Citron在展示Gemini在安卓新機(jī)連接谷歌日歷、任務(wù)和Keep的新功能時(shí)，沒(méi)想到接連翻車(chē)兩次。

他先用手機(jī)拍攝了一張Sabrina Carpenter在舊金山舉行時(shí)裝秀宣傳海報(bào)，然后問(wèn)道Gemini，「查看我的日程，看看是否有空參加Sabrina Carpenter的時(shí)裝秀」。

Gemini第一次回復(fù)中，卻說(shuō)這里出錯(cuò)了，再?lài)L試一次。

第二次重復(fù)嘗試剛剛步驟時(shí)，Gemini依舊沒(méi)有答復(fù)。

直到第三次（換了一個(gè)設(shè)備），終于給出了結(jié)果，現(xiàn)場(chǎng)一陣歡呼。

重新定義AI助手

在這次演講中，谷歌表示：通過(guò)Gemini，他們重新構(gòu)想了個(gè)人助手對(duì)人類(lèi)真正有用的意義——更自然、對(duì)話式、更直觀。

連接更多應(yīng)用程序

一個(gè)好的AI助手，最重要的關(guān)鍵詞是什么？

連接。

Gemini就是如此，它會(huì)跟我們使用的所有谷歌應(yīng)用程序和工具集成，完成大大小小的任務(wù)。

而跟其他助手不同的是，我們無(wú)需耗費(fèi)功夫，在應(yīng)用程序和服務(wù)之間切換。

而在未來(lái)幾周，谷歌還會(huì)推出全新的擴(kuò)展功能，包括Keep、Tasks、Utilities和YouTube Music。

圖中有什么食物？問(wèn)一嘴Gemini，它全給你列出來(lái)

假設(shè)現(xiàn)在我們要辦一場(chǎng)晚宴，Gemini就可以發(fā)揮它的百般武藝了——

從Gmail中，它可以找出某人發(fā)給我們的千層面食譜，然后把配料添加到Keep的購(gòu)物清單中；然后，在讓Gemini為我們攢一份歌單，要求是「讓我想起90年代末」。

在谷歌即將推出的日歷擴(kuò)展功能中，我們可以直接拍一張音樂(lè)會(huì)的海報(bào)，問(wèn)Gemini：我當(dāng)天有空不？如果答案是yes，還可以讓Gemini幫我們?cè)O(shè)置提醒，準(zhǔn)備搶票。

讓Gemini給教授寫(xiě)個(gè)郵件請(qǐng)個(gè)假，請(qǐng)求deadline再延期幾天，動(dòng)動(dòng)嘴就行了

一鍵召喚Gemini

現(xiàn)在，Gemini已經(jīng)完全融入了安卓的用戶(hù)體驗(yàn)。

只有在安卓系統(tǒng)中，我們才能體會(huì)到如此絲滑的上下文感知功能。

只要拿著一部安卓手機(jī)，無(wú)論我們想要做什么，Gemini都能在需要時(shí)應(yīng)聲出現(xiàn)。

長(zhǎng)按電源按鈕，或者說(shuō)一聲「Hey Google」，就能召喚出Gemini了！

點(diǎn)擊「詢(xún)問(wèn)此屏幕」，就可以獲取有關(guān)屏幕內(nèi)容的幫助。

如果正在使用YouTube，可以向Gemini詢(xún)問(wèn)有關(guān)視頻的問(wèn)題。

比如，假設(shè)我們正在為出國(guó)旅行做攻略，剛看完一個(gè)旅游視頻博客，點(diǎn)擊「詢(xún)問(wèn)此視頻」，讓它列出視頻中出現(xiàn)的所有餐館、添加到谷歌地圖中，Gemini就會(huì)一一照做。

再看下圖，Gemini生成的圖像，可以直接拖放到Gmail和Google Messages中。

相信你已經(jīng)體會(huì)到，這套操作中的妙處了——

因?yàn)镚emini為安卓構(gòu)建了深度集成，AI能做的就不僅僅是讀取屏幕內(nèi)容，還能與我們已經(jīng)在使用的許多應(yīng)用進(jìn)行交互。

Gemini 1.5 Flash，加持AI助手

不過(guò)，還有兩個(gè)問(wèn)題：能更好地解釋自然語(yǔ)言和處理任務(wù)的LLM，往往意味著即使完成簡(jiǎn)單任務(wù)，也需要更多的時(shí)間。

而AI如果表現(xiàn)出意想不到的行為，或提供不準(zhǔn)確的信息，也很讓人頭疼。

為此，谷歌特意引入了新模型——Gemini 1.5 Flash。

它的響應(yīng)更快，回答的質(zhì)量也更高。

在未來(lái)幾個(gè)月內(nèi)，谷歌還會(huì)把模型與Google Home、Phone和Messages進(jìn)行更深層的集成。

谷歌表示，今天我們正式到達(dá)了一個(gè)拐點(diǎn)，AI助手的有用性，遠(yuǎn)遠(yuǎn)超過(guò)了它們的挑戰(zhàn)。

基于Imagen 3打造，2秒生圖

會(huì)上，谷歌還推出了一款全新的AI生圖應(yīng)用——Pixel Studio。

僅需要幾個(gè)提示詞，就能生成一幅精美的圖片。

最重要的是，它是一個(gè)本地生圖APP，基于Imagen 3打造，2秒之內(nèi)便可生成各種圖像。

同在今天，Imagen 3的技術(shù)報(bào)告也出爐了，技術(shù)細(xì)節(jié)可參見(jiàn)32頁(yè)論文。

論文地址：https://arxiv.org/pdf/2408.07009

首款A(yù)I手機(jī)，每月要氪20刀

所有這些AI能力，谷歌全都植入到了最新手機(jī)硬件之中。

現(xiàn)場(chǎng)，谷歌一共發(fā)布了四款A(yù)I手機(jī)——Pixel 9、Pixel9 Pro、Pixel9 Pro XL，以及二代折疊屏Pixel 9 Pro Fold。

在Pixel 9系列新機(jī)上，你一定不能錯(cuò)過(guò)的，就是AI加持的拍照能力。

谷歌表示，圖像處理算法——HDR+pipeline，已完全重建，可以讓拍攝的照片有更好的對(duì)比度、陰影、曝光、銳化、色彩等。

以下是Pixel 9系手機(jī)新增的AI圖像編輯能力：

Add Me

你是否常常遇到，家庭聚會(huì)、團(tuán)建、家人旅行時(shí)，擔(dān)起了拍照的重?fù)?dān)，然而照片中唯獨(dú)少了自己。

不過(guò)，以后就不用擔(dān)心了。

谷歌「加我一個(gè)」（Add Me）功能，就能彌補(bǔ)你的遺憾。

首先，需要拍攝一張團(tuán)體照。然后，負(fù)責(zé)拍照的人與照片中的人交互位置，拍攝一張「攝影師」在內(nèi)的照片。

這時(shí)，Pixel使用實(shí)時(shí)AR技術(shù)，引導(dǎo)第二個(gè)拍照的人去構(gòu)圖，讓其與第一張照片構(gòu)圖相匹配。

最后，然后，Pixel將兩張圖像合并，確保每個(gè)人都出現(xiàn)在同一張照片中，包括「攝影師」在內(nèi)。

Reimagine

另一個(gè)Reimagine功能，便很好理解了。

這時(shí)Magic Editor編輯器中的一項(xiàng)能力，直接在文本框中描述你想要的效果。

AI即可讓你的想法變成現(xiàn)實(shí)。

比如，修改照片中的背景，火山、日落、極光各種場(chǎng)景，隨意發(fā)揮。

Auto Frame

自動(dòng)構(gòu)圖是Magic Editor中的一項(xiàng)新功能，可以為已拍攝好的照片重新構(gòu)圖。

甚至，它可以為你的照片擴(kuò)圖，通過(guò)AI生成空白區(qū)域的背景。

Zoom Enhance

Zoom Enhance可以自動(dòng)填充像素之間空隙，并精準(zhǔn)預(yù)測(cè)細(xì)節(jié)，實(shí)現(xiàn)高質(zhì)量的拍攝放大效果。

AI能力的實(shí)現(xiàn)，離不開(kāi)Pixel 9系列背后強(qiáng)大的芯片。

最強(qiáng)AI處理器：Google Tensor G4

新款手機(jī)采用了谷歌全新設(shè)計(jì)的處理器——Google Tensor G4。

谷歌稱(chēng)，「Tensor G4芯片是我們迄今速度最快、功能最強(qiáng)大的芯片」。

在去年Tensor G3的基礎(chǔ)上，谷歌聯(lián)手三星打造了基于4nm工藝的半定制處理器Tensor G4，利用了Arm提供的CPU和GPU核心。

同時(shí)，它還用上了谷歌自家的模塊，來(lái)增強(qiáng)AI、攝影和安全功能。

據(jù)悉，相比于前兩代，G4在網(wǎng)頁(yè)瀏覽速度提高了20%，APP啟動(dòng)提速17%，應(yīng)用日常使用電池功耗提升多達(dá)20%。

CPU方面，G4配備了1個(gè)運(yùn)行在3.1GHz的Cortex-X4核心、3個(gè)運(yùn)行在2.6GHz的Cortex-A720核心，以及4個(gè)運(yùn)行在 1.95GHz 的 Cortex-A520核心。

相比之下，Tensor G3則是1個(gè)2.91GHz的Cortex-X3核心，4個(gè)2.37GHz的Cortex-A715核心，以及4個(gè)1.70GHz的Cortex-A510核心。

盡管Tensor G4少了一個(gè)核心，但所有核心的時(shí)鐘頻率都提高了200MHz到300MHz。

根據(jù)泄露的Geekbench跑分，Tensor G4在單核測(cè)試中得分為2,005，多核測(cè)試為4,835。相比之下，Tensor G3在單核測(cè)試中的得分為1,751，多核測(cè)試為4,208。均有14%的性能差異。

至于GPU，Tensor G4采用了與去年Tensor G3相同的ARM Mali-G715 GPU，但頻率從890MHz提升到了940MHz。這意味著Tensor G4的GPU性能應(yīng)該略?xún)?yōu)于Tensor G3。

加持全新AI功能

AI當(dāng)然是Tensor項(xiàng)目背后的主要推動(dòng)力之一。

重新設(shè)計(jì)的Tensor G4，便是為了賦能最新Gemini和計(jì)算攝影功能。

可以本地運(yùn)行的Gemini Nano模型（最大版本為35億參數(shù)），能夠以45 token/s的速度輸出內(nèi)容。

雖然，谷歌的TPU已經(jīng)很快，但在token處理方面，并沒(méi)有領(lǐng)先于競(jìng)爭(zhēng)對(duì)手。

相較之下，高通Snapdragon 8 Gen 3運(yùn)行100億參數(shù)時(shí)，每秒可輸出15個(gè)token；聯(lián)發(fā)科Dimensity 9300能以每秒 20個(gè)token運(yùn)行70億參數(shù)。

不過(guò)，Pixel 9系列的獨(dú)特AI功能可能不完全依賴(lài)于新芯片，而是其他因素的結(jié)果。

AI還需要大量的內(nèi)存，并且需要訪問(wèn)快速且龐大的內(nèi)存池來(lái)運(yùn)行更復(fù)雜的模型。

Pixel 9配備12GB RAM，Pro系列升級(jí)到16GB。

谷歌表示，為了獲得更流暢的AI體驗(yàn)，這是它首次劃分出「一部分專(zhuān)用RAM來(lái)在設(shè)備上運(yùn)行Gemini」，防止其他應(yīng)用使用該內(nèi)存。

不過(guò)，谷歌沒(méi)有透露具體劃分了多少，給AI任務(wù)使用。

盡管芯片本身在AI方面沒(méi)有重大升級(jí)，但通過(guò)RAM管理的優(yōu)化，仍可能帶來(lái)更好的AI體驗(yàn)和新功能。