DeepSeek上臉實(shí)測(cè):AR眼鏡實(shí)時(shí)翻譯老黃GTC演講,完了還幫我劃重點(diǎn)
DeepSeek、通義千問(wèn)等大模型 + AR眼鏡,打開GTC老黃演講的姿勢(shì),可以是這樣:
圖片
翻譯的字幕就在眼前,根據(jù)演講實(shí)時(shí)更新。
還能一鍵總結(jié)摘要:
實(shí)測(cè)為演講部分內(nèi)容,并非全文
只憑一副看上去平平無(wú)奇的眼鏡,就能隨身帶一個(gè)翻譯官+助手。
圖片
摘下眼鏡,立刻回歸現(xiàn)實(shí)。
同時(shí)也可以是一個(gè)隨身攜帶,隨時(shí)可直接喚醒的AI助手。
提問(wèn)一句,什么是相對(duì)論?專業(yè)回答立刻浮現(xiàn)眼前。
圖片
而且根據(jù)問(wèn)題的難易,后臺(tái)會(huì)自動(dòng)選擇不同大模型進(jìn)行回答。
圖片
如上體驗(yàn)來(lái)自星紀(jì)魅族StarV Air2眼鏡,它是一款具有多種AI能力的AR眼鏡。
最近DeepSeek+萬(wàn)物,AR眼鏡是其一,也是最令人好奇的一種結(jié)合。
AI+AR到底有哪些新體驗(yàn)?來(lái)看我們的實(shí)測(cè)。
讓AI能力浮現(xiàn)眼前
首先來(lái)看下StarV Air2的基本信息。
它自重44g,和普通板材眼鏡重量的差別非常小。輕度使用下,續(xù)航可滿足日常8小時(shí)佩戴,重度使用翻譯等功能時(shí)可使用2-3小時(shí)。
顯示方面采用更輕量化的光波導(dǎo)方案。鏡片分辨率為640×480,入眼峰值亮度2000nits,光引擎為Micro LED單綠光引擎,F(xiàn)OV對(duì)角線30度。
圖片
運(yùn)行內(nèi)存為RAM 32M+ROM 20M,機(jī)身內(nèi)存為64M NAND Flash。
支持近視配鏡,1800度以下近視、200度以下散光都可以。
StarV Air2搭載Flyme XR 2.0系統(tǒng),支持調(diào)用自研Flyme AI大模型以及通義千問(wèn)、字節(jié)豆包、百度文心一言等三方大模型,并第一時(shí)間接入DeepSeek。
主要可實(shí)現(xiàn)的功能有6方面:
- 翻譯官
- 會(huì)議助手
- 備忘錄
- 提詞器
- AR導(dǎo)航
- 語(yǔ)音轉(zhuǎn)寫
據(jù)介紹,StarV Air2支持13種語(yǔ)言的實(shí)時(shí)對(duì)話翻譯,包括英語(yǔ)、日語(yǔ)、俄語(yǔ)、法語(yǔ)等,安靜環(huán)境下的準(zhǔn)確率高達(dá)99%。
會(huì)議助手支持自動(dòng)錄音并轉(zhuǎn)寫會(huì)議內(nèi)容,生成會(huì)議紀(jì)要總結(jié)。這些需要在手機(jī)端操作,語(yǔ)音助手“小溪”會(huì)自動(dòng)提供中英文摘要和待辦事項(xiàng)。
屬于把錄音筆、AI辦公軟件二合一了。
圖片
將實(shí)時(shí)路況投射在眼鏡上,顯示剩余里程和方向切換,支持騎行、步行和駕車三種模式。
圖片
此外它還支持接聽電話以及一些三方App功能。
比如支持了QQ音樂。然后就能通過(guò)語(yǔ)音控制音樂播放/暫停、切換。音樂通過(guò)眼鏡的音響播放,音量適中情況下,距離眼鏡20公分外聽不到任何漏音。
圖片
整體體驗(yàn)下來(lái),這副眼鏡在佩戴舒適度上已經(jīng)表現(xiàn)很好,長(zhǎng)時(shí)間使用也沒有發(fā)燙。
交互主要通過(guò)語(yǔ)音、眼鏡物理按鍵以及手機(jī)App端操作。眼鏡上的按鍵只有2個(gè),主鍵可以顯示屏幕、長(zhǎng)按喚醒語(yǔ)音助手,滑輪支持翻譯以及會(huì)議記錄等上下查看、不同按鍵切換(類似于方向鍵),按下滑輪鍵為確認(rèn)。
圖片
另外眼鏡還支持和StarV Ring2智能指環(huán)一起使用,指環(huán)可以隨身佩戴監(jiān)控一系列健康數(shù)據(jù)。
圖片
快速接入DeepSeek-V3,本地不跑大模型
綜上來(lái)看,AI+AR正處在一個(gè)早期積極探索的時(shí)期,包括星紀(jì)魅族在內(nèi),廠商們通過(guò)實(shí)際產(chǎn)品給出了一些初步探索答案。
在這之中,共識(shí)和差異并存,構(gòu)成了當(dāng)下“百鏡大戰(zhàn)”的局面。
首先,在產(chǎn)品路線上,已經(jīng)表現(xiàn)出很大差異。
一部分廠商推出了AI眼鏡,它們不帶顯示功能,通過(guò)攝像頭和語(yǔ)音進(jìn)行多模態(tài)交互問(wèn)答;另一部分廠商則推出了更加AI化的AR眼鏡,依舊具備顯示能力,但同時(shí)也增加了AI功能。
圖片
但二者又表現(xiàn)出一些共性,比如在外觀形態(tài)上都在極力向普通眼鏡靠攏。重量更輕、設(shè)計(jì)更時(shí)尚、續(xù)航也更持久,力爭(zhēng)能替代普通眼鏡。
這需要廠商們?cè)诒U涎坨R基本能力的同時(shí),還進(jìn)一步降低自重和功耗,提升佩戴體驗(yàn)、延長(zhǎng)用戶佩戴時(shí)間。
以星紀(jì)魅族StarV Air2為例,盡管它強(qiáng)調(diào)了自身的AI屬性,但是端側(cè)并沒有放任何生成式AI大模型。這樣做是為了降低功耗、延長(zhǎng)眼鏡續(xù)航。
據(jù)星紀(jì)魅族XR業(yè)務(wù)線總經(jīng)理郭鵬介紹,StarV Air2可以保障用戶8小時(shí)佩戴,一天一次的充電頻率才是能被大家所接受的。
顯示方面,StarV Air2首發(fā)搭載0.15cc單綠光機(jī),這款光機(jī)只有一粒綠豆的大小,它可以投射高達(dá)百萬(wàn)尼特的亮度,更是AR眼鏡輕量化的關(guān)鍵突破。更小的光機(jī)采用使得顯示區(qū)域的結(jié)構(gòu)設(shè)計(jì)進(jìn)行了更多優(yōu)化,整個(gè)眼鏡的線條更加流暢,造型更美觀,更偏日?;?。
圖片
其次,一副更AI化的AR眼鏡,先做哪些能力?后做哪些能力?不同廠商也有不同的思考維度。
圖片
星紀(jì)魅族選擇先做了顯示能力。
郭鵬解釋,從終局來(lái)看一定會(huì)all in one,也就是給AR眼鏡配上攝像頭。
相對(duì)而言,顯示能力伴隨AR產(chǎn)品體驗(yàn)的始終,更直接影響用戶體驗(yàn)。在這方面,星紀(jì)魅族還與鯤游光電在光波導(dǎo)鏡片上進(jìn)行一系列創(chuàng)新,將彩虹紋壓制到同產(chǎn)品最優(yōu)水平,可以保證標(biāo)準(zhǔn)全角度環(huán)境光下,用戶視野上下左右各20度以內(nèi)零彩虹紋。
(彩虹紋現(xiàn)象就像是在眼鏡鏡片上看到了“彩虹”一樣。它是一種光學(xué)干擾現(xiàn)象,通常在一些特殊的光學(xué)設(shè)備比如AR眼鏡中出現(xiàn)。)
在擁抱AI方面,DeepSeek熱潮下,星紀(jì)魅族也是第一批接入的AR眼鏡玩家。具體模型型號(hào)上選擇了DeepSeek-V3,可保證眼鏡能快速處理問(wèn)答。后續(xù)如果用戶有在眼鏡端使用推理能力的需求,再納入R1等模型。
至于AR眼鏡的攝像能力,郭鵬透露星紀(jì)魅族也正在積極布局了:
今年星紀(jì)魅族也會(huì)做拍攝類的眼鏡產(chǎn)品,而且有自身的天生優(yōu)勢(shì)。
郭鵬表示,從技術(shù)角度來(lái)看,給AR眼鏡增加攝像頭的光學(xué)、算法的技術(shù)要求都和手機(jī)非常重合。星紀(jì)魅族手機(jī)在該領(lǐng)域的長(zhǎng)期積累,為此提供了很好支撐。
實(shí)際上,AR眼鏡的拍攝能力很有必要。一方面它比手機(jī)拍攝更方便,另一方面它能提供人眼第一視角的畫面,本身也是獨(dú)特優(yōu)勢(shì)。
從AI角度看,AR眼鏡的多模態(tài)交互也一定會(huì)納入視覺能力。
未來(lái)可能有視頻、手勢(shì)、環(huán)境感知等形式交互,這都依賴于攝像頭的采集功能。
最后,在各家發(fā)展路線都不盡相同的局面下,什么會(huì)決定AR眼鏡的終局?
在星紀(jì)魅族看來(lái),生態(tài)決定終局。
郭鵬認(rèn)為,行業(yè)已經(jīng)在朝著更深度的生態(tài)整合邁進(jìn)。AR眼鏡突破單一硬件產(chǎn)品的趨勢(shì)明顯,嵌入更廣闊的智能設(shè)備網(wǎng)絡(luò),與手機(jī)、智能穿戴設(shè)備甚至智能汽車的聯(lián)動(dòng)能力,正在不斷突破大家對(duì) AR 眼鏡的想象。
據(jù)了解,星紀(jì)魅族是AR行業(yè)里唯一一家具備全生態(tài)布局的企業(yè),覆蓋手機(jī)、汽車、智能家居、可穿戴硬件等。
未來(lái),AR眼鏡可以和汽車互聯(lián),替代一部分汽車駕駛中的車載娛樂行為;可以和穿戴設(shè)備整合,把健康數(shù)據(jù)接通到眼鏡上。
結(jié)合AI智能助手的趨勢(shì),在同一套生態(tài)里,AI助手能在不同設(shè)備之間流轉(zhuǎn),能在不同場(chǎng)景、不同設(shè)備上提供服務(wù),最終變成像“賈維斯”一樣的超級(jí)助手。
而在AR發(fā)展早期,建立好強(qiáng)大生態(tài)的團(tuán)建是團(tuán)結(jié)開發(fā)者和行業(yè)的力量。星紀(jì)魅族即將推出StarV 智能眼鏡能力的開放平臺(tái)-滿天星 1.0,能夠讓開發(fā)者和行業(yè)合作伙伴快速在平臺(tái)上構(gòu)建各種應(yīng)用,豐富生態(tài)。
艾瑞咨詢發(fā)布的《2024年消費(fèi)級(jí)AR眼鏡市場(chǎng)動(dòng)態(tài)與行業(yè)趨勢(shì)洞察》報(bào)告也進(jìn)一步佐證了這一觀點(diǎn)。
短期內(nèi),硬件參數(shù)+爆款產(chǎn)品決定市場(chǎng)份額;長(zhǎng)期來(lái)看,具備跨設(shè)備協(xié)同能力、開發(fā)者規(guī)模、數(shù)據(jù)資產(chǎn)厚度將成為品牌分水嶺。
圖片
One More Thing
不過(guò)對(duì)于咱們普通消費(fèi)者而言,最關(guān)心的肯定還是價(jià)格(doge)。
目前市面上的AI+AR眼鏡價(jià)位普遍在2000-3000之間,AI拍攝眼鏡的價(jià)格則打到了2000元以下。
那么,更便宜和更多功能之間,哪個(gè)會(huì)更令你心動(dòng)?
對(duì)于智能眼鏡這類新型終端,你還有哪些期待?說(shuō)出你的想法,可能就會(huì)被廠商們看到哦~