DeepSeek上臉實測:AR眼鏡實時翻譯老黃GTC演講,完了還幫我劃重點
DeepSeek、通義千問等大模型 + AR眼鏡,打開GTC老黃演講的姿勢,可以是這樣:
圖片
翻譯的字幕就在眼前,根據(jù)演講實時更新。
還能一鍵總結(jié)摘要:
實測為演講部分內(nèi)容,并非全文
只憑一副看上去平平無奇的眼鏡,就能隨身帶一個翻譯官+助手。
圖片
摘下眼鏡,立刻回歸現(xiàn)實。
同時也可以是一個隨身攜帶,隨時可直接喚醒的AI助手。
提問一句,什么是相對論?專業(yè)回答立刻浮現(xiàn)眼前。
圖片
而且根據(jù)問題的難易,后臺會自動選擇不同大模型進行回答。
圖片
如上體驗來自星紀魅族StarV Air2眼鏡,它是一款具有多種AI能力的AR眼鏡。
最近DeepSeek+萬物,AR眼鏡是其一,也是最令人好奇的一種結(jié)合。
AI+AR到底有哪些新體驗?來看我們的實測。
讓AI能力浮現(xiàn)眼前
首先來看下StarV Air2的基本信息。
它自重44g,和普通板材眼鏡重量的差別非常小。輕度使用下,續(xù)航可滿足日常8小時佩戴,重度使用翻譯等功能時可使用2-3小時。
顯示方面采用更輕量化的光波導方案。鏡片分辨率為640×480,入眼峰值亮度2000nits,光引擎為Micro LED單綠光引擎,F(xiàn)OV對角線30度。
圖片
運行內(nèi)存為RAM 32M+ROM 20M,機身內(nèi)存為64M NAND Flash。
支持近視配鏡,1800度以下近視、200度以下散光都可以。
StarV Air2搭載Flyme XR 2.0系統(tǒng),支持調(diào)用自研Flyme AI大模型以及通義千問、字節(jié)豆包、百度文心一言等三方大模型,并第一時間接入DeepSeek。
主要可實現(xiàn)的功能有6方面:
- 翻譯官
- 會議助手
- 備忘錄
- 提詞器
- AR導航
- 語音轉(zhuǎn)寫
據(jù)介紹,StarV Air2支持13種語言的實時對話翻譯,包括英語、日語、俄語、法語等,安靜環(huán)境下的準確率高達99%。
會議助手支持自動錄音并轉(zhuǎn)寫會議內(nèi)容,生成會議紀要總結(jié)。這些需要在手機端操作,語音助手“小溪”會自動提供中英文摘要和待辦事項。
屬于把錄音筆、AI辦公軟件二合一了。
圖片
將實時路況投射在眼鏡上,顯示剩余里程和方向切換,支持騎行、步行和駕車三種模式。
圖片
此外它還支持接聽電話以及一些三方App功能。
比如支持了QQ音樂。然后就能通過語音控制音樂播放/暫停、切換。音樂通過眼鏡的音響播放,音量適中情況下,距離眼鏡20公分外聽不到任何漏音。
圖片
整體體驗下來,這副眼鏡在佩戴舒適度上已經(jīng)表現(xiàn)很好,長時間使用也沒有發(fā)燙。
交互主要通過語音、眼鏡物理按鍵以及手機App端操作。眼鏡上的按鍵只有2個,主鍵可以顯示屏幕、長按喚醒語音助手,滑輪支持翻譯以及會議記錄等上下查看、不同按鍵切換(類似于方向鍵),按下滑輪鍵為確認。
圖片
另外眼鏡還支持和StarV Ring2智能指環(huán)一起使用,指環(huán)可以隨身佩戴監(jiān)控一系列健康數(shù)據(jù)。
圖片
快速接入DeepSeek-V3,本地不跑大模型
綜上來看,AI+AR正處在一個早期積極探索的時期,包括星紀魅族在內(nèi),廠商們通過實際產(chǎn)品給出了一些初步探索答案。
在這之中,共識和差異并存,構(gòu)成了當下“百鏡大戰(zhàn)”的局面。
首先,在產(chǎn)品路線上,已經(jīng)表現(xiàn)出很大差異。
一部分廠商推出了AI眼鏡,它們不帶顯示功能,通過攝像頭和語音進行多模態(tài)交互問答;另一部分廠商則推出了更加AI化的AR眼鏡,依舊具備顯示能力,但同時也增加了AI功能。
圖片
但二者又表現(xiàn)出一些共性,比如在外觀形態(tài)上都在極力向普通眼鏡靠攏。重量更輕、設(shè)計更時尚、續(xù)航也更持久,力爭能替代普通眼鏡。
這需要廠商們在保障眼鏡基本能力的同時,還進一步降低自重和功耗,提升佩戴體驗、延長用戶佩戴時間。
以星紀魅族StarV Air2為例,盡管它強調(diào)了自身的AI屬性,但是端側(cè)并沒有放任何生成式AI大模型。這樣做是為了降低功耗、延長眼鏡續(xù)航。
據(jù)星紀魅族XR業(yè)務(wù)線總經(jīng)理郭鵬介紹,StarV Air2可以保障用戶8小時佩戴,一天一次的充電頻率才是能被大家所接受的。
顯示方面,StarV Air2首發(fā)搭載0.15cc單綠光機,這款光機只有一粒綠豆的大小,它可以投射高達百萬尼特的亮度,更是AR眼鏡輕量化的關(guān)鍵突破。更小的光機采用使得顯示區(qū)域的結(jié)構(gòu)設(shè)計進行了更多優(yōu)化,整個眼鏡的線條更加流暢,造型更美觀,更偏日常化。
圖片
其次,一副更AI化的AR眼鏡,先做哪些能力?后做哪些能力?不同廠商也有不同的思考維度。
圖片
星紀魅族選擇先做了顯示能力。
郭鵬解釋,從終局來看一定會all in one,也就是給AR眼鏡配上攝像頭。
相對而言,顯示能力伴隨AR產(chǎn)品體驗的始終,更直接影響用戶體驗。在這方面,星紀魅族還與鯤游光電在光波導鏡片上進行一系列創(chuàng)新,將彩虹紋壓制到同產(chǎn)品最優(yōu)水平,可以保證標準全角度環(huán)境光下,用戶視野上下左右各20度以內(nèi)零彩虹紋。
(彩虹紋現(xiàn)象就像是在眼鏡鏡片上看到了“彩虹”一樣。它是一種光學干擾現(xiàn)象,通常在一些特殊的光學設(shè)備比如AR眼鏡中出現(xiàn)。)
在擁抱AI方面,DeepSeek熱潮下,星紀魅族也是第一批接入的AR眼鏡玩家。具體模型型號上選擇了DeepSeek-V3,可保證眼鏡能快速處理問答。后續(xù)如果用戶有在眼鏡端使用推理能力的需求,再納入R1等模型。
至于AR眼鏡的攝像能力,郭鵬透露星紀魅族也正在積極布局了:
今年星紀魅族也會做拍攝類的眼鏡產(chǎn)品,而且有自身的天生優(yōu)勢。
郭鵬表示,從技術(shù)角度來看,給AR眼鏡增加攝像頭的光學、算法的技術(shù)要求都和手機非常重合。星紀魅族手機在該領(lǐng)域的長期積累,為此提供了很好支撐。
實際上,AR眼鏡的拍攝能力很有必要。一方面它比手機拍攝更方便,另一方面它能提供人眼第一視角的畫面,本身也是獨特優(yōu)勢。
從AI角度看,AR眼鏡的多模態(tài)交互也一定會納入視覺能力。
未來可能有視頻、手勢、環(huán)境感知等形式交互,這都依賴于攝像頭的采集功能。
最后,在各家發(fā)展路線都不盡相同的局面下,什么會決定AR眼鏡的終局?
在星紀魅族看來,生態(tài)決定終局。
郭鵬認為,行業(yè)已經(jīng)在朝著更深度的生態(tài)整合邁進。AR眼鏡突破單一硬件產(chǎn)品的趨勢明顯,嵌入更廣闊的智能設(shè)備網(wǎng)絡(luò),與手機、智能穿戴設(shè)備甚至智能汽車的聯(lián)動能力,正在不斷突破大家對 AR 眼鏡的想象。
據(jù)了解,星紀魅族是AR行業(yè)里唯一一家具備全生態(tài)布局的企業(yè),覆蓋手機、汽車、智能家居、可穿戴硬件等。
未來,AR眼鏡可以和汽車互聯(lián),替代一部分汽車駕駛中的車載娛樂行為;可以和穿戴設(shè)備整合,把健康數(shù)據(jù)接通到眼鏡上。
結(jié)合AI智能助手的趨勢,在同一套生態(tài)里,AI助手能在不同設(shè)備之間流轉(zhuǎn),能在不同場景、不同設(shè)備上提供服務(wù),最終變成像“賈維斯”一樣的超級助手。
而在AR發(fā)展早期,建立好強大生態(tài)的團建是團結(jié)開發(fā)者和行業(yè)的力量。星紀魅族即將推出StarV 智能眼鏡能力的開放平臺-滿天星 1.0,能夠讓開發(fā)者和行業(yè)合作伙伴快速在平臺上構(gòu)建各種應用,豐富生態(tài)。
艾瑞咨詢發(fā)布的《2024年消費級AR眼鏡市場動態(tài)與行業(yè)趨勢洞察》報告也進一步佐證了這一觀點。
短期內(nèi),硬件參數(shù)+爆款產(chǎn)品決定市場份額;長期來看,具備跨設(shè)備協(xié)同能力、開發(fā)者規(guī)模、數(shù)據(jù)資產(chǎn)厚度將成為品牌分水嶺。
圖片
One More Thing
不過對于咱們普通消費者而言,最關(guān)心的肯定還是價格(doge)。
目前市面上的AI+AR眼鏡價位普遍在2000-3000之間,AI拍攝眼鏡的價格則打到了2000元以下。
那么,更便宜和更多功能之間,哪個會更令你心動?
對于智能眼鏡這類新型終端,你還有哪些期待?說出你的想法,可能就會被廠商們看到哦~