史上最強AR眼鏡來了!成本7萬塊,黃仁勳親自站臺|Meta Connect 2024一文看盡
Meta首款AR眼鏡Orion終於亮相!
一年一度的年度盛會Meta Connect 2024上在加州Menlo Park舉辦。一如既往,扎克伯格又從Meta員工戴手銬的保險箱中小心翼翼地取出了憋了許久的大招——首款AR眼鏡Orion。據Meta介紹,每副眼鏡的生產成本大約1萬美元(約7萬人民幣),這可能也是史上最貴AR眼鏡。
Orion爲分體式設計,採用波導方案設計,擁有厚重黑色邊框,重98g。該AR眼鏡能與Meta自研的肌電手環相適配,擁有手部跟蹤、眼部跟蹤、頭部追蹤等多種交互方式。
從演示視頻上來看,用戶戴上Orion可以刷網頁、看短劇,甚至玩一些簡單的3D遊戲。當然,你也可以在Orion上聽音樂、接視頻電話。
不過,現階段的Orion 眼鏡僅用作演示和內部開發套件,大約僅生產1000副,並不對外正式開售。
這次Meta官方几乎沒有提任何有關Orion的參數信息,芯片、光學、續航均未涉及。小扎只是拉來一衆好友體驗這款AR眼鏡,爲其站臺。英偉達CEO黃仁勳在體驗這款AR眼鏡時,直言:“顯示很棒,追蹤很棒,色彩也很不錯。”
不過,彆着急驚豔,圈內一衆科技博主早已拿到了Orion進行深度體驗。
我們也進一步梳理了Orion詳細信息:
1、AR眼鏡採用分體式設計:Orion眼鏡本身(98g)、獨立計算單元、肌電手環;
2、基本硬件配置:7個攝像頭、定製芯片、碳化硅光波導鏡片、Micro LED微型顯示器;
3、成本:每幅Orion成本高達1萬美金,僅1000副、不發售;
4、Orion二代:Meta首款消費級AR眼鏡、鏡片更薄、非碳化硅光波導鏡片、分辨率更高;
此外,Meta還推出了Quest 3平價版Quest 3S,主芯片採用的是高通驍龍XR2 Gen 2芯片,其他基本配置與Quest 2相差不大,128G版本售價299.99美元,9月25日開售,10月15日上架。
Meta還展示了生成式AI如何與自家的社交全家桶相結合,並且推出Meta AI高級語音功能、AI視頻以及AI翻譯功能。
在大模型方面,Meta推出第一個能夠同時處理圖像和文本的開源模型Llama 3.2。該模型可以創建AI應用程序,例如提供實時視頻理解的AR應用程序、基於內容對圖像進行視覺搜索引擎或長文本分析。
發佈會結束後Meta股價一路上漲,截止發稿前,最高點漲至575.77美元/股。
碳化硅+Micro LED波導方案,擁有超大70度視場角
Meta最秀肌肉展現實力的部分,是Orion的光學設計,可以看出Meta用材用料相當捨得。
Orion採用衍射光波導設計,波導片選擇了碳化硅鏡片,重量更輕、更耐用,折射率高。Meta首席技術官Andrew Bosworth在談到這些鏡片時表示:“你無法想象產量有多低。”
並且,Meta選擇了Micro LED微型LED顯示器,從發佈會展示的圖片中,我們推測大概率採用的是三色合一的光機方案。
從視頻顯示效果來看,Orion眼鏡中間採用相當大的棱形四邊形波導片,較大的波導片能夠帶來更廣範圍的顯示區域。測評顯示,Orion擁有70度超大FOV,遠超業內常規波導類AR眼鏡25度FOV(視場角)水平。
分體式設計,採用定製化芯片
Orion採用的是分體式設計,這意味着該AR眼鏡還擁有一個單獨的計算單元,承擔主要的計算能力。Meta稱之爲“可以忽略不計的冰球”。
具體而言,有關Orion位置跟蹤、手部跟蹤、眼部跟蹤以及一些圖形算法將會在眼鏡端運行。一些渲染和常規計算處理在控制器上運行,並將數據結果無線傳輸到眼鏡。
Meta提到Orion的眼鏡端採用了定製芯片。聯合黃仁勳鮮少站臺的行爲,有不少網友推測,這款定製芯片有可能是英偉達打造。同時,眼鏡端的輕質鎂框架可以快速散熱。
與肌電手環適配,支持四大交互方式
在交互方面,Orion可能是目前業內支持最多交互形式的AR眼鏡,可以支持眼動、頭動、語音以及手勢四大交互方式。
Meta專門爲Orion開發了肌電手環。該手環主要採用了肌電圖 (EMG) 技術,採用高性能紡織材料,可以通過感知手腕的肌肉活動來追蹤微小的手指運動。
目前,腕帶可以識別幾種基本操作:用拇指捏住食指可選擇內容;捏住中指和拇指可調用或隱藏應用啓動器;用拇指在閉合的手掌上做出拋硬幣手勢可向上或向下滾動。
結合眼動交互的肌電手環,Orion主要用眼睛充當指針,而捏合手指充當點擊。 這一點也是 和蘋果相似的交互邏輯 。
Meta 表示,該肌電手環不受眼鏡攝像頭的視野限制,用戶在任何位置都可以進行滑動、點擊、滾動等操作。在兩年前的Connect大會上,Meta展示了一系列肌電手環的酷炫操作,其中,最炫酷的則是,AR眼鏡實現鍵盤“投影”,用戶用肌電手環進行文本輸入。
採用7顆攝像頭,支持SLAM空間定位
據The Verge的記者介紹,鏡框內嵌有七個攝像頭,可以將虛擬物體固定在現實空間中,協助眼球和手部跟蹤,並讓 Meta 的 AI 助手瞭解您正在看什麼。Meta的這一攝像頭圍繞鏡框佈置的設計,與蘋果Vision Pro的設計異曲同工。
用戶可以讓虛擬窗口保持打開狀態,轉過頭走開,只要眼鏡還在,當您用戶來時,窗口仍然在那裡。這意味着Orion擁有SLAM空間定位功能,可以稱上真正意義上的AR眼鏡。
遊戲幾乎無延遲,與小扎對打乒乓球
在內容上,Orion目前的主要功能是結合Meta AI進行一些基礎的交互,玩一些簡單的AR 遊戲、實現免提視頻通話和多個虛擬屏幕同屏共享等功能。
比如說,The Verge的記者就和小扎當面來了一場3D版本的虛擬乒乓對決。(gif)兩位Orion用戶需要掃描二維碼配對眼鏡,然後使用手勢跟蹤來控制球拍。“遊戲幾乎沒有延遲。”The Verge的記者說。
記者還通過Orion中的Meta AI識別擺放在桌子上的配料,製作冰沙。幾秒鐘後,它就正確地將標籤放在各類配料上,並在配料上方的窗口中生成冰沙的配方指南。
Orion二代將於未來幾年推出,或是首款消費級AR眼鏡
Meta透露,Orion的二代版本將於未來幾年推出,這可能是Meta首款消費級AR眼鏡,其價格應該與當今的手機和筆記本電腦相當。
據瞭解首款消費級AR眼鏡的鏡片不會採用碳化硅製成,視野也不會那麼大,但分辨率會更高。如果一切按計劃進行,鏡框厚度將只有現在Orion眼鏡的一半左右。
Orion產品負責人Rahul Prasad透露:“獲得更大的視野是一個科學問題。下一階段是工程問題,即獲得更高的分辨率、更高的亮度和更低的成本。
扎克伯格提到AR眼鏡必須很好,用戶纔想要會將其佩戴在臉上。AR眼鏡需要在用戶不使用AR時,也能夠提供一些基礎服務。他還談到AR眼鏡的發展並非一蹴而就,不同的智能眼鏡將會起到不同的功能,像是Ray-Ban智能眼鏡適合一些輕應用的場景。
AI視頻、AI翻譯、AI高級語音,Meta AI打造內容創作工具箱
Meta與OpenAI接連上線了AI高級語音功能,可以幫助AI模型配上許多知名演員的聲音,用戶可以選擇Dame Judi Dench、John Cena、Keegan Michael Key和Kristen Bell的聲音,與之交互。
發佈會上,扎克伯格與AI版Stevenson進行了對話。史蒂文森的AI助手回答了有關其創作過程的問題。同時,Meta AI還可以將西班牙語的視頻直接轉換成英語視頻。“與文本相比,用語音與AI互動是一種更好的方式。”扎克伯格說。
同時,Meta AI還助力Ray-Ban智能眼鏡的功能升級。現在,Ray-Ban智能眼鏡與AI結合後,用戶可以直接藉助智能眼鏡記錄自己做菜過程,或者一鍵記錄自己的停車位置。
如果你在街上拿到了一張海報,也可以直接藉助智能眼鏡拍攝相關二維碼,或者一鍵撥打電話。 如今,Ray-Ban智能眼鏡還支持了 AI翻譯功能 。 用戶可以藉助AI直接翻譯用戶的話語。 可以說,該功能直接爲用戶打造了一個同聲傳譯助理。
不過,在現場的演示過程中,Meta AI的翻譯似乎翻車,無法翻譯扎克伯格與西語講述者之間長時間對話。
扎克伯格說,Meta Ray-Ban智能眼鏡的對話功能越來越強,它們將能更好地記憶你所看到的內容。它們還將配備多模態人工智能,能夠實時爲用戶提供幫助。
AR眼鏡加持,Meta借生成式AI重回寶座
2024年,Meta憑藉生成式AI的突破性進展,成功逆轉了其元宇宙領域發展的困境,股價一路飆升,重返美股市值前十的寶座。作爲AVR領域的領軍人物,Meta在Connect大會展示出的產品和技術,往往會成爲業內矚目的焦點。
過往幾年以Quest系列爲代表的頭顯一直是Meta Connect大會的主旋律,我們也看到了Meta在高端頭顯Meta Quest Pro、消費級頭顯Quest 3、Quest 3上做出不同探索。但今年,Meta終於在AR方向亮相了憋了許久的大招——首款AR眼鏡Orion。
與業內常見波導類的AR眼鏡相比,Orion用材相當捨得。其中,最爲驚豔的是超大視場角,這也是Meta堆料展現了AR眼鏡天花板。不過,從現有視頻顯示來看,似乎仍然出現掉幀、顯示不清晰等情況。
此外,Meta還擁有其他AR廠商所不具備的強大AI底層能力。Ray-Ban智能眼鏡和AI的結合玩法,究竟會在用戶中反饋如何?這或許將影響不帶顯示功能的智能眼鏡市場變化。
“我曾以爲元宇宙在AI出現之前就能實現。”扎克伯格說:“命運的轉折很有趣,AI在元宇宙真正能夠以可普及前就先爆發。”
⭐星標華爾街見聞,好內容不錯過⭐
本文不構成個人投資建議,不代表平臺觀點,市場有風險,投資需謹慎,請獨立判斷和決策。
覺得好看,請點“在看”