蘋果、Facebook的AR戰略揭秘:佈局AR內容,硬件還在研發

(VRPinea 6月28日訊)2021年,雖然疫情給全社會帶來的打擊仍然存在,但各行業都在慢慢復甦。尤其VR/AR行業,整體態勢還是很蓬勃的,不論是在軟硬件方面,還是行業內投融資情況,都能看出很多積極的動向。

近年來,多家科技巨頭對AR眼鏡研發付諸了極大的熱情,Facebook、蘋果等紛紛押注AR/VR未來。從今年上半年暴露出的各種消息,都可以看出。但研發AR眼鏡的道路佈滿了艱辛和坎坷,諸多技術難題橫亙在眼前,各大科技巨頭也不例外,看似無所不能的“大佬”們在研發AR/VR的過程中也是吃了不少苦頭。

今天P君爲大家梳理一下近期蘋果和Facebook在AR技術方面的動向和動態。

蘋果:硬件未見真身,內容平臺已有精密佈局

在今年WWDC21大會之前,蘋果要發佈AR眼鏡和VR頭顯的傳聞就從未間斷。結果大家都知道,WWDC21大會上蘋果隻字未提此事,大家戲稱蘋果設備開發陷入“難產”。

但其實蘋果不論是專利申請、挖掘人才還是收購AR/VR企業各個方面,都有所動態。硬件雖未見真身,但是軟件內容平臺在精密佈局。

申請專利、擴充團隊、投資收購

蘋果在AR/VR領域的佈局最早可以追溯到2006年,這一年它提交了一項頭戴式顯示器的專利,該專利是一個插手機的頭戴式顯示器。雖然這項專利還不是一款真正的VR頭顯,不過可以看出的是,蘋果從這個時候已經開始探索這個領域。

蘋果AR眼鏡概念圖

從2006年至今的十幾年間,蘋果一直在陸陸續續申請AR/VR領域的相關專利。今年6月透露的最新專利,包括“動態環境照明控制”、"全景光場捕捉、處理和顯示"。“動態環境照明控制”專利是研究如何讓蘋果眼鏡或其AR設備感知並使用HomeKit,自動調整佩戴者周圍的環境照明。該專利的細節顯示了檢測環境光並對其採取行動的可能過程。

“動態環境照明控制”專利

而“全景光場捕捉、處理和顯示”專利,則透露出未來蘋果設備可能會配備可以捕獲光線方向的攝像頭。手機攝像頭通過光線強度調整曝光,再經由全景光場捕獲,全景鏡頭即可用於創建AR內容。

“全景光場捕捉、處理和顯示”專利

不僅如此,蘋果還申請了一項“基站”專利,該基站可以爲生成的VR/AR內容提供處理能力,支持用戶與內容進行6DoF交互。從本質上說,蘋果旨在製造一種既能實現捕捉圖像和視頻,又能將其轉化爲VR內容的全景攝像頭。

“全景光場捕捉、處理和顯示”專利

多次申請專利至於,蘋果也在不斷招攬人才,壯大蘋果的AR/VR團隊。目前蘋果內部從事AR/VR項目的員工有1200人,是非常龐大的一個團隊。

除了招兵買馬和研發專利,蘋果還曾收購多家研發AR的企業。就在去年5月份,蘋果還收購虛擬現實公司NextVR。NextVR通過VR技術製作直播或錄播內容,例如體育賽事或演唱會。

蘋果的多次專利申請、挖掘人才和收購AR/VR企業,顯示了它在這個領域的雄心,尤其是蘋果CEO庫克也曾多次表明十分看好AR的發展。他曾經公開表示:“相比於VR,AR不需要將人們同現實世界完全分離開。相反,AR可以成爲用戶世界的一部分。”他也相信,AR可以擁有和智能手機一樣的創造力。

蘋果在AR軟件方面的成就遠大於硬件

儘管設備“難產”,但蘋果在AR軟件層面卻取得不少進展。今年WWDC21上,蘋果發佈了最新的ARKit 5,引入了一系列的功能和改進,從而幫助開發者構建比以往任何時候都要更好的AR體驗,主要包括位置錨定支持更多地區、人臉追蹤功能升級、改進運動追蹤等。其中Location Anchor定位錨,允許用戶將AR作品錨定在特定的緯度、經度和高度。用戶可以圍繞虛擬對象走動,從不同的角度查看它們。

蘋果這些年來也開發出了不少有趣的AR應用程序,在WWDC21上,蘋果推出了多款AR應用。其中包括《RealityKit 2》、《Object Capture》以及《AR Maps》等。《RealityKit》是一款爲AR打造的3D渲染、物理核空間音頻引擎。通過使用真實的和基於物理的材質、環境反射、背景陰影、相機噪點、運動模糊等來將虛擬內容與現實世界高度融合。《RealityKit 2》的新增內容包括:Object Capture對象捕捉、自定義着色器、自定義系統、動態asset、角色控制器。

此外,蘋果最新地圖應用《Maps》也正式接入AR導航功能。用戶可以直接拿iPhone掃描周邊環境和建築物,進行定位。

通過以上對今年蘋果AR/VR領域的覆盤,我們可以看出蘋果已經在AR/VR領域探索良久,不管是在軟件部分還是硬件部分都有收穫。而關於蘋果將要推出AR眼鏡/VR一體機的消息,並非空穴來風。雖說硬件設備還未見真身,但其實我們從多方消息可以看出,在鞏固生態高牆的同時,蘋果也積極的在VR/AR等前沿領域“紮營練兵”。

希望庫克真的是在憋大招!

Facebook:VR先行,未來志在AR社交

而Facebook,衆所周知在AR/VR上同時發力。VR方面,Quest和Quest 2受到廣大玩家歡迎,而AR方面雖然未正式推出相關的眼鏡產品,但也在各個方面都透露出一些苗頭。

作爲社交平臺起家的Facebook,在AR/VR的戰略上也少不了社交的元素。在Quest和Quest 2推動下,出現了越來越多支持跨平臺多人交互的VR遊戲,一些健身應用也支持多人互動/對戰。與此同時越來越多的VR用戶也爲多人VR,甚至是未來的《Facebook Horizon》平臺和推動VR普及,打下基礎。

AR眼鏡、專利研發正穩步推進

自從 2019年,Facebook 宣佈與 Luxxotica 品牌雷朋合作生產智能眼鏡以來,AR領域都在期待有產品的相關細節流出。不幸的是直到現在,這些細節都很少見。而在近期的Paris Viva Technology的一次會議上,Facebook 首席執行官扎克伯格表示:“我們今年將與 EssilorLuxottica 合作推出一副智能雷朋眼鏡,該眼鏡不完全是一款真正意義上AR眼鏡,但是添加了很多技術和有趣的案例。我對這次合作感到非常興奮,我認爲這將是一個偉大的產品,我們正在建設未來的路上。”

除了硬件產品方面,Facebook近期還公佈了“基於帽子形狀的全新VR/AR頭戴設備設計”的專利。專利中指出了一種與帽子等配飾結合的AR眼鏡方案,該方案爲一體式設計,AR眼鏡部分採用半透明設計,可收納摺疊,設計圖看起來有點像是環球影城的馬里奧的AR帽子。

Facebook在專利中寫到,現有的AR頭顯和眼鏡存在設計厚重、人體工學不平衡、散熱過多等問題,爲解決這些問題提出了這種與棒球帽、軟呢帽結合的AR頭顯設計。具體來講,方案中的AR眼鏡部分固定在帽檐下,支持摺疊,在不用的時候可以收起來。

Facebook認爲,該專利既提升舒適性,又可在帽檐的空間加入更多AR元件,比如:眼球追蹤模組、面部識別模組、手勢識別模組等等。交互方面,該AR頭顯可連接手柄、手機、計算機、體感手套等設備。該專利更側重於AR頭顯的人體工學設計,相比於現有的AR頭顯外觀,帽子更容易被大衆接受,而且AR眼鏡摺疊後可低調藏在帽檐下,使用起來更靈活。

該專利,透露了Facebook尋求突破Oculus Quest 2產品設計,期望獲得更輕、更小的新一代頭戴式設備以解決用戶佩戴舒適度問題。專利研發正在穩步進行中。

豐富AR內容,爲未來AR眼鏡打基礎

除了硬件及專利上的消息,Facebook其實在軟件方面有更多新的動態。

Facebook在近期舉行的F8 Refresh線上活動中,公佈了基於視頻通話的AR功能:Multipeer API。利用該工具,開發者可爲多人視頻通話加入各種有趣、沉浸的AR特效。Multipeer API是基於Spark AR推出的,而Spark AR已經持續成爲世界上規模最大的移動端AR平臺,目前已經擁有來自190個國家的60萬以上AR創作者,在Instagram和Facebook上發佈的AR濾鏡數量突破200萬。而基於Spark AR打造的AR濾鏡月活人數突破6億。

從如此龐大的用戶量可以看出,多人AR將成爲未來一種趨勢,而這種趨勢最初的形態可能是基於AR濾鏡。讓多個用戶可以在視頻通話中共享AR濾鏡,相當於爲多人視頻通話加入可互動的AR特效,不僅可以優化遠程社交的體驗感,還可以通過交互式AR遊戲爲遠程社交帶來樂趣。

此外,爲了培養更多AR創作者,Spark AR與Facebook Blueprint平臺合作推出了AR課程,在前30天就有1.6萬人註冊。爲幫助創作者們開發更多樣化的AR內容,Spark AR還更新了更多功能,包括:靜態/動態多目標追蹤、多層次分割效果,未來還將推出新的全身追蹤功能,通過手機的前置或後置攝像頭來追蹤全身姿態。或許在現有的視頻通話、AR拍照濾鏡等基礎上,來實現多人AR互動似乎更加實際。

AR濾鏡作爲一種營銷、社交、娛樂的工具,在Facebook推動下不斷在優化,功能和玩法更多樣化,而且效果更加自然。與此同時,通過支持多人社交的AR濾鏡,有望讓更多人瞭解AR的魅力,從而進一步推動AR普及。並且,Facebook通過豐富更多樣化的AR內容,也是爲未來的AR眼鏡平臺打基礎。

無論是蘋果還是Facebook,他們都在AR方面下足了功夫,都認爲AR是未來,他們都在豐富各自的AR內容平臺。相較於VR,其實AR方面技術難題更復雜,但是大家都認爲AR增強現實才是人們的未來。雖然AR道路佈滿荊棘,各家大佬都在各顯神通,這條路究竟誰能走通,敬請期待吧!

本文屬VRPinea原創稿件,轉載請洽:brand@vrpinea.com