11個(gè)專利提前“發(fā)布”蘋果AR眼鏡?不少創(chuàng)意真腦洞大開
如果蘋果發(fā)布一副AR眼鏡,會(huì)是什么樣的?
喬布斯離開我們已經(jīng)有十年,但人們?nèi)詴?huì)懷念第一代iPhone帶來的驚艷感以及iPhone 4的經(jīng)典設(shè)計(jì),而說到對(duì)庫克時(shí)代的印象,人們熱衷于探討的,似乎只有iPhone X的“小劉?!薄Phone 12 Pro Max的激光雷達(dá)掃描儀一些產(chǎn)品細(xì)節(jié)和蘋果沖向三萬億美元的市值。
庫克會(huì)為蘋果帶來些什么?大家一直思考的問題最近似乎有了新的答案。近日庫克接受多家媒體采訪時(shí)都稱自己是AR的“頭號(hào)粉絲”,甚至說“我們不談元宇宙,我們只說AR”,因此,AR眼鏡最有可能成為庫克時(shí)代蘋果公司的標(biāo)志性產(chǎn)品之一。
一直以來,蘋果的產(chǎn)品以高審美、高標(biāo)準(zhǔn)、嚴(yán)要求著稱。庫克曾說過,目前市場上沒有一款A(yù)R眼鏡能讓自己滿意,就像蘋果正式推出AppleWatch前,庫克也曾說過類似的話,表示沒有一款穿戴產(chǎn)品令他滿意。那么庫克到底想要做出一款什么樣的AR眼鏡?它能否重現(xiàn)蘋果昔日輝煌,再次引領(lǐng)新的消費(fèi)風(fēng)暴?
這些疑問讓人們對(duì)蘋果的AR設(shè)備動(dòng)態(tài)一直持有高度關(guān)注,都想知道蘋果打造的AR眼鏡會(huì)是什么樣?我們通過盤點(diǎn)蘋果今年獲得的11項(xiàng)與AR有關(guān)的專利授權(quán)以及蘋果AR設(shè)備的爆料信息,準(zhǔn)備今天提前“發(fā)布”蘋果的AR眼鏡。
當(dāng)然,有關(guān)的AR專利還可能運(yùn)用在頭顯、手機(jī)、手表甚至汽車等產(chǎn)品上,畢竟蘋果可是越來越能賺錢,涉及的消費(fèi)業(yè)務(wù)面也越來越廣,但作為第一款A(yù)R設(shè)備,AR眼鏡還是非常有可能運(yùn)用到這些專利技術(shù)。
01連獲11項(xiàng)AR新專利
蘋果用AR眼鏡化身空間掃描儀
蘋果即將重磅推出的AR眼鏡會(huì)有哪些讓人值得期待的亮點(diǎn)?通過解讀專利文件,我們推測出蘋果AR眼鏡可能具有環(huán)境應(yīng)用模型、以對(duì)象為中心的掃描、建立虛擬空間以及提供空間音頻等功能。
▲蘋果2021年獲得與AR眼鏡有關(guān)的專利信息匯總
在今年的11個(gè)專利中,我們看到了三個(gè)比較有意思的專利,也由此來解密蘋果的AR眼鏡“真面目”。
1、拍張圖就能畫平面圖,設(shè)計(jì)師的必備“神器”?
過去人們測量房間面積主要用卷尺,這種方法費(fèi)時(shí)又費(fèi)力,但人們?nèi)绻魃咸O果的AR眼鏡,可能通過環(huán)顧四周就能獲得房間的平面圖。
并且,由于室內(nèi)環(huán)境有像桌子,沙發(fā)等物體會(huì)模糊掉房間的線條,導(dǎo)致人們難以按照視頻和傳感器來構(gòu)建精準(zhǔn)的平面圖。
面對(duì)這些問題,蘋果選擇通過3D點(diǎn)云(Point Cloud)技術(shù)和3D顯示技術(shù)來測量房間的結(jié)構(gòu),創(chuàng)建平面圖。這些技術(shù)通過文字或者符號(hào)標(biāo)記房間中的邊界、墻壁、門窗等物體,并擁有特殊的測量方式。
▲通過攝影頭測量房間的結(jié)構(gòu)
這樣,用戶就可以邊戴著AR眼鏡,邊實(shí)時(shí)預(yù)覽房間的平面圖。
2、蘋果將如何打造“元宇宙”?先建個(gè)化身來玩玩
蘋果此前曾發(fā)布了擬我表情功能,該功能可以同步模仿用戶的表情。原來擬我表情只模仿用戶的頭部運(yùn)動(dòng),現(xiàn)在這個(gè)范圍可以擴(kuò)大到全身。該專利目前主要為頭戴式設(shè)備(HMD)設(shè)計(jì),但未來也可能應(yīng)用于一些AR產(chǎn)品上。
該項(xiàng)技術(shù)會(huì)通過多個(gè)攝像頭,收集你的姿態(tài)信息,并由你來定制一個(gè)虛擬化身。同樣,你的化身會(huì)根據(jù)你的動(dòng)作變化而變化。比如說,你邊說話邊做手勢,你的虛擬化身也會(huì)邊說話邊做手勢。這將會(huì)豐富視頻的創(chuàng)作形式,與游戲產(chǎn)品聯(lián)動(dòng)可能會(huì)擁有更大的應(yīng)用范圍。
▲類似于Digital Domain軟件研發(fā)主管Doug Roble以及他的虛擬化身
3、空間觸覺/音頻:蘋果“拍了拍”你的腦袋,讓你轉(zhuǎn)個(gè)頭
在增強(qiáng)空間觸覺感知方面,AR眼鏡將會(huì)通過觸覺引導(dǎo)方式,將用戶的注意力轉(zhuǎn)移到虛擬電話會(huì)議或者其他地方上。比如說,戴著AR眼鏡的用戶可以感覺到眼前的圖案正在向左移動(dòng),并通過震動(dòng)的方式提示用戶向左邊轉(zhuǎn)動(dòng)。
▲FaceTime更新了與空間音頻相關(guān)的功能
與空間觸覺的引導(dǎo)方式差不多,空間音頻主要根據(jù)用戶的頭部變化調(diào)整聲音的變化。該技術(shù)將通過圖像傳感器監(jiān)測用戶的頭部變化,還提供濾波器以及視覺指引,使得用戶擁有更好的音樂體驗(yàn)。
現(xiàn)在基本上只有AirPods Pro、AirPods Max和小米真無線降噪耳機(jī)3 Pro支持空間音頻應(yīng)用,其他支持空間音頻功能的產(chǎn)品并不多。
4、AR識(shí)人/識(shí)車:專為滴滴打造?再也不用擔(dān)心上錯(cuò)車了
下班高峰時(shí)期,路邊往往會(huì)有多家網(wǎng)約車在等待自己的顧客,但由于車輛較多,顧客往往容易出現(xiàn)上錯(cuò)車的情況。針對(duì)這種情況,蘋果的新專利打造了一款A(yù)R系統(tǒng),當(dāng)你佩戴AR眼鏡時(shí),你或許可以從眾多車輛中一眼找到自己的網(wǎng)約車。
該系統(tǒng)將與網(wǎng)約車軟件聯(lián)手,并提供雙向AR識(shí)別服務(wù),即司機(jī)可以及時(shí)在人群中找到自己的顧客,顧客也能及時(shí)在車海中找到自己的網(wǎng)約車。由于蘋果曾在2016年向滴滴出行投資了十億美元,并且據(jù)公開消息來看,蘋果沒有投資其他的打車軟件,因此,這款A(yù)R系統(tǒng)有可能專為滴滴打造。
▲實(shí)現(xiàn)接近感測的增強(qiáng)現(xiàn)實(shí)系統(tǒng)的框架圖
該系統(tǒng)可以通過移動(dòng)設(shè)備的相機(jī)捕獲圖像,并用指示符或標(biāo)識(shí)符來識(shí)別相應(yīng)的車輛和乘客,并在設(shè)備上進(jìn)行顯示。通過簡單直白的顯示標(biāo)記,你在下班高峰期將會(huì)避免上錯(cuò)車的尷尬。
02攻克顯示難題
蘋果多項(xiàng)專利妙解信息困境
蘋果的AR眼鏡會(huì)給人們帶來怎樣的體驗(yàn),能否真正地在日常生活中幫助消費(fèi)者?AR眼鏡作為下一代智能穿戴設(shè)備,為消費(fèi)者顯示數(shù)字世界的信息是其重要作用之一,能夠加速數(shù)字世界和物理世界的信息相結(jié)合,但目前市場上的AR眼鏡仍在數(shù)據(jù)傳輸、信息顯示上存在不足之處。
據(jù)專利文件顯示,蘋果正通過點(diǎn)云、虛擬信息顯示技術(shù)來給出這些難題新的解法。
1、攻克數(shù)據(jù)難題,通過點(diǎn)云壓縮加快數(shù)據(jù)速度
點(diǎn)云主要是指空間中點(diǎn)的數(shù)據(jù)集,通常由三維掃描儀獲取三維物體的相關(guān)數(shù)據(jù)。蘋果在iPhone 12 Pro系列搭載的LiDAR激光雷達(dá)掃描儀就可以支持點(diǎn)云的數(shù)據(jù)收集和傳輸。
新專利報(bào)告表示可以通過激光雷達(dá)掃描儀形成“點(diǎn)云壓縮”,為現(xiàn)實(shí)提供更多信息。
該技術(shù)可以用于VR、AR、為地圖服務(wù)的地理信息系統(tǒng)、體育重播廣播、博物館展示、Project Titan的自主導(dǎo)航等等多個(gè)項(xiàng)目中。
2、路癡黨的福音:在真實(shí)環(huán)境中顯示虛擬引導(dǎo)信息
蘋果于今年9月獲得一項(xiàng)在真實(shí)環(huán)境中顯示虛擬信息有關(guān)的專利,該專利可以通過移動(dòng)設(shè)備讓用戶可以來定位和導(dǎo)航到目的地。
目前,AR領(lǐng)域的信息服務(wù)通常需要使用不同的技術(shù)組合完成,并且,無法根據(jù)場景的變化及時(shí)更新信息。此外,一些常規(guī)GPS顯示技術(shù)往往不能提供足夠精確的位置信息。
新系統(tǒng)將會(huì)根據(jù)真實(shí)的場景數(shù)據(jù)顯示出至少一條虛擬信息,并且還會(huì)以低精度來顯示遠(yuǎn)處的虛擬信息。
▲在真實(shí)環(huán)境中顯示虛擬引導(dǎo)信息專利示意圖
具體來說,當(dāng)用戶與目標(biāo)區(qū)域較近時(shí),其他無關(guān)區(qū)域的相關(guān)信息將會(huì)逐漸消失或粗略顯示,而目標(biāo)區(qū)域內(nèi)的數(shù)字信息也會(huì)更加詳細(xì)。不僅如此,隨著人們逐漸靠近目標(biāo)區(qū)域,相關(guān)數(shù)據(jù)也會(huì)更加準(zhǔn)確。
03千人研發(fā)團(tuán)隊(duì),五年收購11家公司
要打造一款可以引起新消費(fèi)風(fēng)暴的產(chǎn)品,需要的可不止是技術(shù)支撐,更需要富有創(chuàng)新和創(chuàng)造能力的人才作為強(qiáng)有力的后盾。
蘋果作為率先在AR布局的玩家之一,目前已經(jīng)有了一個(gè)近千人左右的AR研究團(tuán)隊(duì)。據(jù)彭博社報(bào)道,現(xiàn)在負(fù)責(zé)蘋果AR業(yè)務(wù)的高管是邁克·洛克威爾(Mike Rockwell),其上級(jí)為蘋果硬件工程高級(jí)副總裁丹·里喬(Dan Riccio)。
邁克·洛克威爾(Mike Rockwell)此前是杜比的執(zhí)行副總裁、杜比實(shí)驗(yàn)室的資深研究員,現(xiàn)在則成為了蘋果下一任CEO的“候選人”之一。
▲邁克·洛克威爾(圖源:Patently Apple)
該團(tuán)隊(duì)還有涉及視頻游戲、音頻指導(dǎo)、計(jì)算機(jī)視覺和特殊效果領(lǐng)域的新員工,以及在供應(yīng)鏈和程序管理方面經(jīng)驗(yàn)豐富的蘋果老員工。如曾在蘋果負(fù)責(zé)手表設(shè)計(jì)的Fletcher Rothkopf,和創(chuàng)建了音效標(biāo)準(zhǔn)THX的Tomlinson Holman。
這幾年,蘋果還陸續(xù)從全球各地招募人才,壯大自己的AR研發(fā)團(tuán)隊(duì)。此前,蘋果已經(jīng)從Magic Leap挖走了Li Zeyu,擔(dān)任自家的高級(jí)計(jì)算機(jī)視覺算法工程師。
不僅如此,前亞馬遜Lumberyard虛擬現(xiàn)實(shí)平臺(tái)的首席工程師Cody WHite以及曾在Hololens和Google Earth工作過的Avi Bar Zeev都陸續(xù)加入了蘋果VR/AR研究團(tuán)隊(duì),但有趣的是,這兩位專家又先后離職,原因尚未披露。
除了人才儲(chǔ)備,蘋果還通過收購多家公司增強(qiáng)自身的技術(shù)儲(chǔ)備。
2013年蘋果收購以色列硬件公司PrimeSense后,蘋果又陸續(xù)收購了十余家與AR領(lǐng)域有關(guān)的公司,涉及傳感器,AR軟件、AR內(nèi)容生態(tài)甚至是AR鏡片等多個(gè)方面。
▲蘋果歷年來收購與AR眼鏡有關(guān)的公司信息匯總
綜上所述,蘋果在AR項(xiàng)目上已經(jīng)做好了人才儲(chǔ)備和技術(shù)儲(chǔ)備?,F(xiàn)在,萬事俱備,只差正式的產(chǎn)品推出,接受市場的考驗(yàn)。
04硬件未出、AR平臺(tái)帝國先起
盡管蘋果的AR眼鏡還尚未正式露面,但蘋果早已在AR領(lǐng)域做出了不少的嘗試,不但在2021WWDC大會(huì)上帶來了ARKit 5系統(tǒng)平臺(tái),而且還推出來Object Project、RealityKit 2等多項(xiàng)與AR有關(guān)的功能。
蘋果表示,目前已有7000名開發(fā)者開發(fā)了1萬款支持AR的iOS應(yīng)用程序,疫情期間,人們可以通過相關(guān)AR軟件來購買商品或者完成家居裝修。
不僅開發(fā)人員可以在ARKit平臺(tái)上創(chuàng)造自己的產(chǎn)品,一些業(yè)余AR愛好者也可以在ARKit開發(fā)平臺(tái)上DIY一下自己的AR軟件。
此外,今年秋季發(fā)布會(huì)上蘋果大力推出的Apple TV+也有可能會(huì)成為其未來內(nèi)容生態(tài)的一個(gè)重要來源。
盡管蘋果還沒有推出專屬的AR軟件商店,但是其AR內(nèi)容生態(tài)以及平臺(tái)規(guī)劃已經(jīng)可以逐漸看到雛形,這也將成為蘋果AR眼鏡的突出優(yōu)勢之一。
05蘋果的AR眼鏡性能如何?
強(qiáng)大的技術(shù)庫支撐、優(yōu)秀的研發(fā)團(tuán)隊(duì)和技術(shù)人才、豐富的內(nèi)容生態(tài),看起來蘋果AR眼鏡在發(fā)布之前就已經(jīng)占據(jù)了不少優(yōu)勢,但對(duì)一款消費(fèi)級(jí)的產(chǎn)品來說,性能才是檢驗(yàn)一切的標(biāo)準(zhǔn),也是產(chǎn)品最重要的抓手。
在芯片方面,據(jù)The Information報(bào)道,有關(guān)蘋果AR眼鏡的芯片設(shè)計(jì)已經(jīng)完成,現(xiàn)在已經(jīng)進(jìn)入試產(chǎn)階段。
報(bào)告透露,該芯片采用了臺(tái)積電5nm制程工藝,有CPU和GPU,但沒有屬于蘋果的神經(jīng)引擎。據(jù)悉,蘋果的這款芯片可能會(huì)通過無線通信與一些主機(jī)設(shè)備進(jìn)行連接,將由主機(jī)來承擔(dān)算力。
不僅如此,據(jù)行業(yè)消息,這款SoC的CMOS圖像傳感器版本異常大,其尺寸大小接近一個(gè)頭顯鏡頭。這也許是為了可以更快地從用戶周圍環(huán)境捕捉高分辨率的圖像數(shù)據(jù),提供更好的場景渲染或者其他AR服務(wù)。
另外,蘋果的AR眼鏡可能會(huì)更偏向輕量化、分體式的設(shè)計(jì),彭博社還曾表示蘋果會(huì)出一款喬布斯特別款。業(yè)內(nèi)各大設(shè)計(jì)師也紛紛開動(dòng)腦筋,來“幫”蘋果設(shè)計(jì)新款A(yù)R眼鏡。
韓國設(shè)計(jì)師Martin Hajek參考Apple Watch的表盤和iPhone配色設(shè)計(jì)了新款A(yù)R眼鏡的概念圖。
▲韓國設(shè)計(jì)師Martin Hajek設(shè)計(jì)的蘋果AR眼鏡外觀
從荷蘭的三維藝術(shù)家Martin Hajek公布的設(shè)計(jì)圖來看,蘋果AR眼鏡又可能會(huì)和普通的眼鏡差不多。他在鏡框采用了金屬材質(zhì),并在內(nèi)部放置了無線天線和傳感器,鏡框兩側(cè)擁有WiFi和藍(lán)牙零件。
▲荷蘭藝術(shù)家Martin Hajek設(shè)計(jì)的蘋果AR眼鏡外觀
在顯示器方面,郭明錤表示蘋果的AR眼鏡可能采用OLED屏幕,由于蘋果此前收購與AR鏡片相關(guān)的創(chuàng)企,因此蘋果很有很可能自己研發(fā)AR眼鏡的鏡片。
在整機(jī)代工方面,歌爾目前是全球中高端AR/VR設(shè)備的代工龍頭玩家,曾經(jīng)為索尼和Facebook的頭顯代工。據(jù)行業(yè)預(yù)測,2021年歌爾股份的AR/VR設(shè)備組裝占全球80%市場的份額。由于此前歌爾還為蘋果代工過AirPods等相關(guān)產(chǎn)品,基于它與蘋果之間的長期合作關(guān)系,此次蘋果的AR眼鏡整機(jī)代工有可能會(huì)由歌爾來承擔(dān)。
06結(jié)語:蘋果入局或加速AR眼鏡市場發(fā)展
我們可以看見,蘋果為自家的AR眼鏡在技術(shù)、人才、資金方面都投入了大量的經(jīng)力,也試圖針對(duì)顯示技術(shù)難題帶來一些新的玩法。
AR眼鏡的概念已經(jīng)很久了,但一直尚未出現(xiàn)較為成熟的產(chǎn)品。像微軟谷歌盡管發(fā)布了一些智能眼鏡產(chǎn)品,但尚未得到用戶的廣泛認(rèn)可。Adobe的AR負(fù)責(zé)人史蒂芬勞·科拉薩也曾表示“頭顯、AR等技術(shù)產(chǎn)品在我們的路線圖中,但目前沒有一款達(dá)到我們能夠進(jìn)行部署的臨界質(zhì)量?!?/p>
蘋果的AR眼鏡發(fā)布成為全行業(yè)關(guān)注的大事,每一次蘋果的發(fā)布會(huì)我們都看見大家對(duì)蘋果的AR眼鏡持有高度關(guān)注。根據(jù)產(chǎn)業(yè)鏈消息來看,蘋果將在2023年左右推出這款A(yù)R眼鏡。即將發(fā)布的產(chǎn)品能否引起其他軟件、硬件以及內(nèi)容生態(tài)玩家加入AR市場,我們也將持續(xù)關(guān)注最新動(dòng)向。
本文來自微信公眾號(hào)“智東西”(ID:zhidxcom),作者:徐珊,36氪經(jīng)授權(quán)發(fā)布。