文/VR陀螺 豌豆
北京時(shí)間6月8日凌晨1點(diǎn),蘋果WWDC 2021正式舉辦。由于疫情影響本次大會(huì)同去年一樣將通過(guò)線上直播形式召開。蘋果在WWDC大會(huì)公布了全新操作系統(tǒng)上線情況,包括:iOS 15、iPadOS 15、watchOS 8、macOS Monterey和tvOS。庫(kù)克表示,即日起將推出開發(fā)者測(cè)試版,公測(cè)版定于7月更新,正式版于今年秋季更新。
庫(kù)克與虛擬觀眾(圖源:VR陀螺)
本次大會(huì)主要面向開發(fā)者,WWDC大會(huì)首日,主會(huì)場(chǎng)關(guān)于蘋果AR產(chǎn)品的消息主要集中在軟件及開發(fā)平臺(tái)更新,值得關(guān)注的是以下幾點(diǎn):
對(duì)標(biāo)谷歌?蘋果地圖支持AR導(dǎo)航
在新系統(tǒng)iOS 15、iPadOS 15以及macOS Monterey的蘋果設(shè)備上,開放類似谷歌地圖AR實(shí)景導(dǎo)航的功能,在特定城市通過(guò)相機(jī)拍攝附近的景物,再利用數(shù)據(jù)庫(kù)進(jìn)行比對(duì),提供3D式的步行導(dǎo)航功能。
部分城市可支持AR導(dǎo)航(圖源:VR陀螺)
不同于傳統(tǒng)的導(dǎo)航地圖,新版蘋果地圖支持3D導(dǎo)航,可顯示用戶附近立體的街景及建筑,方便更好地標(biāo)明復(fù)雜路段的地理環(huán)境。目前該功能僅支持倫敦、洛杉磯、紐約、費(fèi)城、圣地亞哥、華盛頓幾座城市。
新版地圖將更新包括商業(yè)區(qū)、碼頭、建筑等新細(xì)節(jié),例如海拔高度、新的道路顏色和標(biāo)簽設(shè)置。如果是司機(jī)使用蘋果地圖,將更直觀地看到轉(zhuǎn)彎車道、中間線、公交車道等等;行人使用蘋果地圖將會(huì)看到人行道和交叉路口的狀況。
谷歌地圖與新版蘋果地圖(圖源:網(wǎng)絡(luò))
這些新功能的城市街道的細(xì)節(jié)變化與谷歌地圖所做的更新相比更具有競(jìng)爭(zhēng)性,蘋果不僅將更新夜間3D景觀光影變換,實(shí)時(shí)街景也在向谷歌靠近。蘋果方面表示,未來(lái)還將更新顯示人行道和自行車道。
RealityKit 2框架更新
支持快速生成AR預(yù)覽
RealityKit是Apple為增強(qiáng)現(xiàn)實(shí)從頭開始構(gòu)建的渲染、動(dòng)畫、物理和音頻框架,借助原生Swift API、ARKit集成、高清渲染等,使開發(fā)人員能夠輕松地制作原型并制作高質(zhì)量的 AR 體驗(yàn)。結(jié)合使用iPad Pro上的 LiDAR 掃描儀可利用視頻紋理、場(chǎng)景理解、位置錨點(diǎn)、面部跟蹤和改進(jìn)的調(diào)試工具等功能進(jìn)行AR開發(fā)。
圖源:蘋果
借助RealityKit 2中的高級(jí)渲染技術(shù),開發(fā)人員還可以創(chuàng)造令人驚嘆的視覺效果。學(xué)習(xí)編寫自定義著色器,繪制實(shí)時(shí)動(dòng)態(tài)網(wǎng)格,并探索后期處理效果,以幫助開發(fā)者設(shè)計(jì)AR場(chǎng)景。
對(duì)象捕捉(Object Capture)是RealityKit 2中的一項(xiàng)新開發(fā)工具,所有開發(fā)者都能利用蘋果設(shè)備拍攝2D照片,在幾分鐘內(nèi)創(chuàng)建3D對(duì)象;macOS Monterey可以將這些照片導(dǎo)入Cinema 4D,并生成AR預(yù)覽,同時(shí)允許用戶集成到Xcode或在AR Quick Look中查看。
圖片
圖源:VR陀螺
Object Capture支持使用USD創(chuàng)建3D工作流程,掃描真實(shí)世界對(duì)象的3D模型,利用第三方數(shù)字內(nèi)容創(chuàng)建工具構(gòu)建高質(zhì)量的渲染序列。
RealityKit 2可通過(guò)自定義渲染目標(biāo)和材質(zhì)實(shí)現(xiàn)渲染操作,開發(fā)者可對(duì)AR對(duì)象及場(chǎng)景進(jìn)行調(diào)整;允許開發(fā)者調(diào)用動(dòng)態(tài)資源采集技術(shù)獲取的圖像,通過(guò)編程以逐幀調(diào)整圖像,以定制更靈活的RealityKit體驗(yàn);開發(fā)者可構(gòu)建自己的實(shí)體組件系統(tǒng),以便可以組織AR場(chǎng)景中的asset并將更復(fù)雜的功能構(gòu)建到系統(tǒng)層中;除此之外,開發(fā)者可使用Swift API輕松創(chuàng)建玩家控制的角色,用戶可以自由跳躍、縮放和探索創(chuàng)建的AR世界和基于RealityKit開發(fā)的游戲。
ARKit 5:錨點(diǎn)功能升級(jí)
新增“立即識(shí)別”功能
ARKit是新一代AR應(yīng)用程序,蘋果希望以改變?nèi)藗兣c周圍世界的聯(lián)系方式。
用戶可使用定位錨點(diǎn)將虛擬對(duì)象與現(xiàn)實(shí)世界的經(jīng)度、緯度和高度連接起來(lái)。在iPad Pro上利用LiDAR掃描并獲取深度場(chǎng)景顯示。
圖源:蘋果
據(jù)悉,新版本的ARKit 5進(jìn)行了更新,使用定位錨點(diǎn),人們更容易感受到基于位置的AR體驗(yàn)。該功能使開發(fā)者能構(gòu)建更好的AR體驗(yàn),蘋果表示開發(fā)者使用ARKit 5時(shí)可輕松發(fā)現(xiàn)和準(zhǔn)確定位自己的虛擬內(nèi)容。
定位錨點(diǎn)功能允許開發(fā)者的AR對(duì)象固定在設(shè)定的經(jīng)緯度及高度,用戶可圍繞AR對(duì)象移動(dòng)并進(jìn)行觀察。該功能目前支持iPhone XS,iPhone XS Max,iPhone XR,僅面向部分城市提供。
圖源:蘋果
ARKit 5還改進(jìn)了動(dòng)作追蹤,并支持iPad Pro(第5代)超廣角攝像頭中的面部追蹤。借助新的App Clip Code錨點(diǎn),用戶可以將App Clip或ARKit應(yīng)用中的虛擬內(nèi)容固定到打印或數(shù)字化的App Clip Code。
iOS 15:新增文本識(shí)別
有望嵌入AR眼鏡
蘋果相機(jī)現(xiàn)在可以識(shí)別照片中的文本(手寫或打?。┎⑹蛊淇蛇x擇、可搜索、復(fù)制/粘貼等。它還可以識(shí)別文本以外的內(nèi)容,包括動(dòng)物品種、地標(biāo)等。
文本識(shí)別(圖源:VR陀螺)
初期將支持包括英文、簡(jiǎn)/繁中文、法文、意大利文、德文、西班牙文、葡萄牙文等七種語(yǔ)言。
文本識(shí)別可做到實(shí)時(shí)識(shí)別所拍攝到的文字內(nèi)容,這項(xiàng)功能是基于采用機(jī)載處理的“深層神經(jīng)網(wǎng)絡(luò)”,并非云計(jì)算。雖然該功能目前無(wú)法與Google Lens相提并論,但仍是一個(gè)非常便捷的功能,適用幾乎所有類型的圖片,包括截圖和網(wǎng)絡(luò)圖片。
Visual Look Up功能類似于識(shí)圖軟件,該功能可允許系統(tǒng)在照片中查找信息,例如識(shí)別花的品種或地標(biāo),或能為日后蘋果AR眼鏡提供技術(shù)支持。目前用戶能在iPhone、iPad和Mac上體驗(yàn)該功能。
備受關(guān)注的隱私問(wèn)題
正如預(yù)期的那樣,蘋果在主題演講中加倍強(qiáng)調(diào)其十分重視隱私問(wèn)題。
該公司推出了多種新的安全措施,其中包括一種稱為“郵件隱私保護(hù)”的功能。蘋果設(shè)備上的電子郵件應(yīng)用程序現(xiàn)在將隱藏用戶的IP地址和實(shí)際位置,郵件發(fā)送者將無(wú)法獲取用戶的個(gè)人信息。
圖源:VR陀螺
iCloud+的訂閱者可以利用額外的新隱私保護(hù)功能。包括Safari將提供隱私保護(hù)功能,它對(duì)用戶設(shè)備的流量進(jìn)行加密,第三方(包括蘋果)無(wú)法攔截和讀取用戶正在搜索的內(nèi)容。
Siri也在更新隱私保護(hù)功能。用戶對(duì)Siri發(fā)出的指令將經(jīng)過(guò)處理,防止對(duì)第三方應(yīng)用獲取用戶音頻。
轉(zhuǎn)場(chǎng)中被丟出去的iPad(圖源:VR陀螺)
以上為蘋果WWDC 2021大會(huì)上的AR相關(guān)重點(diǎn)信息整理,VR陀螺將持續(xù)關(guān)注更新動(dòng)態(tài)。你對(duì)本次大會(huì)的更新內(nèi)容有什么看法?歡迎在留言區(qū)留下你的答案。
投稿/爆料:tougao@youxituoluo.com
稿件/商務(wù)合作: 六六(微信 13138755620)
加入行業(yè)交流群:六六(微信 13138755620)
元宇宙數(shù)字產(chǎn)業(yè)服務(wù)平臺(tái)
下載「陀螺科技」APP,獲取前沿深度元宇宙訊息