VR陀螺11月22日消息,Google 開發(fā)者大會 (Google Developer Summit) 是谷歌面向開發(fā)者展示最新產(chǎn)品和平臺的年度盛會。2020 Google 開發(fā)者大會于 11 月 16 日 至 21 日舉行,這是谷歌首次以全線上大會的形式與中國開發(fā)者相聚。本次大會以“代碼不止”為主題,介紹了相關(guān)產(chǎn)品更新以及一系列面向本地開發(fā)者的技術(shù)支持內(nèi)容,旨在賦能開發(fā)者高效創(chuàng)新、持續(xù)不斷地創(chuàng)造愉悅的產(chǎn)品體驗。
其中,11月21日,Google大中華區(qū)AR/VR負(fù)責(zé)人熊子青以“ARCore新近更新及應(yīng)用實例”為主題,從ar 近期發(fā)展、arcore進(jìn)程、2020新近更新三個方面介紹了ARCore產(chǎn)品動態(tài)。
一 、AR的近期發(fā)展
熊子青表示,目前AR已經(jīng)從只是暢想發(fā)展到今天的技術(shù)相對成熟的狀態(tài),應(yīng)用也不斷推陳出新。加上5G的帶動,越來越多的AR體驗走進(jìn)生活,被更多人了解和使用。
隨著科技的不斷演進(jìn),人機交互的方式也不斷變更。攝像頭成為了數(shù)字世界的眼睛,能看懂并感知這個世界,再結(jié)合IMU、GPS,加上背后的算法及深度學(xué)習(xí)后,在最需要的位置和時空中無縫聯(lián)結(jié),并響應(yīng)現(xiàn)實世界。
AR提供了一種體驗信息以及獲得答案的新方法,吸引了人們的注意力,最終幫助推動了用戶行動起來。無論是應(yīng)用的下載、互動,還是應(yīng)用內(nèi)購買,都看到了顯著的提升。
二、ARCore 進(jìn)程
AR技術(shù)被應(yīng)用在更豐富的應(yīng)用場景中,以幫助人們生活更便利、更有趣,包括在學(xué)習(xí)、購物、導(dǎo)航等。
Google search中,設(shè)計了許多3D模型,老虎、獅子,甚至是數(shù)學(xué)公式,讓用戶在搜尋時能360度觀看,也可以用ar方式投射到家中,立體化地了解信息。疫情期間,獲得了全球使用者的廣大回響。
關(guān)于Google lens智慧鏡頭應(yīng)用,用戶打開攝像頭就可以識別花草、文字、電視、地標(biāo)、菜單。
在YouTube中的應(yīng)用。用戶可以一邊看美妝博主示范化妝方式,一邊可以使用AR功能進(jìn)行實時試妝。
Google Map中也應(yīng)用了ar戶型導(dǎo)航。用戶可以看到方向指示牌和導(dǎo)覽提示,仿佛一個專屬的私人導(dǎo)游。該應(yīng)用是目前GoogleAR應(yīng)用中使用者最多的應(yīng)用之一。
隨著手機的普及,營銷媒介也發(fā)展出基于手機相機的新應(yīng)用。運用AR將人們帶入沉浸式體驗,將人們帶入品牌世界。Google display network中,Google推出了3D Swirl營銷工具,該營銷應(yīng)用在今年下半年正式完成了beta測試版,并且已經(jīng)看到了用戶參與度及品牌影響力的顯著提升。
5G實踐前沿。隨著5G商用化,ARCore與LG Uplus合作,在韓國首爾進(jìn)行了AR+5G的實踐嘗試。在首爾地鐵站布建了AR藝術(shù)長廊和展示車廂,5G加持能夠克服地鐵站人多信號差的缺陷,人們能夠順暢地體驗到豐富的AR藝術(shù)內(nèi)容。
昌德宮。聯(lián)合國教科文組織世界遺產(chǎn)站點。Google與SK Telecom和文化遺產(chǎn)管理局合作,創(chuàng)建了全球首個5G賦能的AR文旅體驗。AR導(dǎo)覽由一個活化的石獅子帶領(lǐng),游客可以穿越到朝鮮王朝,體驗傳統(tǒng)習(xí)俗和體會朝鮮貴族生活。
三、關(guān)于ARCore核心功能
1、運動追蹤。用來幫助用戶實現(xiàn)虛擬現(xiàn)實的映射關(guān)系。
2、環(huán)境理解。對現(xiàn)實環(huán)境中的平面信息進(jìn)行評估,利用特征點來估算位置、大小以及朝向。
3、光估測。ARCore可以分析估算當(dāng)前環(huán)境中的光照信息,對渲染的虛擬內(nèi)容進(jìn)行光照色彩的校正,使其與手機攝像頭拍到的真實畫面結(jié)合得更加自然。
另外ARCore還有許多延伸的功能:
1、增強臉部識別。提供了高精度468點的3D Mesh??梢跃珳?zhǔn)地追蹤臉部細(xì)微表情,不需要深度傳感器,而是運用機器學(xué)習(xí)(ML)技術(shù)深度學(xué)習(xí),以達(dá)到這樣的功能。同時支持安卓及IOS用戶。
2、環(huán)境光HDR。要讓虛擬物品看起來更逼真,更融入實景,其中最重要的功能之一就是要有正確的光照呈現(xiàn)。運用了ARCore所提供的360度全景光照信息,圖中的虛擬小火箭,就可以有了對應(yīng)的反光及影子。
3、Scene Viewer場景觀測器。讓開發(fā)者可以直接在網(wǎng)頁上向用戶提供方便、好用的3D內(nèi)容及AR瀏覽功能。
4、Agumented Image增強圖像??梢詸z測手機拍攝到的圖像信息,并與預(yù)先設(shè)置在數(shù)據(jù)庫中的圖像進(jìn)行匹配??删_匹配包括移動中的圖像,或是同時檢測多個圖像。
5、云錨點。為安卓和iOS用戶創(chuàng)建共享的跨平臺體驗。就如同圖中的案例,從兩個人到數(shù)百人,都可以在各自的設(shè)備上一起種花、澆灌。
四、新近更新的案例補充
此前,VR陀螺已整理了AR軟件工程總監(jiān)王啟文(Leon Wang)關(guān)于ARCore最新動態(tài)的演講。在此基礎(chǔ)上,熊子青補充了一些案例。
1、瞬間放置API(Instant Placement API)
這個功能允許用戶僅需根據(jù)小范圍的平面特征,快速流暢地放置物件與互動,無需先移動設(shè)備,等待完整的環(huán)境跟蹤。
瞬間放置與比例維持功能相結(jié)合時,具有以下特點:
美圖也運用了Instant Placement 在一些特別的濾鏡中,例如在地上擺放一個寶藏箱,或是在地面刻印上今天的天氣、日期,用戶可以直接跳過掃描平面的步驟,快速放置或移動虛擬物件。
2、景深應(yīng)用API(Depth API)
景深A(yù)PI關(guān)鍵功能是遮擋虛擬物體、與虛擬對象互動、獲得沉浸式效果。這三個功能使得虛擬對象能夠與場景真正融合在一起。
例如谷歌創(chuàng)新實驗室打造了一款實驗性應(yīng)用Lines of Play。將多米諾骨牌及AR融合,借助深度信息,倒塌的骨牌會與房間中的墻壁家具,產(chǎn)生自然的互動。
Reality Crisis的Skatrix游戲,讓用戶無論是跳躍在樓梯邊緣或書桌上,都可以真實展現(xiàn)遮擋及碰撞的技術(shù)魅力。
除了移動游戲及自我表達(dá)類應(yīng)用外,深度信息還在很多工具類應(yīng)用上大放光彩。
例如提供遠(yuǎn)程技術(shù)解決方案的應(yīng)用TeamViewer,專家足不出戶就可以使用實時3D AR,在機器中準(zhǔn)確標(biāo)注,為用戶提供遠(yuǎn)程技術(shù)支持,一步步指示你修好家中的打印機。
知名手機制造商三星,也應(yīng)用了ARCore Depth API。智能手機可以利用預(yù)制尺子進(jìn)行物體大小參數(shù)的測量。
3、持久云錨點API(Persistent Cloud Anchors API)
該應(yīng)用可以讓用戶在更大的區(qū)域、更長的時間映射錨點內(nèi)容。換句話說就是開啟AR的“保存按鈕”,將數(shù)字和真實世界對應(yīng)疊加,用戶可以將錨點疊加在任何需要的地方,例如附加筆記。
過去云錨點只能保存二十四小時,這次我們推出全新的架構(gòu),將每次保存的時間可設(shè)定為一年內(nèi)任意天數(shù),并可以多次延長時間。
例如創(chuàng)夢天地攜手SYBO開發(fā)的社交應(yīng)用MARK。通過Persistent Cloud Anchor,將用戶的AR涂鴉創(chuàng)作與真實世界的位置鏈接。
瑞典鐵路局在火車站中的室內(nèi)導(dǎo)航SJ Labs,也運用了持久云錨點,協(xié)助旅客輕松地找到出口或特產(chǎn)店。
除此之外,由于疫情原因,博物館關(guān)閉。REWILD項目組充分運用深度API及Persistent Cloud Anchor,將博物館搬到家中。這個項目已經(jīng)兩年獲得了著名威比獎的最佳AR獎項。
投稿/爆料:tougao@youxituoluo.com
稿件/商務(wù)合作: 六六(微信 13138755620)
加入行業(yè)交流群:六六(微信 13138755620)
元宇宙數(shù)字產(chǎn)業(yè)服務(wù)平臺
下載「陀螺科技」APP,獲取前沿深度元宇宙訊息