5月27日下午,由武漢東湖新技術(shù)開發(fā)區(qū)管理委員會(huì)主辦,陀螺科技聯(lián)合主辦的2022元宇宙產(chǎn)業(yè)創(chuàng)新交流會(huì)在深圳市南山區(qū)舉行。
本次交流會(huì)以“世界光谷·元力覺醒”為主題,聚焦游戲、XR、數(shù)字文創(chuàng)、元宇宙等領(lǐng)域,邀請(qǐng)了多位重磅嘉賓參會(huì)交流。
包括HTC、中興通訊、萬興科技、英偉達(dá)、燧光、睿悅信息、瑞云科技、達(dá)晨財(cái)智、火花幻境、Dream Glass、中科未來、VR陀螺等元宇宙行業(yè)先鋒代表,騰訊、阿里云、字節(jié)跳動(dòng)、TCL、OPPO、VIVO、華強(qiáng)方特、雷鳥、清博智能、飛蝶虛擬現(xiàn)實(shí)等國內(nèi)外知名企業(yè)代表參會(huì)。
大會(huì)現(xiàn)場(chǎng),Dream Glass 營銷總監(jiān) 蔣利以“AR眼鏡如何在醫(yī)療行業(yè)落地”為主題發(fā)表了演講。
圖源:陀螺科技
以下為演講實(shí)錄:
大家下午好,我是蔣利。很開心今天和大家進(jìn)行交流和學(xué)習(xí),我今天要分享的主題是《AR眼鏡在醫(yī)療行業(yè)的落地》。
從2016年開始,VR和AR眼鏡做了很多行業(yè)應(yīng)用,很多人心中會(huì)有一個(gè)疑問,這些應(yīng)用對(duì)教育、醫(yī)療,文旅,工業(yè),是否真的起到了助力行業(yè)升級(jí)的實(shí)際價(jià)值?是不是一次性的示范性工程?這些項(xiàng)目是否可以達(dá)到可復(fù)制性?今天我會(huì)分享一些Dream Glass最近做的一些實(shí)際的醫(yī)療案例,借此跟大家探討一下,什么樣的應(yīng)用是具有可復(fù)制性,是具有實(shí)際落地價(jià)值的。
首先,介紹一下我們公司 Dream Glass。2016年我們?cè)诿绹韫瘸闪?,成立之初便獲得了幾千萬的融資。2018年,我們率先推出了自己的C端產(chǎn)品,在天貓和京東開通了旗艦店,成為真正開始做C端的第一家AR眼鏡品牌。去年年底,我們獲得了新一輪數(shù)千萬元的投資。
2018年,我們?cè)诤M膺M(jìn)行眾籌,總金額是150萬美金,成績是非常不錯(cuò)的,這個(gè)成績放到現(xiàn)在也非常不錯(cuò),大概售出四千多臺(tái)產(chǎn)品。第二年,這款產(chǎn)品進(jìn)行了量產(chǎn),2020年雙十一銷售1千多臺(tái),單品銷量在XR品類京東天貓雙榜排行第一,成績非常亮眼,給AR眼鏡做C端注入了一針強(qiáng)心劑。我們?cè)跓o人機(jī)市場(chǎng)也做了探索,和大疆消費(fèi)級(jí)和行業(yè)級(jí)產(chǎn)品進(jìn)行適配。除了大疆,Dream Glass線下還入駐了電信、聯(lián)通,switch游戲店,商場(chǎng)數(shù)碼店等。
剛才說的是C端的市場(chǎng),我們?cè)诮逃?,醫(yī)療,工業(yè),文旅市場(chǎng)都做了相關(guān)的探索,今天我重點(diǎn)說一下我們?cè)卺t(yī)療方面的行業(yè)應(yīng)用:5G+AR遠(yuǎn)程急診協(xié)助方案, 5G+AR遠(yuǎn)程手術(shù)指導(dǎo), 5G+AR遠(yuǎn)程手術(shù)培訓(xùn), 5G+AR超聲波遠(yuǎn)程會(huì)診,5G+AR病房探視。首先我們來了解下AR遠(yuǎn)程急診協(xié)助。為了讓大家更了解這個(gè)方案,我播放一段醫(yī)院的實(shí)際使用視頻。
(視頻介紹)這個(gè)是基層醫(yī)院的接診室,左下角是遠(yuǎn)程專家端,遇到急難雜癥,基層醫(yī)院給值班室的醫(yī)生打電話?;鶎俞t(yī)院沒有很好的辦法解決這種急診問題,可以戴上眼鏡,由遠(yuǎn)程的專家進(jìn)行協(xié)同救治。完成救治后進(jìn)行病人建檔,現(xiàn)場(chǎng)的通話視頻也會(huì)進(jìn)行存檔。我們做了攝像頭優(yōu)化,電腦端的畫面看得比較清楚。
AR遠(yuǎn)程急診協(xié)助方案,讓基層醫(yī)生解放了醫(yī)生的雙手,同時(shí)能夠無障礙參與治療。對(duì)于遠(yuǎn)程的專家,能夠不間斷的通過第一視角觀察病患,掌握患者的完整病征信息,以便作出更好的判斷和治療,同時(shí)可以對(duì)患者進(jìn)行標(biāo)注,降低基層醫(yī)生對(duì)溝通的理解歧義。遠(yuǎn)程協(xié)助可以解決基層醫(yī)院醫(yī)資力量不足的問題,推薦醫(yī)院同質(zhì)化建設(shè)。
Dream Glass這款自由曲面的眼鏡,為什么適合做遠(yuǎn)程急診協(xié)助方案?首先是它的大視場(chǎng)角90度,高清分辨率4K,使遠(yuǎn)程專家發(fā)送救治資料到眼鏡端讓基層醫(yī)療實(shí)時(shí)查看,成為可能。另外我們定制了高透的醫(yī)療鏡片,透光率達(dá)到85%。戴上這個(gè)眼鏡,醫(yī)生觀察病患和周圍環(huán)境,幾乎沒有阻擋的感覺。同時(shí)對(duì)攝像頭做了優(yōu)化處理,因?yàn)閿z像頭不能是固定的,真正治療過程中,基層醫(yī)生一直在操作,頭部一直在動(dòng),遠(yuǎn)程端看清現(xiàn)場(chǎng)的畫面有一定的阻礙,我們定制了可手動(dòng)調(diào)節(jié)攝像頭,讓遠(yuǎn)程專家可以觀察到不同角度的位置。另外焦距也做了優(yōu)化,我們做了很多實(shí)踐,醫(yī)生和患者的距離大概是一個(gè)手臂,這個(gè)距離是最好的,所以我們把攝像頭的聚焦定在大約0.45米,把細(xì)節(jié)都做完善。
大家知道,學(xué)醫(yī)是很辛苦的,70-80%的醫(yī)生都戴眼鏡,近視友好是實(shí)際應(yīng)用非常重要的方面,醫(yī)生佩戴眼鏡可以直接使用,不用調(diào)焦距或者定制鏡片。另外它是一款一體機(jī),比較輕巧,用頭部承重,所以佩戴起來一兩個(gè)小時(shí)是沒有問題的。如果我們用BB或者光波導(dǎo)形式的的眼鏡,戴在鼻梁上,醫(yī)生俯身的時(shí)候,眼鏡萬一掉下來砸到傷口是非常嚴(yán)重的,而頭部佩戴的這種方式非常牢固。每個(gè)細(xì)節(jié)我們都從不斷的實(shí)踐中,考慮到了。
關(guān)于AR遠(yuǎn)程手術(shù)指導(dǎo),如果大型的手術(shù)出現(xiàn)了異常的情況,主刀醫(yī)生向?qū)<野l(fā)起申請(qǐng),進(jìn)行實(shí)時(shí)的協(xié)同救治。包括三個(gè)方面,一個(gè)是病情評(píng)估,專家發(fā)回評(píng)估表了解病情,讓主刀醫(yī)生把病人的現(xiàn)狀填一下,比如脈搏、血壓,現(xiàn)場(chǎng)情況等。填寫的過程,一個(gè)是通過語音,如果病人不是全麻的情況下不能用語音,因?yàn)闀?huì)影響病人的情緒,那么就用手勢(shì)識(shí)別,用簡(jiǎn)單的手勢(shì),一或者二三四,后臺(tái)根據(jù)視頻自動(dòng)填病情評(píng)估量表。
其次是實(shí)時(shí)指導(dǎo),因?yàn)樵谑中g(shù)中出現(xiàn)異常的情況,專家不能按照原來的手術(shù)方案進(jìn)行,就用新的手術(shù)方案,主刀醫(yī)生存在不熟的情況,專家會(huì)發(fā)實(shí)時(shí)的手術(shù)流程給到主刀醫(yī)生AR眼鏡上進(jìn)行顯示,主刀醫(yī)生根據(jù)流程提示進(jìn)行操作,并接受遠(yuǎn)程專家的實(shí)時(shí)指導(dǎo)。肯定有人會(huì)問,這么重要的手術(shù)臺(tái)前,如果戴著AR眼鏡會(huì)不會(huì)影響工作效率,遮擋視線。這些問題我們其實(shí)都考慮了,手術(shù)臺(tái)上有強(qiáng)光,AR眼鏡對(duì)醫(yī)生視線的影響剛好可以忽略。手術(shù)室的強(qiáng)光照射,攝像頭的畫面是曝光的,攝像頭我們做了一個(gè)強(qiáng)光檢測(cè),同時(shí)后天實(shí)時(shí)做曝光處理,實(shí)時(shí)反饋到攝像頭,讓遠(yuǎn)程專家在強(qiáng)光下也能清楚的以第一視角獲得到現(xiàn)場(chǎng)的信息。
一般的醫(yī)院是終身的培訓(xùn)制,如果厲害的專家醫(yī)生主刀相對(duì)大型的手術(shù),其他的醫(yī)生想學(xué)習(xí),那么,由專家醫(yī)生戴上眼鏡,其他醫(yī)生可以通過智慧大屏進(jìn)行實(shí)操的遠(yuǎn)程學(xué)習(xí)。
超聲波會(huì)診,主要由手勢(shì)操作,因?yàn)锽超穿過的層次非常多,檢測(cè)母體,胎心或者特殊??疲缪劭频臅r(shí)候,需要非常有經(jīng)驗(yàn)的專家操作,這時(shí)候需要用到遠(yuǎn)程協(xié)助會(huì)診。眼鏡攝像頭采集醫(yī)生手勢(shì)動(dòng)作,通過超聲機(jī)接口采集超聲波超聲動(dòng)圖,
后臺(tái)實(shí)時(shí)合成視頻,專家端通過合成視頻遠(yuǎn)程判斷。傳統(tǒng)的遠(yuǎn)程會(huì)診采集裝置,固定攝像頭,手勢(shì)采集時(shí),遠(yuǎn)近難控制,易遮擋,不夠靈活,需要在采集工作站(采集超聲動(dòng)圖),超聲機(jī),患者間頻繁切換視角。AR方案中,眼鏡戴在操作醫(yī)生的頭上,手勢(shì)采集過程簡(jiǎn)單,清晰,無須頻繁切換視角,裝置靈活,病人床邊也可以一鍵發(fā)起遠(yuǎn)程超聲的會(huì)診。
AR病房的探視方案,比如ICU或者EICU的場(chǎng)景,病人家屬?zèng)]有辦法進(jìn)入,護(hù)士護(hù)理病人的時(shí)候,戴上眼鏡,家屬可以實(shí)時(shí)知道病人的情況。
以上就是我要分享的Dream Glass 最近實(shí)際在醫(yī)院落地的方案?;氐轿易畛跆岢龅膯栴},這些方案是否真的有實(shí)際使用價(jià)值?答案是肯定的。我們做這些方案的時(shí)候,目標(biāo)非常明確,我們所做的方案需要可復(fù)制性,真的能夠幫助醫(yī)生提高工作效率和質(zhì)量,這樣的方案才是有意義的,而不是一次性的示范性工程。我們Dream Glass的做事方式也會(huì)一直保持這種實(shí)事求是的風(fēng)格。
我的分享結(jié)束,謝謝大家!
投稿/爆料:tougao@youxituoluo.com
稿件/商務(wù)合作: 六六(微信 13138755620)
加入行業(yè)交流群:六六(微信 13138755620)
版權(quán)申明:本文為VR陀螺原創(chuàng),任何第三方未經(jīng)授權(quán)不得轉(zhuǎn)載。如需轉(zhuǎn)載請(qǐng)聯(lián)系微信:vrtuoluo233 申請(qǐng)授權(quán),并在轉(zhuǎn)載時(shí)保留轉(zhuǎn)載來源、作者以及原文鏈接信息,不得擅自更改內(nèi)容,違規(guī)轉(zhuǎn)載法律必究。文中有圖片、視頻素材來自互聯(lián)網(wǎng)或無法核實(shí)出處,如涉及版權(quán)問題,請(qǐng)聯(lián)系本網(wǎng)站協(xié)商處理。
元宇宙數(shù)字產(chǎn)業(yè)服務(wù)平臺(tái)
下載「陀螺科技」APP,獲取前沿深度元宇宙訊息