FBEC2021 | 傲意科技總經(jīng)理倪華良:詳解下一代XR交互生物肌電手環(huán)技術(shù)應(yīng)用

2021未來(lái)商業(yè)生態(tài)鏈接大會(huì)暨第六屆金陀螺獎(jiǎng)?lì)C獎(jiǎng)典禮(簡(jiǎn)稱“FBEC2021”)于2021年12月10日在深圳市大中華喜來(lái)登酒店盛大召開(kāi),本次大會(huì)由廣東省游戲產(chǎn)業(yè)協(xié)會(huì)、廣東省虛擬現(xiàn)實(shí)產(chǎn)業(yè)技術(shù)創(chuàng)新聯(lián)盟、深圳市科學(xué)技術(shù)協(xié)會(huì)、深圳市互聯(lián)網(wǎng)文化市場(chǎng)協(xié)會(huì)指導(dǎo),陀螺科技主辦,以“迎風(fēng)破局 · 守正創(chuàng)新”為主題,聚焦游戲、電競(jìng)、XR、元宇宙等互聯(lián)網(wǎng)前沿領(lǐng)域,探討行業(yè)熱門(mén)話題。歲末年關(guān),聚錦鵬城,我們與無(wú)數(shù)互聯(lián)網(wǎng)從業(yè)者同舟,共同探討未來(lái)商業(yè)生態(tài)鏈接的創(chuàng)新和變革!

FBEC2021分會(huì)場(chǎng)“變現(xiàn)之道·XR行業(yè)應(yīng)用論壇”邀請(qǐng)到傲意科技總經(jīng)理倪華良帶來(lái)主題為“下一代XR交互——生物肌電手環(huán)技術(shù)應(yīng)用詳解”的精彩分享。倪華良介紹了傲意科技的發(fā)展歷程以及相關(guān)技術(shù)。在他看來(lái),生物電技術(shù)和VR的結(jié)合越發(fā)緊密并迎來(lái)了快速發(fā)展階段,而傲意科技也在深耕其中,專注于肌電、心電、腦電生物電傳感器,AI以及仿生機(jī)械等領(lǐng)域。

以下為演講實(shí)錄:

大家好,很高興有機(jī)會(huì)參加這一VR、AR相關(guān)的會(huì)議。我看到會(huì)場(chǎng)上有很多老朋友,大家都在堅(jiān)持,很不容易。我們傲意科技也是行業(yè)老兵,我是公司的創(chuàng)始人倪華良。傲意科技是一家底層技術(shù)科技公司,在過(guò)去六年時(shí)間里,我們看到了未來(lái)應(yīng)用場(chǎng)景的核心東西,而傲意科技也深耕其中。

在這里,我也給大家介紹下傲意科技,傲意是做跟人體生物電信號(hào)相關(guān)的公司,涉及腦電、心電以及肌電等底層傳感器技術(shù),人機(jī)交互如非接觸式的手勢(shì)控制等。此外,傲意也專注于神經(jīng)康復(fù),包括虛擬場(chǎng)景神經(jīng)康復(fù)系統(tǒng)、仿生義肢、智能外骨骼等,這是我們公司這幾年正在做的方向。

我們公司的核心技術(shù)被我們稱之為感、知、動(dòng)。“感”是傳感器的技術(shù),這一技術(shù),我們做了很多年,有多種產(chǎn)品形態(tài),包括能夠滿足于不同應(yīng)用場(chǎng)景的腦電、心電、肌電的傳感器。“知”是我們針對(duì)于應(yīng)用的AI相關(guān)算法,即生物電識(shí)別AI及算法訓(xùn)練平臺(tái)APP;“動(dòng)”是復(fù)雜仿生機(jī)械、微型電機(jī)模組和電控。早前我們的電機(jī)模組高度依賴于進(jìn)口,如今都是自研自產(chǎn),我們已擁有微型電機(jī)模組和電控的技術(shù)。

說(shuō)到肌電應(yīng)用,跟元宇宙、VR、AR、XR相關(guān),可能大家更關(guān)注的是在人機(jī)交互領(lǐng)域,這也是我們從2015年成立以來(lái),公司一直在做的技術(shù)?;诩‰姷氖謩?shì)識(shí)別技術(shù)這個(gè)產(chǎn)品gForce在2016年的時(shí)候已經(jīng)推出過(guò),當(dāng)時(shí)也與行業(yè)諸多企業(yè)有過(guò)合作。

大家可以看一下PPT的左邊是我們肌電手環(huán)的APP界面,APP主要是完成信號(hào)采集和手勢(shì)的人工智能訓(xùn)練。在APP這里通過(guò)信號(hào)錄入、AI學(xué)習(xí),生成動(dòng)作模型,然后可以識(shí)別相應(yīng)的動(dòng)作。

右邊的視頻是我來(lái)之前從官網(wǎng)上翻出來(lái)的,是2016年的一段視頻。當(dāng)時(shí),是用大朋的VR頭顯,肌電手勢(shì)控制技術(shù)做了適配, 用非接觸式的方式,在VR下進(jìn)行手勢(shì)互動(dòng)?;诩‰姷氖謩?shì)識(shí)別方向,行業(yè)里出過(guò)三家公司,一家是加拿大的Thalmic Labs,一家是美國(guó)的Ctrl-labs、一家是我們傲意?,F(xiàn)在在產(chǎn)品的落地上,只有我們一家公司堅(jiān)持。雖然量不大,但是一直在往行業(yè)里持續(xù)發(fā)布產(chǎn)品,并且對(duì)外發(fā)售了五年,國(guó)內(nèi)外很多高校和研究機(jī)構(gòu)采購(gòu)了我們的產(chǎn)品進(jìn)行肌電方向的研究。

我們覺(jué)得肌電作為人機(jī)交互的方向是有價(jià)值的,當(dāng)然技術(shù)什么時(shí)候爆發(fā)、應(yīng)用在什么應(yīng)用場(chǎng)景還需要探索,每一種技術(shù)都有缺點(diǎn)和優(yōu)點(diǎn),強(qiáng)行用單一技術(shù)解決所有問(wèn)題是非常困難的。在肌電手勢(shì)方向最近有一個(gè)比較利好的消息,2019年Facebook收購(gòu)了我們的競(jìng)爭(zhēng)對(duì)手Ctrl-labs,包括最近小扎的演講,提到他們可能會(huì)以肌電EMG方式作為人機(jī)交互的方式,肌電技術(shù)有可能是未來(lái)AR眼鏡的標(biāo)配控制方式,我們期待行業(yè)里的大拿什么時(shí)候能進(jìn)來(lái)引領(lǐng)一把。

很多新的科技來(lái)源于于小的創(chuàng)新團(tuán)隊(duì),但是發(fā)揚(yáng)光大光靠創(chuàng)新團(tuán)隊(duì)來(lái)做技術(shù)是遠(yuǎn)不夠的,需要大的資本投入和行業(yè)大拿的引領(lǐng)。我們?cè)诩‰娛謩?shì)技術(shù)等了五六年的時(shí)間,現(xiàn)在看來(lái),有可能即將迎來(lái)新的機(jī)會(huì)點(diǎn)。

在2017年以后,受限于當(dāng)時(shí)VR AR行業(yè)發(fā)展進(jìn)入低谷,我們也做了一些應(yīng)用方面的調(diào)整。我們?cè)谝延械募‰娛謩?shì)識(shí)別技術(shù)上,又進(jìn)一步地做了更重的產(chǎn)品,也是非常有價(jià)值的實(shí)體產(chǎn)品,就是肌電仿生手。

在PPT上大家可以看到,左邊的這個(gè)照片就是我們做的這臺(tái)手,下方是肌電傳感器陣列,這邊是人工智能模式識(shí)別模塊,所有的電機(jī)都集成在這手里。中間這個(gè)波形是在做不同動(dòng)作的時(shí)候,在手臂上所反映出來(lái)的電信號(hào),這些電信號(hào)是由大腦發(fā)過(guò)來(lái)的神經(jīng)信號(hào),到達(dá)肌肉里后,在肌肉里反映出來(lái)的一種稱為EMG肌電的信號(hào)。

通過(guò)采集和分析這些信號(hào),可以反推我們?cè)谧鍪裁磩?dòng)作。當(dāng)然,不光是說(shuō)手勢(shì),如果是安裝在腿上,也可以檢測(cè)腿的動(dòng)作意圖,比如智能的仿生下肢也是有很多論文是用這個(gè)肌電的方式做。

這個(gè)肌電控制的智能仿生手,我們落地的產(chǎn)品,先前央視科教頻道找到我們,拍攝了這個(gè)影片。

我們的產(chǎn)品有它的特殊性,主要服務(wù)的用戶群體是截肢殘疾人群體,傳統(tǒng)上這樣的產(chǎn)品非常昂貴,我們通過(guò)技術(shù)手段進(jìn)行了創(chuàng)新,實(shí)現(xiàn)了國(guó)產(chǎn)化,把價(jià)格從先前國(guó)外大概30多萬(wàn)人民幣的價(jià)位遠(yuǎn)遠(yuǎn)拉下來(lái)。

除了落地這樣一個(gè)仿生手,總的來(lái)說(shuō),我們一直沒(méi)有離開(kāi)過(guò)VR、AR、虛擬情景。我們?cè)谧龅钠渌麘?yīng)用,包括神經(jīng)康復(fù)。在神經(jīng)康復(fù)里,肌電是神經(jīng)信號(hào)非常好的表現(xiàn)形式。因?yàn)檎嬲闹袠猩窠?jīng)信號(hào)采集下來(lái)之后非常微弱,同時(shí)是非常難分解和理解的,肌電是代表人神經(jīng)傳導(dǎo)和運(yùn)動(dòng)能力非常好的指標(biāo)。

此外,我們也關(guān)注其他神經(jīng)類疾病,每一種疾病群體是比較大的,像癲癇,小朋友的自閉癥和多動(dòng)癥,都是屬于神經(jīng)類的,還有比如阿爾茲海默癥等,都可以采用虛擬情景互動(dòng)和生物電結(jié)合的方式,結(jié)合醫(yī)學(xué)上神經(jīng)重塑性的支持理論,進(jìn)行神經(jīng)和肢體能力的提升和改善。

這個(gè)是我們基于肌電在開(kāi)發(fā)VR情景互動(dòng)的肌力康復(fù)產(chǎn)品,看上去是非常簡(jiǎn)單、卡通的小游戲,但對(duì)于肌無(wú)力、神經(jīng)受損、大腦受損所造成肢體功能傷害修復(fù)非常有價(jià)值,而且可以在家里使用。右邊的是智能的矯形器,在上面可以疊加多種傳感器。我們?cè)谶@里做的是把人體數(shù)值化,因?yàn)槿梭w包含很多信號(hào),如內(nèi)在的心律、血氧、肌肉、神經(jīng)傳導(dǎo),非常多維。只用攝像頭很難全面描述一個(gè)人的情況,這是我們結(jié)合VR技術(shù)應(yīng)用做成的康復(fù)訓(xùn)練系統(tǒng)。在展現(xiàn)形式里可以是電腦,也可以是平板,可以是VR、AR。技術(shù)的本體對(duì)我們而言,它是一個(gè)載體,VR,AR的沉浸式技術(shù)使得康復(fù)過(guò)程更加真實(shí)和有趣。

我們也給醫(yī)生做評(píng)估系統(tǒng),也是結(jié)合這樣的方式進(jìn)行。另外,我們公司在研發(fā)腦電系統(tǒng),腦電系統(tǒng)比肌電更加要到高一級(jí)的位置,我們主打兩個(gè)方向,一個(gè)是癲癇疾病癇波形偵測(cè)上,另外一個(gè)不是很好做但是很有價(jià)值的,小朋友的自閉癥、多動(dòng)癥,采用腦電生物電反饋的方式結(jié)合虛擬場(chǎng)景的調(diào)控對(duì)由于某種異常原因所造成的神經(jīng)問(wèn)題進(jìn)行治療。

同時(shí),我們也和合作伙伴在探索基于VR、生物電、姿態(tài)反饋等技術(shù)的運(yùn)動(dòng)健身系統(tǒng),我們覺(jué)得非常有意思,也是未來(lái)在落地場(chǎng)景下比較好的方向,希望大家可以關(guān)注。

謝謝大家!

極客網(wǎng)企業(yè)會(huì)員

免責(zé)聲明:本網(wǎng)站內(nèi)容主要來(lái)自原創(chuàng)、合作伙伴供稿和第三方自媒體作者投稿,凡在本網(wǎng)站出現(xiàn)的信息,均僅供參考。本網(wǎng)站將盡力確保所提供信息的準(zhǔn)確性及可靠性,但不保證有關(guān)資料的準(zhǔn)確性及可靠性,讀者在使用前請(qǐng)進(jìn)一步核實(shí),并對(duì)任何自主決定的行為負(fù)責(zé)。本網(wǎng)站對(duì)有關(guān)資料所引致的錯(cuò)誤、不確或遺漏,概不負(fù)任何法律責(zé)任。任何單位或個(gè)人認(rèn)為本網(wǎng)站中的網(wǎng)頁(yè)或鏈接內(nèi)容可能涉嫌侵犯其知識(shí)產(chǎn)權(quán)或存在不實(shí)內(nèi)容時(shí),應(yīng)及時(shí)向本網(wǎng)站提出書(shū)面權(quán)利通知或不實(shí)情況說(shuō)明,并提供身份證明、權(quán)屬證明及詳細(xì)侵權(quán)或不實(shí)情況證明。本網(wǎng)站在收到上述法律文件后,將會(huì)依法盡快聯(lián)系相關(guān)文章源頭核實(shí),溝通刪除相關(guān)內(nèi)容或斷開(kāi)相關(guān)鏈接。

2021-12-15
FBEC2021 | 傲意科技總經(jīng)理倪華良:詳解下一代XR交互生物肌電手環(huán)技術(shù)應(yīng)用
FBEC2021分會(huì)場(chǎng)“變現(xiàn)之道·XR行業(yè)應(yīng)用論壇”邀請(qǐng)到傲意科技總經(jīng)理倪華良帶來(lái)主題為“下一代XR交互——生物肌電手環(huán)技術(shù)應(yīng)用詳解”的精彩分享。倪華良介紹了傲意科技的發(fā)展歷程以及相關(guān)技術(shù)。在他看來(lái),生物電技術(shù)和VR的結(jié)合越發(fā)緊密并迎來(lái)了快速發(fā)展階段,而傲意科技也在深耕其中,專注于肌電、心電、腦電生物電傳感器,AI以及仿生機(jī)械等領(lǐng)域。

長(zhǎng)按掃碼 閱讀全文