GPU和神經(jīng)網(wǎng)絡(luò)加速器芯片,讓汽車學(xué)會(huì)自主思考

汽車行業(yè)是推動(dòng)人工智能(AI)發(fā)展的重要行業(yè)之一,這是因?yàn)樵撔袠I(yè)致力于自動(dòng)駕駛汽車和高級(jí)駕駛員輔助系統(tǒng)(ADAS)的泛在利益。

汽車正在變得越來(lái)越智能,但是如果汽車行業(yè)要實(shí)現(xiàn)完全自動(dòng)駕駛的目標(biāo),他們還有很長(zhǎng)的路要走。盡管業(yè)界還在討論實(shí)現(xiàn)全自動(dòng)化所需的理想技術(shù)組合,但是有一點(diǎn)是明確的,那就是人工智能,尤其是神經(jīng)網(wǎng)絡(luò)將發(fā)揮重要作用。

神經(jīng)網(wǎng)絡(luò)

神經(jīng)網(wǎng)絡(luò)的作用是執(zhí)行對(duì)于傳統(tǒng)視覺(jué)或模式識(shí)別系統(tǒng)來(lái)說(shuō)具有挑戰(zhàn)性的任務(wù)。通過(guò)使每個(gè)神經(jīng)網(wǎng)絡(luò)各自不同,并針對(duì)特定任務(wù)進(jìn)行設(shè)計(jì),它可以更高效、更精確地執(zhí)行任務(wù)。

所有神經(jīng)網(wǎng)絡(luò)的組織模式都是在多個(gè)層面上多次處理數(shù)據(jù)。因此,神經(jīng)網(wǎng)絡(luò)可以在不同的輸入模式下運(yùn)行十到二十次,而不是用一組特定的參數(shù)只運(yùn)行一次操作。這個(gè)想法是,通過(guò)所有這些不同的路徑,選擇的數(shù)量就會(huì)增加。當(dāng)?shù)搅诵枰龀鰶Q策的時(shí)候,它已經(jīng)從輸入中提取了所有的信息。

在路標(biāo)識(shí)別的示例中,第一層可能正在尋找一個(gè)標(biāo)識(shí)的角形狀,然后是顏色等各個(gè)步驟執(zhí)行下去,直到它可以非常確信地說(shuō)這是一個(gè)路標(biāo)并說(shuō)明其含義。這樣做的好處在于無(wú)需對(duì)每一個(gè)步驟都進(jìn)行編程,神經(jīng)網(wǎng)絡(luò)將會(huì)自己完成,并且隨著時(shí)間的推移而不斷學(xué)習(xí)。該算法知道它需要識(shí)別的內(nèi)容,并將嘗試不同的方法,直到實(shí)現(xiàn)目標(biāo),并在過(guò)程中不斷學(xué)習(xí)。一旦神經(jīng)網(wǎng)絡(luò)在經(jīng)過(guò)培訓(xùn)之后,它便可以在實(shí)際應(yīng)用中發(fā)揮作用。這意味著工程師不必花費(fèi)數(shù)小時(shí)來(lái)微調(diào)復(fù)雜的算法,他們只需向神經(jīng)網(wǎng)絡(luò)展示它需要發(fā)現(xiàn)的內(nèi)容并讓其自學(xué)完成。

這些技術(shù)已經(jīng)在車輛中被廣泛用于目標(biāo)檢測(cè)、分類和分析,而駕駛員監(jiān)測(cè)、訪問(wèn)控制以及語(yǔ)音和手勢(shì)識(shí)別也可以利用不同類型的神經(jīng)網(wǎng)絡(luò)。此外,將傳統(tǒng)視覺(jué)與神經(jīng)網(wǎng)絡(luò)相結(jié)合的人工智能方法,可用于行人路徑分析和環(huán)繞視圖等應(yīng)用場(chǎng)景,它將同時(shí)依賴于圖形處理器(GPU)和神經(jīng)網(wǎng)絡(luò)加速器(NNA)。

在從傳感器到電子控制單元(ECU)整個(gè)鏈路中也可以使用神經(jīng)網(wǎng)絡(luò),在預(yù)處理、中間處理和后處理中使用的各種技術(shù)將人工智能引入了其中。

此外,車聯(lián)網(wǎng)(V2X)技術(shù)正在開(kāi)發(fā)中,該技術(shù)將主要使用自動(dòng)駕駛汽車作為傳感載體,為各種智慧城市和智慧交通場(chǎng)景提供數(shù)據(jù)和信息。同樣,這些進(jìn)展將依賴于采用GPU和NNA的方法實(shí)現(xiàn)人工智能,以支持來(lái)自越來(lái)越大的輸入集的各種分析和計(jì)算。

傳感器融合

自動(dòng)駕駛和高度自動(dòng)化的車輛將嚴(yán)重依賴各種類型的傳感器,包括攝像頭、熱成像、雷達(dá)、激光雷達(dá)(LiDAR)等。所有這些傳感器傳出的信號(hào)都需要進(jìn)行解讀和融合,以便全面了解車輛內(nèi)部和外部發(fā)生的情況。

傳感器融合對(duì)于自動(dòng)駕駛至關(guān)重要,它將涉及到GPU和神經(jīng)網(wǎng)絡(luò)以及機(jī)器學(xué)習(xí)和人工智能的結(jié)合。

車輛內(nèi)部傳感器融合的一個(gè)很好的示例是駕駛員監(jiān)測(cè)。在當(dāng)今的車輛中,各種各樣的傳感器都能夠檢測(cè)到駕駛員是否注意力不集中。神經(jīng)網(wǎng)絡(luò)可以分析拍攝到的駕駛員圖像,以判斷他或她是否在睡覺(jué)、處于疲倦狀態(tài)、注意力不集中,甚至通過(guò)移動(dòng)設(shè)備講話或發(fā)信息。這對(duì)于早期的自動(dòng)駕駛車輛來(lái)說(shuō)是至關(guān)重要的信息,因?yàn)樗赡苄枰{駛員在某些時(shí)候重新控制車輛,因?yàn)槠囆枰礼{駛員是否處于合適的狀態(tài)才能這樣做。

駕駛員監(jiān)測(cè)是如何工作的?對(duì)準(zhǔn)駕駛員面部的攝像頭為分析面部元素(尤其是眼睛)的算法提供了輸入。是睜著眼睛還是閉著眼睛?如果是閉著眼睛,閉眼多長(zhǎng)時(shí)間?眼神是否飄忽不定?駕駛員正在看向哪里?

研究整個(gè)面部可以確定駕駛員是生氣還是悲傷。如果是憤怒,系統(tǒng)會(huì)建議駕駛員先靠邊停車并冷靜下來(lái),然后再繼續(xù)行駛。

所有這些都是基于構(gòu)建一個(gè)面部圖像,提取關(guān)鍵點(diǎn)并使用神經(jīng)網(wǎng)絡(luò)提取情緒、注視時(shí)間等來(lái)判斷駕駛員的精神狀態(tài)。

在未來(lái)的兩三年內(nèi),駕駛員監(jiān)測(cè)可能會(huì)成為必須從歐洲新車評(píng)估計(jì)劃(NCAP)和美國(guó)國(guó)家高速公路通行安全管理局(NHTSA)獲得批準(zhǔn)的一項(xiàng)要求,因此駕駛員監(jiān)測(cè)會(huì)成為汽車制造商必須要實(shí)施的技術(shù),不僅要適用于高端汽車,還要適用于所有車輛。

自動(dòng)駕駛的等級(jí)

美國(guó)汽車工程師學(xué)會(huì)(SAE)和美國(guó)高速公路交通安全管理局已將自動(dòng)駕駛汽車的能力分為六個(gè)等級(jí)?;旧希燃?jí)0完全沒(méi)有自動(dòng)化,而在等級(jí)1中,汽車將為駕駛員提供一些幫助。等級(jí)2具有更多的駕駛輔助功能,甚至可以自主執(zhí)行一些任務(wù),例如自動(dòng)緊急制動(dòng)以避免碰撞。

等級(jí)3是一個(gè)棘手的問(wèn)題,雖然汽車是自動(dòng)駕駛,但駕駛員必須隨時(shí)準(zhǔn)備駕駛車輛。駕駛員監(jiān)測(cè)將是等級(jí)3自動(dòng)駕駛的關(guān)鍵,因?yàn)轳{駛員必須做好干預(yù)的準(zhǔn)備,并且在一定程度上,車輛有責(zé)任確保駕駛員做好準(zhǔn)備。

在等級(jí)4中,即使駕駛員可以接手車輛駕駛,但從理論上講,車輛也可以處理它所處現(xiàn)場(chǎng)的所有情況。等級(jí)5的車輛將實(shí)現(xiàn)全自動(dòng)化,沒(méi)有方向盤和踏板。

車輛自動(dòng)駕駛性能每提高一個(gè)級(jí)別,所需的計(jì)算性能就會(huì)增加大約十倍。這就是為什么神經(jīng)網(wǎng)絡(luò)很重要的原因,因?yàn)樗鼈兛梢栽诜浅5偷墓南绿峁┻@種性能。

目標(biāo)檢測(cè)

以一個(gè)行人為例,汽車的車載攝像頭和傳感器可以記錄行人是在行走或站立;神經(jīng)網(wǎng)絡(luò)可被用于繪制行人可能要走的路線,并計(jì)算車輛是否需要減速或快速制動(dòng)。神經(jīng)網(wǎng)絡(luò)還可以觀察同一幅圖像并對(duì)其進(jìn)行分割,從中挑選出其他物體,并應(yīng)用目標(biāo)識(shí)別技術(shù)來(lái)判斷出它們是否代表了車輛需要注意的東西。所有這些都必須把車輛的位置以及它想要去的地方納入考慮之中,如果車輛正在倒車,并檢測(cè)到在車輛后面有一個(gè)小孩,就需要迅速處理并進(jìn)行剎車。要做到這一點(diǎn),就需要人工智能和神經(jīng)網(wǎng)絡(luò)來(lái)查看那里是否有物體存在,并對(duì)其進(jìn)行識(shí)別認(rèn)出是一個(gè)孩子,然后向執(zhí)行器或駕駛員發(fā)送一個(gè)信號(hào),以采取措施。

由于攝像頭通常會(huì)帶有某種魚(yú)眼鏡頭,因此這將使其變得更加復(fù)雜。這會(huì)產(chǎn)生一張變形的圖片,需要先矯正然后進(jìn)行解讀。來(lái)自這個(gè)設(shè)備以及其他傳感器的輸入需要結(jié)合起來(lái),從而在瞬間做出決策。

數(shù)據(jù)處理

與此同時(shí),來(lái)自汽車周圍的其他信息也源源不斷地被送達(dá),包括來(lái)自于所有傳感器的以及從其他車輛或基礎(chǔ)設(shè)施通過(guò)無(wú)線通信接收到的信息。這是一個(gè)巨大的數(shù)據(jù)量,可能在太字節(jié)(terabyte)范圍內(nèi)。

ECU將遍布汽車各處,并根據(jù)數(shù)據(jù)做出決策。這可能會(huì)涉及到100個(gè)或者更多的ECU。業(yè)界正在使用一些方法來(lái)研究如何用更少的ECU和更多的計(jì)算能力來(lái)實(shí)現(xiàn)這一點(diǎn)。攝像頭或傳感器旁邊的嵌入式人工智能可以做出一些決定,從而減少車輛需要傳遞的信息。

這意味著需要不同等級(jí)的處理方式。數(shù)據(jù)可以在捕獲點(diǎn)進(jìn)行預(yù)處理,例如拉直魚(yú)眼鏡頭的圖像。中間處理可能包括各種已計(jì)劃的任務(wù)、目標(biāo)識(shí)別、決策制定等。之后可以進(jìn)行后處理,當(dāng)信息可以被清理整齊并顯示在屏幕上時(shí),讓駕駛員就知道正在發(fā)生什么或已經(jīng)發(fā)生了什么。

應(yīng)用

這些數(shù)據(jù)處理技術(shù)也被用于創(chuàng)建當(dāng)前正在開(kāi)發(fā)的應(yīng)用,以在車內(nèi)創(chuàng)建虛擬環(huán)視車身支撐柱。在此用例中,將在支撐柱(連接車頂和車身的支撐柱)上安裝攝像頭來(lái)捕獲車外發(fā)生的事情。支撐柱的內(nèi)部將提供一個(gè)顯示器,以顯示這些攝像頭正在捕獲的內(nèi)容,從而為駕駛員提供一個(gè)不間斷的視場(chǎng)。

這個(gè)過(guò)程非常難以實(shí)現(xiàn)。系統(tǒng)必須了解駕駛員正在查看的另一側(cè)是什么情景。圖片將需要修正變形并放置在不平整或彎曲的表面上,然后重新變形到支撐柱的輪廓上。

盡管這一進(jìn)步是未來(lái)的趨勢(shì),但一些高端車輛已經(jīng)提供了環(huán)繞視圖系統(tǒng),并且它們很快將應(yīng)用于中檔和入門級(jí)車輛。GPU被用于分析遍布車輛周圍的各個(gè)攝像頭所捕獲的圖像(通常有四個(gè)或五個(gè)攝像頭),并將圖像拼接在一起。根據(jù)拼接的圖像,神經(jīng)網(wǎng)絡(luò)將執(zhí)行目標(biāo)檢測(cè)和路徑預(yù)測(cè),以查看這些目標(biāo)是否有可能攔擋車輛的路徑。

信息娛樂(lè)和導(dǎo)航

在車載信息娛樂(lè)系統(tǒng)(IVI)和導(dǎo)航方面,GPU也起著重要作用。它們還參與語(yǔ)音控制,這很可能成為人與車之間的關(guān)鍵接口。因此,對(duì)于衛(wèi)星導(dǎo)航系統(tǒng)來(lái)說(shuō),駕駛員不必操作按鈕和鍵盤來(lái)輸入目的地,而是只需說(shuō)出郵政編碼或街道名字,然后就可要求系統(tǒng)繪制出路線。

儀表盤將被連接到外部攝像頭,以用于路標(biāo)識(shí)別等操作。如果攝像頭捕捉到一個(gè)限速的標(biāo)志,該標(biāo)志可以在有效的時(shí)間內(nèi)顯示在駕駛員面前;如果汽車超過(guò)限速,就會(huì)發(fā)出聲響警告。

實(shí)際上,整個(gè)儀表顯示區(qū)將使用GPU進(jìn)行圖像渲染和信息優(yōu)先級(jí)排序。如果系統(tǒng)確定駕駛員需要了解一些關(guān)鍵信息,該信息可能會(huì)從儀表顯示區(qū)中彈出,甚至可以投射到擋風(fēng)玻璃上。擋風(fēng)玻璃上的圖像也可以被用作導(dǎo)航系統(tǒng)的一部分,向駕駛員顯示正確的轉(zhuǎn)彎方向或說(shuō)明汽車在即將到來(lái)的路口需要駛?cè)肽?/p>

編輯:muyan

(免責(zé)聲明:本網(wǎng)站內(nèi)容主要來(lái)自原創(chuàng)、合作伙伴供稿和第三方自媒體作者投稿,凡在本網(wǎng)站出現(xiàn)的信息,均僅供參考。本網(wǎng)站將盡力確保所提供信息的準(zhǔn)確性及可靠性,但不保證有關(guān)資料的準(zhǔn)確性及可靠性,讀者在使用前請(qǐng)進(jìn)一步核實(shí),并對(duì)任何自主決定的行為負(fù)責(zé)。本網(wǎng)站對(duì)有關(guān)資料所引致的錯(cuò)誤、不確或遺漏,概不負(fù)任何法律責(zé)任。
任何單位或個(gè)人認(rèn)為本網(wǎng)站中的網(wǎng)頁(yè)或鏈接內(nèi)容可能涉嫌侵犯其知識(shí)產(chǎn)權(quán)或存在不實(shí)內(nèi)容時(shí),應(yīng)及時(shí)向本網(wǎng)站提出書(shū)面權(quán)利通知或不實(shí)情況說(shuō)明,并提供身份證明、權(quán)屬證明及詳細(xì)侵權(quán)或不實(shí)情況證明。本網(wǎng)站在收到上述法律文件后,將會(huì)依法盡快聯(lián)系相關(guān)文章源頭核實(shí),溝通刪除相關(guān)內(nèi)容或斷開(kāi)相關(guān)鏈接。 )

贊助商
2019-12-17
GPU和神經(jīng)網(wǎng)絡(luò)加速器芯片,讓汽車學(xué)會(huì)自主思考
汽車行業(yè)是推動(dòng)人工智能(AI)發(fā)展的重要行業(yè)之一,這是因?yàn)樵撔袠I(yè)致力于自動(dòng)駕駛汽車和高級(jí)駕駛員輔助系統(tǒng)(ADAS)的泛在利益。

長(zhǎng)按掃碼 閱讀全文