街景車弱爆了,照片游技術(shù)是未來?

尼泊爾發(fā)生了本世紀(jì)陸地第五次八級(jí)大地震,加德滿都12座世界遺產(chǎn)建筑被不同程度損毀,尼泊爾專家稱能工巧匠需要用大約10年時(shí)間才可修復(fù)這些古跡。在他們實(shí)現(xiàn)這一目標(biāo)之前,百度拿出了一個(gè)快速解決方案:基于照片游技術(shù),號(hào)召全球網(wǎng)友上傳加德滿都相關(guān)景點(diǎn)照片,嘗試用技術(shù)在虛擬世界對(duì)被損毀的景點(diǎn)進(jìn)行360°還原。這聽上去是一個(gè)巨大的“拼圖”工程,好在有一項(xiàng)名為“照片游”的技術(shù),而這項(xiàng)技術(shù)未來甚至有望取代街景車,做到真正還原世界每一個(gè)時(shí)刻的每一個(gè)角落。

照片游技術(shù)收集和還原真實(shí)世界

百度地圖還原加德滿都的計(jì)劃,使用被稱為照片游的核心技術(shù)。這個(gè)技術(shù)并不難解釋清楚:首先,百度收集用戶手里海量的關(guān)于某個(gè)景點(diǎn)不同角度、不同時(shí)間、不同特征的風(fēng)景照片;其次,通過圖像技術(shù)對(duì)海量照片進(jìn)行篩選和三維建模,把平面還原成空間;再次,通過智能游覽路徑規(guī)劃算法,生成一條最佳游覽路徑模擬真人游覽;最后,利用照片渲染技術(shù),對(duì)某些缺失的角落進(jìn)行修補(bǔ)插入虛擬照片。

照片游技術(shù)所以來的四項(xiàng)基本技術(shù),每一個(gè)都已被應(yīng)用在成熟應(yīng)用之中。

百度、Google地圖很早就有UGC景點(diǎn)相冊(cè)功能,用戶可選定一個(gè)地點(diǎn)上傳對(duì)應(yīng)照片,只不過主要目的是分享給其他用戶?;谄矫鎴D像的3D建模,是街景應(yīng)用的核心技術(shù),只不過它的照片素材是街景車等專業(yè)取景器拍攝而來。

智能路徑游覽規(guī)劃算法主要是利用大數(shù)據(jù)分析和圖像識(shí)別算法,分析出哪些角度更受用戶親睞,哪些位置的人流最多,進(jìn)而得出景點(diǎn)最合適的虛擬游覽路線,百度地圖熱力圖便是基于人群特征的地圖技術(shù)。照片渲染技術(shù)在《返老還童》《速度與激情7》已在大量電影中被應(yīng)用,一些照相館提供的照片修復(fù)服務(wù)所使用的軟件同樣應(yīng)用了這個(gè)技術(shù)。

基于UGC的照片游技術(shù)已經(jīng)被應(yīng)用在Google地圖和百度地圖之中。百度與Google最核心的不同是智能路徑規(guī)劃算法和圖片渲染這兩部分,百度除了在空間上還原之外,還可以讓用戶看到不同時(shí)間狀態(tài)下古跡的不同姿態(tài)(陰晴、白天傍晚、雨雪等),這主要基于對(duì)用戶上傳照片的光線強(qiáng)度分析。此前百度照片游技術(shù)已上線22個(gè)景點(diǎn)的街景,筆者體驗(yàn)感覺還不錯(cuò)。

上述所有技術(shù)都離不開關(guān)鍵的幾個(gè)基礎(chǔ)技術(shù):大數(shù)據(jù)、機(jī)器視覺和人工智能。用戶上傳的海量照片與街景車的規(guī)范照片比雜亂數(shù)倍,需要剔除無用、重復(fù)照片,篩選對(duì)于還原有效的照片,這需要圖像識(shí)別和大數(shù)據(jù)技術(shù);在還原時(shí)不可能人工去拼接需要機(jī)器自動(dòng)還原為3D,路徑規(guī)劃和圖片渲染則需要基于圖像素材情況進(jìn)行自動(dòng)的規(guī)劃,這需要人工智能技術(shù)。當(dāng)然,機(jī)器視覺本身是基于大數(shù)據(jù)和人工智能技術(shù)。

照片游技術(shù)還有哪些使用場(chǎng)景?

照片游技術(shù)還在探索階段,目前僅僅用于少部分景點(diǎn)的虛擬街景生成。隨著圖像識(shí)別技術(shù)、圖像渲染技術(shù)、三維建模技術(shù)和人工智能技術(shù)的發(fā)展,它將不斷成熟,具有巨大的應(yīng)用潛力,我甚至認(rèn)為照片游技術(shù)可以與街景技術(shù)、電子地圖技術(shù)并列,成為未來的核心地圖技術(shù)之一,因?yàn)樗梢缘统杀?、高效率、無死角地幫助人類把物理世界映射到虛擬世界,而這是從地圖第一天誕生其人類一直都有的愿望,并且今天愈發(fā)強(qiáng)烈。

典型場(chǎng)景1:還原世界的每個(gè)時(shí)刻

在加德滿都被毀之后,基于街景車的專業(yè)取景已無可能,只有基于舊照片進(jìn)行還原,利用互聯(lián)網(wǎng)的UGC能力可收集到全球海量照片,照片游技術(shù)則可以實(shí)現(xiàn)還原。盡管在加德滿都被損毀之后,其他重要旅游經(jīng)典應(yīng)該會(huì)有意識(shí)加快街景建設(shè)。不過別忘了,有目的的街景建設(shè)都只能還原某個(gè)時(shí)刻的街景,比如杭州西湖春夏秋冬各不相同,只有通過照片游才可還原不同時(shí)間點(diǎn)的街景。

還有,除了加德滿都,世界上還有大量景色已經(jīng)無法還原,且存在可觀數(shù)量的照片,比如三峽工程蓄水后被淹沒的沿線城市、沿線風(fēng)景。哪怕是你所生活的城市,幾年之后你再回頭來看,恐怕都會(huì)面目全非,人類建設(shè)大躍進(jìn)正在淹沒一代又一代記憶。不過這個(gè)星球每時(shí)每刻都在被不同的人從不同角度拍攝進(jìn)去,從室內(nèi)到室外,海量照片未來都可能成為“照片游”還原的素材。而這些還原后的結(jié)果則可以被應(yīng)用到景區(qū)導(dǎo)覽、人文社科研究、用戶還舊尋幽探古,等等。

典型場(chǎng)景2:更低成本的街景制作

街景技術(shù)已經(jīng)出現(xiàn)近十年了,不過你會(huì)發(fā)現(xiàn)你所在地區(qū)可能并不在街景地圖之中,就算在可能已是兩年前的數(shù)據(jù),店鋪、路段什么的可能都已經(jīng)認(rèn)不出來了,相對(duì)于電子地圖而言,街景地圖不論是在覆蓋范圍還是更新頻率上,都差距甚大。原因很簡(jiǎn)單:街景制作成本太高了。最典型的數(shù)據(jù)收集設(shè)備是街景車,此外還有自行車、頭戴式、背包式的街景拍攝器。不過它們都需要大量專業(yè)人力,并且收集速度是非常慢的。

照片游技術(shù)可以部分取代現(xiàn)在的街景制作技術(shù),它成本更低,更重要的是,速度更快,每個(gè)具有拍照設(shè)備的人都成為街景收集器,只要他們?cè)敢庳暙I(xiàn)數(shù)據(jù)——現(xiàn)在是主動(dòng)上傳,未來或許是對(duì)海量云端相冊(cè)照片進(jìn)行去隱私處理后的利用??偠灾?,照片游是更低成本、更高效率的眾包街景制作技術(shù)。

典型場(chǎng)景3:室內(nèi)街景從點(diǎn)到面

過去的街景幾乎都是室外部分,并不是室內(nèi)街景沒需求,相反室內(nèi)虛擬游覽、室內(nèi)導(dǎo)航的需求可能更甚,比如商場(chǎng)和博物館。

室內(nèi)街景沒怎么做,我想主要有兩個(gè)原因:室內(nèi)諸多街景采集設(shè)備都失效了,街景車跑步起來,頭上戴個(gè)街景采集器估計(jì)會(huì)被打。室內(nèi)更容易觸犯用戶隱私,室外距離遠(yuǎn)人群密度低尚出現(xiàn)過Google 街景拍攝到換衣服女人遭起訴事件,室內(nèi)就更容易出現(xiàn)這樣的事件了。盡管Google、百度在過去做過博物館、藝術(shù)館的內(nèi)部街景瀏覽,不過都非常少,并且為此付出了巨大的數(shù)據(jù)采集成本。

而照片游技術(shù)基于用戶拍攝的照片,因此并不存在街景車跑不起來的限制。隱私問題在機(jī)器視覺技術(shù)成熟到一定成熟完全可以對(duì)人臉進(jìn)行自動(dòng)馬賽克處理。而室內(nèi)定位技術(shù)的成熟也給室內(nèi)街景虛擬路徑規(guī)劃提供了更大的可能,百度已投資芬蘭室內(nèi)導(dǎo)航公司IndoorAtlas,iBeacon等室內(nèi)定位技術(shù)正高速發(fā)展??傊?,未來我們世界打開手機(jī)地圖查看商場(chǎng)虛擬導(dǎo)航,并不是吃人說夢(mèng)——這些導(dǎo)航都是基于用戶上傳的室內(nèi)照片生成。未來互聯(lián)網(wǎng)公司則可基于室內(nèi)街景開展O2O體驗(yàn)式購(gòu)物、O2O體驗(yàn)式公民博物館,虛擬歷史教育等等。

照片游技術(shù)未來還有哪些發(fā)展方向?

照片游技術(shù)才剛剛開始,它的未來不只是一個(gè)更低成本更高效率的街景工具,與以下技術(shù)有著巨大的結(jié)合空間:

1、視頻技術(shù)。圖像識(shí)別技術(shù)只是機(jī)器視覺技術(shù)的一種,隨著人工智能、大數(shù)據(jù)和深度學(xué)習(xí)技術(shù)的發(fā)展,隨著機(jī)器計(jì)算能力的爆發(fā)式增長(zhǎng),視頻識(shí)別技術(shù)正在日益成熟。百度現(xiàn)任首席科學(xué)家、前Google X實(shí)驗(yàn)室負(fù)責(zé)人吳恩達(dá)讓機(jī)器自動(dòng)從海量YouTuBe視頻識(shí)別貓就是視頻識(shí)別的應(yīng)用。未來照片游可升級(jí)為視頻游,實(shí)際上視頻數(shù)據(jù)量更大,因?yàn)樗鼰o時(shí)不刻、不知疲勞地地記錄著世界,而這些記錄的“眼睛”遍布在我們的周圍且越來越多。

2、云攝像頭。百度上馬了百度公園,記錄幾十個(gè)景區(qū)的實(shí)時(shí)視頻,未來都可以成為街景還原的數(shù)據(jù)。不只是百度,不少用戶已經(jīng)開始購(gòu)買云攝像頭,以便通過云實(shí)時(shí)查看某個(gè)地方的視頻,這些視頻被存放在某個(gè)云空間,或者被公開分享,未來它們可以成為照片游街景的數(shù)據(jù)來源。另外一個(gè)分支是運(yùn)動(dòng)攝像頭,GoPro為代表,國(guó)內(nèi)現(xiàn)在抄得很厲害,未來運(yùn)動(dòng)攝像頭拍攝的海量運(yùn)動(dòng)照片和視頻,則可以成為運(yùn)動(dòng)圣地,比如珠穆拉瑪峰的虛擬實(shí)景還原的素材,能夠登頂珠峰的人太少,不過想要體驗(yàn)登頂感覺的普通人太多了。

3、虛擬現(xiàn)實(shí)。VR設(shè)備,Oculus是其中最出名的應(yīng)用,你帶上一個(gè)眼鏡之后就可以進(jìn)入一個(gè)虛擬世界,它可以給你聲音、環(huán)境諸多維度的感覺,能夠感知你的動(dòng)作、聲音、情緒。而這些虛擬現(xiàn)實(shí)設(shè)備都缺乏應(yīng)用和內(nèi)容,未來基于照片游技術(shù)可以為它們創(chuàng)造大量的與現(xiàn)實(shí)環(huán)境緊密結(jié)合的內(nèi)容。記得去美國(guó)大峽谷游玩時(shí)在峽谷邊看了場(chǎng)平面電影,以后再去可能就是直接帶著眼鏡去體驗(yàn)滑翔、跳傘等探險(xiǎn)項(xiàng)目了;去三亞則可以帶著眼鏡等設(shè)備學(xué)習(xí)潛水、體驗(yàn)深潛……

4、無人機(jī)航拍。DJI(大疆)的聲名鵲起說明了一個(gè)趨勢(shì):航拍太火了。過去人們都是站在地上看這個(gè)世界,卻很少有機(jī)會(huì)通過“上帝視角”來了解這個(gè)世界。有了俯瞰式的航拍影像數(shù)據(jù),人們可以真正實(shí)現(xiàn)360度建模世界、還原世界——Google Earth的衛(wèi)星云圖實(shí)在太模糊了。航拍技術(shù)的普及讓Google Earth一下進(jìn)入了史前時(shí)代。從覆蓋范圍來看,無人機(jī)航拍更多還是一個(gè)補(bǔ)充,不過它更有用。

總結(jié):百度還原加德滿都采用照片游技術(shù),只不過呈現(xiàn)了冰山一角的能力,照片游未來還有巨大空間,當(dāng)然,一切的前提是人工智能、機(jī)器視覺和大數(shù)據(jù)技術(shù)要更加成熟。

微博@互聯(lián)網(wǎng)阿超 微信 羅超(luochaotmt)

極客網(wǎng)企業(yè)會(huì)員

免責(zé)聲明:本網(wǎng)站內(nèi)容主要來自原創(chuàng)、合作伙伴供稿和第三方自媒體作者投稿,凡在本網(wǎng)站出現(xiàn)的信息,均僅供參考。本網(wǎng)站將盡力確保所提供信息的準(zhǔn)確性及可靠性,但不保證有關(guān)資料的準(zhǔn)確性及可靠性,讀者在使用前請(qǐng)進(jìn)一步核實(shí),并對(duì)任何自主決定的行為負(fù)責(zé)。本網(wǎng)站對(duì)有關(guān)資料所引致的錯(cuò)誤、不確或遺漏,概不負(fù)任何法律責(zé)任。任何單位或個(gè)人認(rèn)為本網(wǎng)站中的網(wǎng)頁(yè)或鏈接內(nèi)容可能涉嫌侵犯其知識(shí)產(chǎn)權(quán)或存在不實(shí)內(nèi)容時(shí),應(yīng)及時(shí)向本網(wǎng)站提出書面權(quán)利通知或不實(shí)情況說明,并提供身份證明、權(quán)屬證明及詳細(xì)侵權(quán)或不實(shí)情況證明。本網(wǎng)站在收到上述法律文件后,將會(huì)依法盡快聯(lián)系相關(guān)文章源頭核實(shí),溝通刪除相關(guān)內(nèi)容或斷開相關(guān)鏈接。

2015-05-04
街景車弱爆了,照片游技術(shù)是未來?
尼泊爾發(fā)生了本世紀(jì)陸地第五次八級(jí)大地震,加德滿都12座世界遺產(chǎn)建筑被不同程度損毀,尼泊爾專家稱能工巧匠需要用大約10年時(shí)間才可修復(fù)這些

長(zhǎng)按掃碼 閱讀全文