DJI的未來在香港科技，我們的未來在哪里？我們需要全新的人機(jī)互動接口，更加智能的操控方式，這將會極大地降低培訓(xùn)成本
來自香港科技大學(xué)的研究人員Shaojie Shen and Chuhao Lio發(fā)布了一個(gè)新的、有趣的創(chuàng)新，其使用全息增強(qiáng)現(xiàn)實(shí)硬件來生成真實(shí)的3D地形圖，并允許無人機(jī)飛手簡單地指向在任何平面之上可視化的目標(biāo)。
全息界面使用了多種技術(shù)來實(shí)現(xiàn)這一點(diǎn)。為了顯示，微軟全息頭戴式耳機(jī)以彩色體素地圖的形式生成AR內(nèi)容，可以從任何角度查看。通過一個(gè)自主飛行無人機(jī)的深度攝像頭以及實(shí)時(shí)定位數(shù)據(jù)的光線投射來傳遞這些信息。該系統(tǒng)為操作員提供了對環(huán)境高度和深度的實(shí)時(shí)和高度空間感，并使無人機(jī)能夠從第三人視角輕松地觀察并重新定位。
全息鏡頭頭戴式耳機(jī)將命令反饋給無人機(jī)，并通過將佩戴者的手勢和凝視轉(zhuǎn)換為點(diǎn)按式控件來確定其在全息地圖中的下一個(gè)目標(biāo)。自主無人機(jī)隨后可以飛到新位置，同時(shí)在移動時(shí)更新3D地圖。
研究人員發(fā)布了一段演示視頻，看起來更逼近科幻電影的感覺，尤其是全息方面。然而，由于帶寬的限制，無人機(jī)只能向增強(qiáng)現(xiàn)實(shí)界面提供3D地圖數(shù)據(jù)，并且不中繼附帶的第一手視頻。
系統(tǒng)測試構(gòu)架原理圖
在全息無人機(jī)控制系統(tǒng)部署之前，研究小組仍然需要進(jìn)一步研究，無人機(jī)的數(shù)據(jù)最初是在室內(nèi)測試空間內(nèi)使用Wi-Fi共享的，但對于室外應(yīng)用，一旦5G網(wǎng)絡(luò)覆蓋可以滿足無人機(jī)的使用要求，就有可能使用低延遲的5G蜂窩連接。
測試中第一組測試人員經(jīng)常抱怨視野非常有限，針對這一問題，對于即將到來的全息鏡頭2AR耳機(jī)將可以解決。第一組人還被要求練習(xí)，以便更熟練地進(jìn)行三維定位，盡管之前對增強(qiáng)現(xiàn)實(shí)硬件并不熟悉，這種情況可能會影響到不完善的3D用戶界面或手勢識別。
然而，與真人視頻相比，3D地圖數(shù)據(jù)具有更好的帶寬效率。當(dāng)每秒更新10次數(shù)據(jù)時(shí)，其僅僅需要272MB的數(shù)據(jù)。實(shí)時(shí)視頻則需要1.39GB的數(shù)據(jù)才能以每秒30幀的速度傳輸?shù)谝蝗朔Q視頻圖像。未來，該團(tuán)隊(duì)還將致力于將兩種數(shù)據(jù)流類型進(jìn)行結(jié)合，以幫助最終用戶優(yōu)化數(shù)據(jù)以滿足網(wǎng)絡(luò)的最低帶寬水平。
盡管存各種問題，全息增強(qiáng)現(xiàn)實(shí)系統(tǒng)已經(jīng)顯示出強(qiáng)大的潛力。除了新穎的視覺界面外，還可以提供控制遠(yuǎn)程無人機(jī)的便利，只需使用一個(gè)簡單、便攜的獨(dú)立增強(qiáng)現(xiàn)實(shí)耳機(jī)，而不必依賴傳統(tǒng)的計(jì)算機(jī)、顯示器和操縱桿。
