如何管理無(wú)人機(jī)收集的非結(jié)構(gòu)化數(shù)據(jù)

當(dāng)?shù)湽鞠Ｍ麍?zhí)行水下調(diào)查的幾個(gè)淺池塘在全國(guó)蔓延,很快就發(fā)現(xiàn),海藻在池塘的厚度呈現(xiàn)不可能進(jìn)行水下調(diào)查與標(biāo)準(zhǔn)潛水回聲測(cè)深設(shè)備反射聲納波從海底砂和水下物體。

解決辦法是一架無(wú)人機(jī)，它能發(fā)射出探地雷達(dá)(GPR)來(lái)完成同樣的工作，而不用被海藻淹沒(méi)。

類(lèi)似無(wú)人機(jī)和大數(shù)據(jù)收集的案例幾乎出現(xiàn)在每個(gè)行業(yè)部門(mén)——從交通監(jiān)控、事故記錄到農(nóng)業(yè)檢查和森林野火滅火。

在每種情況下，數(shù)據(jù)通常以照片和視頻的形式收集。這些數(shù)據(jù)可以存儲(chǔ)在無(wú)人機(jī)上，然后傳回地面數(shù)據(jù)倉(cāng)庫(kù)，在那里可以進(jìn)行研究和分析。

這個(gè)過(guò)程看起來(lái)很簡(jiǎn)單，但是對(duì)于IT和運(yùn)行無(wú)人機(jī)的終端業(yè)務(wù)部門(mén)來(lái)說(shuō)，需要有新的協(xié)議、業(yè)務(wù)流程和數(shù)據(jù)實(shí)踐。

如果你負(fù)責(zé)從無(wú)人機(jī)上收集大數(shù)據(jù)，你應(yīng)該問(wèn)自己以下六個(gè)問(wèn)題:

由于帶寬和位置的限制，很少有網(wǎng)站希望將無(wú)人機(jī)數(shù)據(jù)實(shí)時(shí)下載到遙遠(yuǎn)的中央存儲(chǔ)庫(kù)，甚至在飛行之后立即批量下載。存儲(chǔ)架構(gòu)最常部署的是云中的遠(yuǎn)程存儲(chǔ)，或者部署在靠近無(wú)人機(jī)活動(dòng)的安全現(xiàn)場(chǎng)辦公室。稍后可以將數(shù)據(jù)傳輸?shù)街醒霐?shù)據(jù)存儲(chǔ)庫(kù)。它必須做的是在任何無(wú)人機(jī)活動(dòng)之前定義這個(gè)無(wú)人機(jī)數(shù)據(jù)架構(gòu)以及它如何工作。

無(wú)人機(jī)在現(xiàn)場(chǎng)收集數(shù)據(jù)，數(shù)據(jù)通常存放在遠(yuǎn)程辦公室。在這些遠(yuǎn)程辦公室中，很有可能由非it人員負(fù)責(zé)。需要對(duì)這些非IT員工實(shí)施標(biāo)準(zhǔn)的IT安全和管理實(shí)踐并進(jìn)行培訓(xùn)，以便數(shù)據(jù)和數(shù)據(jù)存儲(chǔ)在物理上和邏輯上保持安全。

“如果你飛每周3到5次,平均每飛行500圖片,你每周積累數(shù)十千兆字節(jié),你需要制定一個(gè)計(jì)劃關(guān)于所有這些信息,有什么會(huì)發(fā)生在這個(gè)領(lǐng)域和特定的選擇取決于你要做什么,”本杰明·范德Jagt說(shuō)的聯(lián)合創(chuàng)始人UMAP技術(shù),三維映射啟動(dòng)。

數(shù)據(jù)才是關(guān)鍵。在早期，IT和業(yè)務(wù)用戶應(yīng)該決定要保留哪些數(shù)據(jù)，丟棄哪些數(shù)據(jù)。如果您沒(méi)有做出這些決定，那么數(shù)據(jù)將超出您的存儲(chǔ)容量，然后您將發(fā)現(xiàn)對(duì)所有數(shù)據(jù)進(jìn)行排序以找到您真正想要的信息更加困難。

存儲(chǔ)相對(duì)便宜，但必須維護(hù)服務(wù)器行和存儲(chǔ)驅(qū)動(dòng)器，其中包含從未或很少使用的數(shù)據(jù)，這不是您想要的。這就是為什么在無(wú)人機(jī)項(xiàng)目的早期規(guī)劃中，你想要確定哪些數(shù)據(jù)需要保存在無(wú)人機(jī)任務(wù)中;以及你需要部署或投資多少存儲(chǔ)空間來(lái)存儲(chǔ)這些數(shù)據(jù)。

由于電池的限制，無(wú)人機(jī)的飛行時(shí)間有限。如果遇到意外的逆風(fēng)，這些飛行時(shí)間可以進(jìn)一步縮短。然后，無(wú)人機(jī)也可能出現(xiàn)故障——或者被攔截。選擇使用無(wú)人機(jī)的公司應(yīng)該有一個(gè)行動(dòng)計(jì)劃來(lái)恢復(fù)丟失的無(wú)人機(jī)(以及潛在的敏感數(shù)據(jù))，或者在無(wú)人機(jī)無(wú)法恢復(fù)時(shí)鎖定無(wú)人機(jī)數(shù)據(jù)。

無(wú)人機(jī)收集的數(shù)據(jù)幾乎總是一些非結(jié)構(gòu)化的視頻或照片格式。這并不容易與來(lái)自其他公司系統(tǒng)的基于字符的固定長(zhǎng)度記錄形式的數(shù)據(jù)集成。

地理信息系統(tǒng)(GIS)是一個(gè)與無(wú)人機(jī)收集的數(shù)據(jù)有效集成的重要平臺(tái)。GIS系統(tǒng)主要用于制圖。可以支持和集成非文本信息和GPS等類(lèi)型的數(shù)據(jù)，是無(wú)人機(jī)采集數(shù)據(jù)的理想集成平臺(tái)。

不幸的是，無(wú)人機(jī)和GIS數(shù)據(jù)數(shù)據(jù)很難與其他公司系統(tǒng)的數(shù)據(jù)進(jìn)行集成。在某些情況下，如果它還沒(méi)有GIS系統(tǒng)，它可能會(huì)選擇投資。在其他情況下，如果需要業(yè)務(wù)案例和分析，它可能選擇追求范圍更廣、難度更大的數(shù)據(jù)集成。

了解有關(guān)數(shù)據(jù)科學(xué)、大數(shù)據(jù)分析和人工智能的最新消息和最佳實(shí)踐。星期一交付