如何管理無人機(jī)收集的非結(jié)構(gòu)化數(shù)據(jù)

當(dāng)?shù)湽鞠Ｍ麍?zhí)行水下調(diào)查的幾個淺池塘在全國蔓延,很快就發(fā)現(xiàn),海藻在池塘的厚度呈現(xiàn)不可能進(jìn)行水下調(diào)查與標(biāo)準(zhǔn)潛水回聲測深設(shè)備反射聲納波從海底砂和水下物體。

解決辦法是一架無人機(jī)，它能發(fā)射出探地雷達(dá)(GPR)來完成同樣的工作，而不用被海藻淹沒。

類似無人機(jī)和大數(shù)據(jù)收集的案例幾乎出現(xiàn)在每個行業(yè)部門——從交通監(jiān)控、事故記錄到農(nóng)業(yè)檢查和森林野火滅火。

在每種情況下，數(shù)據(jù)通常以照片和視頻的形式收集。這些數(shù)據(jù)可以存儲在無人機(jī)上，然后傳回地面數(shù)據(jù)倉庫，在那里可以進(jìn)行研究和分析。

這個過程看起來很簡單，但是對于IT和運(yùn)行無人機(jī)的終端業(yè)務(wù)部門來說，需要有新的協(xié)議、業(yè)務(wù)流程和數(shù)據(jù)實(shí)踐。

如果你負(fù)責(zé)從無人機(jī)上收集大數(shù)據(jù)，你應(yīng)該問自己以下六個問題:

由于帶寬和位置的限制，很少有網(wǎng)站希望將無人機(jī)數(shù)據(jù)實(shí)時下載到遙遠(yuǎn)的中央存儲庫，甚至在飛行之后立即批量下載。存儲架構(gòu)最常部署的是云中的遠(yuǎn)程存儲，或者部署在靠近無人機(jī)活動的安全現(xiàn)場辦公室。稍后可以將數(shù)據(jù)傳輸?shù)街醒霐?shù)據(jù)存儲庫。它必須做的是在任何無人機(jī)活動之前定義這個無人機(jī)數(shù)據(jù)架構(gòu)以及它如何工作。

無人機(jī)在現(xiàn)場收集數(shù)據(jù)，數(shù)據(jù)通常存放在遠(yuǎn)程辦公室。在這些遠(yuǎn)程辦公室中，很有可能由非it人員負(fù)責(zé)。需要對這些非IT員工實(shí)施標(biāo)準(zhǔn)的IT安全和管理實(shí)踐并進(jìn)行培訓(xùn)，以便數(shù)據(jù)和數(shù)據(jù)存儲在物理上和邏輯上保持安全。

“如果你飛每周3到5次,平均每飛行500圖片,你每周積累數(shù)十千兆字節(jié),你需要制定一個計(jì)劃關(guān)于所有這些信息,有什么會發(fā)生在這個領(lǐng)域和特定的選擇取決于你要做什么,”本杰明·范德Jagt說的聯(lián)合創(chuàng)始人UMAP技術(shù),三維映射啟動。

數(shù)據(jù)才是關(guān)鍵。在早期，IT和業(yè)務(wù)用戶應(yīng)該決定要保留哪些數(shù)據(jù)，丟棄哪些數(shù)據(jù)。如果您沒有做出這些決定，那么數(shù)據(jù)將超出您的存儲容量，然后您將發(fā)現(xiàn)對所有數(shù)據(jù)進(jìn)行排序以找到您真正想要的信息更加困難。

存儲相對便宜，但必須維護(hù)服務(wù)器行和存儲驅(qū)動器，其中包含從未或很少使用的數(shù)據(jù)，這不是您想要的。這就是為什么在無人機(jī)項(xiàng)目的早期規(guī)劃中，你想要確定哪些數(shù)據(jù)需要保存在無人機(jī)任務(wù)中;以及你需要部署或投資多少存儲空間來存儲這些數(shù)據(jù)。

由于電池的限制，無人機(jī)的飛行時間有限。如果遇到意外的逆風(fēng)，這些飛行時間可以進(jìn)一步縮短。然后，無人機(jī)也可能出現(xiàn)故障——或者被攔截。選擇使用無人機(jī)的公司應(yīng)該有一個行動計(jì)劃來恢復(fù)丟失的無人機(jī)(以及潛在的敏感數(shù)據(jù))，或者在無人機(jī)無法恢復(fù)時鎖定無人機(jī)數(shù)據(jù)。

無人機(jī)收集的數(shù)據(jù)幾乎總是一些非結(jié)構(gòu)化的視頻或照片格式。這并不容易與來自其他公司系統(tǒng)的基于字符的固定長度記錄形式的數(shù)據(jù)集成。

地理信息系統(tǒng)(GIS)是一個與無人機(jī)收集的數(shù)據(jù)有效集成的重要平臺。GIS系統(tǒng)主要用于制圖。可以支持和集成非文本信息和GPS等類型的數(shù)據(jù)，是無人機(jī)采集數(shù)據(jù)的理想集成平臺。

不幸的是，無人機(jī)和GIS數(shù)據(jù)數(shù)據(jù)很難與其他公司系統(tǒng)的數(shù)據(jù)進(jìn)行集成。在某些情況下，如果它還沒有GIS系統(tǒng)，它可能會選擇投資。在其他情況下，如果需要業(yè)務(wù)案例和分析，它可能選擇追求范圍更廣、難度更大的數(shù)據(jù)集成。

了解有關(guān)數(shù)據(jù)科學(xué)、大數(shù)據(jù)分析和人工智能的最新消息和最佳實(shí)踐。星期一交付