如何管理無人機收集的非結(jié)構化數(shù)據(jù)

當?shù)湽鞠Ｍ麍?zhí)行水下調(diào)查的幾個淺池塘在全國蔓延,很快就發(fā)現(xiàn),海藻在池塘的厚度呈現(xiàn)不可能進行水下調(diào)查與標準潛水回聲測深設備反射聲納波從海底砂和水下物體。

解決辦法是一架無人機，它能發(fā)射出探地雷達(GPR)來完成同樣的工作，而不用被海藻淹沒。

類似無人機和大數(shù)據(jù)收集的案例幾乎出現(xiàn)在每個行業(yè)部門——從交通監(jiān)控、事故記錄到農(nóng)業(yè)檢查和森林野火滅火。

在每種情況下，數(shù)據(jù)通常以照片和視頻的形式收集。這些數(shù)據(jù)可以存儲在無人機上，然后傳回地面數(shù)據(jù)倉庫，在那里可以進行研究和分析。

這個過程看起來很簡單，但是對于IT和運行無人機的終端業(yè)務部門來說，需要有新的協(xié)議、業(yè)務流程和數(shù)據(jù)實踐。

如果你負責從無人機上收集大數(shù)據(jù)，你應該問自己以下六個問題:

由于帶寬和位置的限制，很少有網(wǎng)站希望將無人機數(shù)據(jù)實時下載到遙遠的中央存儲庫，甚至在飛行之后立即批量下載。存儲架構最常部署的是云中的遠程存儲，或者部署在靠近無人機活動的安全現(xiàn)場辦公室。稍后可以將數(shù)據(jù)傳輸?shù)街醒霐?shù)據(jù)存儲庫。它必須做的是在任何無人機活動之前定義這個無人機數(shù)據(jù)架構以及它如何工作。

無人機在現(xiàn)場收集數(shù)據(jù)，數(shù)據(jù)通常存放在遠程辦公室。在這些遠程辦公室中，很有可能由非it人員負責。需要對這些非IT員工實施標準的IT安全和管理實踐并進行培訓，以便數(shù)據(jù)和數(shù)據(jù)存儲在物理上和邏輯上保持安全。

“如果你飛每周3到5次,平均每飛行500圖片,你每周積累數(shù)十千兆字節(jié),你需要制定一個計劃關于所有這些信息,有什么會發(fā)生在這個領域和特定的選擇取決于你要做什么,”本杰明·范德Jagt說的聯(lián)合創(chuàng)始人UMAP技術,三維映射啟動。

數(shù)據(jù)才是關鍵。在早期，IT和業(yè)務用戶應該決定要保留哪些數(shù)據(jù)，丟棄哪些數(shù)據(jù)。如果您沒有做出這些決定，那么數(shù)據(jù)將超出您的存儲容量，然后您將發(fā)現(xiàn)對所有數(shù)據(jù)進行排序以找到您真正想要的信息更加困難。

存儲相對便宜，但必須維護服務器行和存儲驅(qū)動器，其中包含從未或很少使用的數(shù)據(jù)，這不是您想要的。這就是為什么在無人機項目的早期規(guī)劃中，你想要確定哪些數(shù)據(jù)需要保存在無人機任務中;以及你需要部署或投資多少存儲空間來存儲這些數(shù)據(jù)。

由于電池的限制，無人機的飛行時間有限。如果遇到意外的逆風，這些飛行時間可以進一步縮短。然后，無人機也可能出現(xiàn)故障——或者被攔截。選擇使用無人機的公司應該有一個行動計劃來恢復丟失的無人機(以及潛在的敏感數(shù)據(jù))，或者在無人機無法恢復時鎖定無人機數(shù)據(jù)。

無人機收集的數(shù)據(jù)幾乎總是一些非結(jié)構化的視頻或照片格式。這并不容易與來自其他公司系統(tǒng)的基于字符的固定長度記錄形式的數(shù)據(jù)集成。

地理信息系統(tǒng)(GIS)是一個與無人機收集的數(shù)據(jù)有效集成的重要平臺。GIS系統(tǒng)主要用于制圖。可以支持和集成非文本信息和GPS等類型的數(shù)據(jù)，是無人機采集數(shù)據(jù)的理想集成平臺。

不幸的是，無人機和GIS數(shù)據(jù)數(shù)據(jù)很難與其他公司系統(tǒng)的數(shù)據(jù)進行集成。在某些情況下，如果它還沒有GIS系統(tǒng)，它可能會選擇投資。在其他情況下，如果需要業(yè)務案例和分析，它可能選擇追求范圍更廣、難度更大的數(shù)據(jù)集成。

了解有關數(shù)據(jù)科學、大數(shù)據(jù)分析和人工智能的最新消息和最佳實踐。星期一交付