您是否曾經(jīng)為了查找一個測試文件，用軟件一個個打開數(shù)據(jù)文件查看信號？

您是否曾經(jīng)面對動輒幾百GB的測試數(shù)據(jù)，電腦卻總是報警磁盤空間不足？

您是否曾經(jīng)想要將一批特定數(shù)據(jù)快速分享給同事，不得不準(zhǔn)備移動硬盤？

您是否曾經(jīng)想要將視頻文件或者其他格式文件和某一天測試數(shù)據(jù)關(guān)聯(lián)，而不得不手動記錄？

今天為大家介紹如何使用Vector工具對海量數(shù)據(jù)進(jìn)行高效管理和分析。

1

Part.1

什么是vMDM

vMDM（Vector Measurement Data Management）是端到端數(shù)據(jù)分析和管理的解決方案：

安全高效地對海量數(shù)據(jù)進(jìn)行集中化管理；

根據(jù)用戶自定義的篩選條件在大數(shù)據(jù)中快速地提取特定數(shù)據(jù)；

不占用本地計算機資源進(jìn)行復(fù)雜的計算和分析，實現(xiàn)自動化報告生成；

工程師可以根據(jù)授權(quán)級別來訪問指定測試數(shù)據(jù)，可以安全地與團(tuán)隊成員進(jìn)行數(shù)據(jù)分享，并且支持線上數(shù)據(jù)和線下分析軟件交互式分析；

良好的可擴展性，支持分布式計算。

vMDM以ASAM MDF4作為存儲格式。MDF格式已作為汽車測量標(biāo)定的實際行業(yè)標(biāo)準(zhǔn)被廣泛使用，主流工具軟件均支持該格式。

2

Part.2

如何上傳數(shù)據(jù)

vMDM提供多種方式來上傳數(shù)據(jù)，用戶可以手動或者利用腳本（批處理、PowerShell等）實現(xiàn)自動化上傳。

場景一：從試驗車或臺架上采集的數(shù)據(jù)存儲到本地電腦指定目錄中，通過腳本不斷掃描目錄并自動上傳數(shù)據(jù)至vMDM服務(wù)器；

場景二：使用支持無線傳輸功能的數(shù)據(jù)記錄儀將數(shù)據(jù)直接上傳至vMDM服務(wù)器。

vMDM同時支持存儲附件文件，比如視頻文件、DBC文件、照片等和測量數(shù)據(jù)進(jìn)行關(guān)聯(lián)，統(tǒng)一由vMDM進(jìn)行管理。

測量數(shù)據(jù)根據(jù)用戶需求存入到指定的一個或多個集合中（Collection），集合可以近似理解為文件夾，用戶可根據(jù)具體需求創(chuàng)建集合來進(jìn)行數(shù)據(jù)分類，例如根據(jù)測試項目、用戶、部門等。

3

Part.3

如何訪問數(shù)據(jù)

vMDM利用Elasticsearch高性能檢索功能，實現(xiàn)基于元數(shù)據(jù)的全文檢索。用戶可以在vSignalyzer/CANape客戶端，直接通過圖行用戶窗口自定義篩選規(guī)則，實現(xiàn)數(shù)據(jù)分類和瀏覽操作。例如用戶需要在數(shù)十萬的數(shù)據(jù)文件中，找到所有前驅(qū)和四驅(qū)車，并滿足EU5和EU6標(biāo)準(zhǔn)的測試數(shù)據(jù)，vMDM會在一兩秒內(nèi)將滿足篩選條件的數(shù)據(jù)反饋給用戶，同時這個篩選的規(guī)則可以直接分享給其他用戶，實現(xiàn)團(tuán)隊協(xié)作分析。

在用戶有授權(quán)的情況下，通過簡單地拖動、框選操作就能將數(shù)據(jù)從服務(wù)器直接緩存到本地進(jìn)行分析。同時vMDM支持將MDF數(shù)據(jù)格式轉(zhuǎn)成ASCII、Excel和MATLAB數(shù)據(jù)格式以滿足用戶其他分析需求。

4

Part.4

如何分析數(shù)據(jù)

vSignalyzer/CANape提供類C的腳本語言CASL（Calculation And Scripting Language）用以編寫分析腳本，并上傳至服務(wù)器運行，同時支持加載Simulink、C++的動態(tài)鏈接庫。

場景一：自動分析前一天采集的數(shù)據(jù)文件，得到可視化分析報告，推送到郵箱；

場景二：自動推送統(tǒng)計性報告，比如耐久測試中用戶可以通過電子郵件迅速了解到車隊的路試進(jìn)展，行駛了多少里程或者某特定車輛進(jìn)行了多少次檔位切換等信息。

5

Part.5

支持交互式分析

利用vSignalyzer/CANape軟件，用戶除了直接瀏覽數(shù)據(jù)之外，也可以利用自定義篩選規(guī)則從服務(wù)器上抓取數(shù)據(jù)在本地計算機上進(jìn)行分析。

6

Part.6

產(chǎn)品變體

vMDM Cloud

Vector直接為用戶提供SaaS服務(wù)，用戶不需要關(guān)心硬件資源、系統(tǒng)安裝維護(hù)等問題，安裝vSignalyzer/CANape option vMDM軟件后就可以直接使用。

vMDM Enterprise

企業(yè)若對數(shù)據(jù)安全和帶寬限制等有顧慮，可以選擇在公司內(nèi)部服務(wù)器上安裝和使用vMDM系統(tǒng)。

vMDM Local

數(shù)據(jù)進(jìn)行管理和分析，僅限于個人電腦上使用。

7

Part.7

應(yīng)用案例

場景一：

用戶通過測量數(shù)據(jù)文件來監(jiān)控關(guān)鍵傳感器信號的有效性，反饋傳感器信號是否出現(xiàn)缺失、漂移等異常狀態(tài)。

場景二：

用戶將分布在各個國家地區(qū)的測試臺架上獲取的二進(jìn)制文件轉(zhuǎn)為MDF格式的數(shù)據(jù)文件，并上傳到vMDM服務(wù)器，高效地實現(xiàn)數(shù)據(jù)異地共享及分析。

場景三：

車隊在各個國家地區(qū)進(jìn)行耐久性測試，測試員將采集的數(shù)據(jù)和測試數(shù)據(jù)相關(guān)的視頻、音頻文件以及數(shù)據(jù)描述信息（比如測試天氣、測試車輛排放等）上傳到vMDM。vMDM定時將統(tǒng)計性和功能驗證性報告推送到工程師，使工程師迅速地掌握耐久測試進(jìn)展和測試數(shù)據(jù)質(zhì)量。

8

Part.8

總結(jié)

vMDM為用戶提供了一套標(biāo)準(zhǔn)化的數(shù)據(jù)管理和分析流程，能高效地對海量數(shù)據(jù)進(jìn)行管理、分類和評估，進(jìn)行復(fù)雜地分析計算，最終為用戶提供有技術(shù)洞察價值的報告。