房梁

摘要：該次研究的主題是在無線電監(jiān)測數(shù)據(jù)管理中重復(fù)數(shù)據(jù)刪除技術(shù)，我們將會探討重復(fù)刪除技術(shù)的基本概念和產(chǎn)生目的，同時還會介紹其技術(shù)的優(yōu)勢所在和其現(xiàn)狀，并了解一些它的相關(guān)應(yīng)用。

關(guān)鍵詞：數(shù)據(jù)刪除；數(shù)據(jù)處理；數(shù)據(jù)管理；應(yīng)用

中圖分類號：TP311 文獻標識碼：A 文章編號：1009-3044（2018）15-0005-02

隨著科技創(chuàng)新的席卷全球，我國也同樣加入了高速發(fā)展的時代，互聯(lián)網(wǎng)，大數(shù)據(jù)的時代似乎一夜之間席卷全國，這不是一種意外，而是一種大勢所趨，有了創(chuàng)新，就會產(chǎn)生相應(yīng)的一些問題。例如前兩年共享單車的風(fēng)靡全國，國家提倡綠色出行，人們也紛紛響應(yīng)國家的號召，短程距離選擇騎單車，然而，問題也隨之產(chǎn)生，關(guān)于共享單車的維修問題和已經(jīng)無法使用的單車的去向，我們并沒有預(yù)想到相關(guān)的解決辦法。同樣的，大數(shù)據(jù)時代的到來，重復(fù)數(shù)據(jù)的問題也出現(xiàn)了，對于這一問題，就隨之產(chǎn)生了我們今天要討論的重復(fù)刪除技術(shù)。通過無線電監(jiān)測數(shù)據(jù)管理來進行數(shù)據(jù)刪除任務(wù)會更加迅速，并且會更加的方便解決企業(yè)甚至國家的問題。

1 重復(fù)數(shù)據(jù)刪除技術(shù)的簡單概述

重復(fù)刪除技術(shù)簡單來說就是將數(shù)據(jù)縮減，縮減比例可以從十比一甚至縮減到五十比一的情形，從而將存儲系統(tǒng)中的存儲容量減少。同時，他可以識別一個文件甚至同時識別兩個文件之間的共同字節(jié)序列。重復(fù)數(shù)據(jù)刪除技術(shù)一般和其他的一些數(shù)據(jù)處理技術(shù)配合使用，比如壓縮等實用性的數(shù)據(jù)處理技術(shù)。重復(fù)刪除技術(shù)屬于一種比較熱門的存儲技術(shù)，數(shù)據(jù)傳輸和備份是重復(fù)數(shù)據(jù)刪除技術(shù)的最最常見的兩大問題。在數(shù)據(jù)傳輸?shù)倪^程之中，數(shù)據(jù)監(jiān)測又是一個大問題，因為在監(jiān)測的同時，系統(tǒng)會自動生成一份一模一樣的數(shù)據(jù)，這就造成了數(shù)據(jù)重復(fù)，這時就需要運用重復(fù)數(shù)據(jù)刪除技術(shù)來將重復(fù)的刪除，從而達到節(jié)省磁盤內(nèi)存，與此同時還會提高網(wǎng)絡(luò)的運營速度。同時，這也是采用重復(fù)刪除技術(shù)的一個優(yōu)勢所在。但是，凡事都有兩面性，有優(yōu)點就會出現(xiàn)缺點，雖然重復(fù)數(shù)據(jù)刪除技術(shù)可以有效減少磁盤內(nèi)存，但是它在刪除過程中所用的時間會比較長，相應(yīng)的也會帶來一些不便，例如一些高速運行的企業(yè)，十幾分鐘甚至更長時間的等待就有可能造成一筆大生意的失敗，損失也不言而喻。人人都知道，成功不易，路上的挫敗感會激勵我們前行，自強不息，有句俗語說得好：學(xué)習(xí)永無止境。探究發(fā)現(xiàn)更前沿的科學(xué)技術(shù)，也會與我們的成功更近一步，無線電監(jiān)測數(shù)據(jù)管理中應(yīng)用重復(fù)數(shù)據(jù)刪除技術(shù)還有待進一步的升級。相信明天的技術(shù)領(lǐng)域會越來越好。

2 無線電監(jiān)測數(shù)據(jù)管理中重復(fù)數(shù)據(jù)刪除技術(shù)的研究原因

之所以要在無線電監(jiān)測數(shù)據(jù)管理中應(yīng)用重復(fù)數(shù)據(jù)刪除技術(shù)，原因是無線電與大數(shù)據(jù)的關(guān)系可謂是非同一般，大數(shù)據(jù)沒有了無線電監(jiān)測就相當(dāng)于籃球運動員沒有了籃球，植物離開了水，無法運用，無法生存，無線電監(jiān)測數(shù)據(jù)管理就相當(dāng)于一個指明燈的效果，他可以監(jiān)測錯誤，同時也可以預(yù)知未來，很神奇的一種技術(shù)。對即將監(jiān)測的數(shù)據(jù)進行統(tǒng)計并精準分析，再將有利的數(shù)據(jù)存儲起來，有助于之后的數(shù)據(jù)處理工作。然而，在這一過程中，相應(yīng)的數(shù)據(jù)備份也就成為一個棘手的問題，為此，重復(fù)數(shù)據(jù)刪除技術(shù)就登上了舞臺并開始了屬于它的表演，正是因為它的存在，無線電監(jiān)測數(shù)據(jù)管理的任務(wù)才會更高效地進行解決和處理。直白來講，重復(fù)數(shù)據(jù)刪除技術(shù)就是將無線電監(jiān)測數(shù)據(jù)管理技術(shù)中遇到的問題進行簡化，使得無線電監(jiān)測更為高效快速，為大數(shù)據(jù)的運行搭建了一個堅實的臂膀。同時，這兩項技術(shù)的合作，對于我們國家經(jīng)濟總值的發(fā)展，相信也做出了不可忽略的貢獻。為我們祖國科技發(fā)展的蓬勃發(fā)展打下了堅實的基礎(chǔ)。是堅強的“幕后人員”，雖然不會有科技成果的鮮亮舞臺，但它所做出的成績也是我們大家，我們國家都有目共睹的。

3 簡要概述數(shù)據(jù)刪除技術(shù)的方法

數(shù)據(jù)刪除技術(shù)一般有以下三種方法：

1）基于散列的方法

基于散列的方法的英文名字為hash，飛康等設(shè)備運用的就是這一數(shù)據(jù)刪除的方法，首先運用算法把其進行備份的數(shù)據(jù)分成塊，然后為每一個數(shù)據(jù)塊生成一個相應(yīng)的散列，若新的數(shù)據(jù)塊與備份上的數(shù)據(jù)塊的散列相匹配，則表明出現(xiàn)了重復(fù)的數(shù)據(jù)，這種方法可以快速地識別出一個數(shù)據(jù)是否已經(jīng)被備份，同時，基于散列的數(shù)據(jù)是一個獨立的運行系統(tǒng)，磁盤和數(shù)據(jù)所需要的存儲空間可以達到一個穩(wěn)定的平衡狀態(tài)。同時內(nèi)存也不會受到相應(yīng)的影響，這也幫助了基于散列可以被廣泛地應(yīng)用于各個領(lǐng)域。

2）基于內(nèi)容進行重復(fù)識別的方法

顧名思義，這種方法就是查重文章或者是數(shù)據(jù)上的內(nèi)容的相似之處，利用文件系統(tǒng)中的元文件從而識別文件信息，然后與存儲庫中的數(shù)據(jù)進行挨個的比較，與此同時，也會為比較出來的重復(fù)數(shù)據(jù)新建一個文件。新建一個文件的原因是基于內(nèi)容進行重復(fù)識別這種方法并不是一個獨立的系統(tǒng)，很容易就會被其他的系統(tǒng)所干擾，為不產(chǎn)生數(shù)據(jù)沖突，就有了這一步驟。根據(jù)文章內(nèi)容進行重復(fù)識別的有不少的軟件，例如ExaGrid Systems的InfiniteFiler、Sepaton等，運用不同的軟件，刪除時長和效率也不太一樣，有的在一個文件中的刪除任務(wù)上表現(xiàn)良好，但是一到多個文件同時刪除時就不能進行識別；有的就可以識別所有的備份，完成重復(fù)數(shù)據(jù)的刪除任務(wù)。凡事都有利有弊，沒有絕對的實用，也沒有絕對的正確，我們不能強求什么，但是我們可以去適應(yīng)，去感受，去接納一些不足，把錯誤的概率降到最低。

3）Diligent Technologies

這種方法和基于散列的方法有很多相似之處，都是將數(shù)據(jù)分成數(shù)據(jù)塊的形式，在通過篩查模式將備份數(shù)據(jù)找出來，再逐字逐句進行相應(yīng)比對，最后得出結(jié)論，將重復(fù)數(shù)據(jù)進行刪除。簡單來說，就是將基于散列的方法和基于內(nèi)容的方法結(jié)合起來，從而完成重復(fù)數(shù)據(jù)刪除的工作。

除了這三種重復(fù)數(shù)據(jù)刪除技術(shù)之外，還有一些其他的方法，比如說差分Delta，這種數(shù)據(jù)刪除技術(shù)最常運用于基于廣域網(wǎng)的備份系統(tǒng)，它的最大的優(yōu)點是，他可以利用寬帶的高效性，從而減少處理備份窗口數(shù)據(jù)的工作時間。凡事沒有一個定數(shù)，沒有絕對，只要可以解決問題，能解決問題的方法，一定就是好的辦法，這就像雙方進行比拼，誰最后贏了，誰就是英雄，過程不重要，最重要的是結(jié)果，無論是好與壞，我們都要坦然接受，不能丟失了自己，愉悅了他人。

4 在無線電監(jiān)測數(shù)據(jù)管理中運用重復(fù)數(shù)據(jù)刪除技術(shù)的應(yīng)用及其現(xiàn)狀

這一技術(shù)的應(yīng)用范圍較廣，從當(dāng)前的形勢而言，在無線電監(jiān)測數(shù)據(jù)管理中運用重復(fù)數(shù)據(jù)刪除技術(shù)還存在一些問題，仍舊需要一些改進，但他所取得的成就是不可被忽視的。相信在我國的科學(xué)技術(shù)研究者的手下，這一研究會取得更好的成績使我國增光添彩。

5 總結(jié)

在這個時代，小到企業(yè)，大到國家，都少不了面對數(shù)據(jù)重復(fù)的煩惱，重復(fù)數(shù)據(jù)刪除技術(shù)的出現(xiàn)，解決了這一技術(shù)難題。與此同時，在無線電監(jiān)測數(shù)據(jù)管理中應(yīng)用重復(fù)數(shù)據(jù)刪除技術(shù)，會更加方便、快捷、有效。無線電監(jiān)測數(shù)據(jù)可以達到可視化，各種大數(shù)據(jù)通過表格、圖像的形式直觀而又形象地展示給我們，以求更快速地了解數(shù)據(jù)的變化。為我國今后的發(fā)展打下一個良好的基礎(chǔ)，走好中國特色社會主義道路。習(xí)近平總書記曾經(jīng)在講話中提出：“新時代中國特色社會主義是黨領(lǐng)導(dǎo)人民進行偉大社會革命的成果，一定要不忘初心，牢記使命，堅持走下去，要扎扎實實地走，為我們的后輩留一個美麗的家園，完成我們的中國夢的目標?！敝袊鴫舻膶崿F(xiàn)，不能說是沒有困難的，但是近年來我國所頌揚的大國工匠精神，沒有隨時間磨滅的釘子精神，我們國家的精神面貌仍在不斷提升當(dāng)中，中華民族的成長，舉世矚目；中華人民的精神，從未泯滅。相信在我國科技水平不斷創(chuàng)新的今天，中國夢的實現(xiàn)，只是時間上的問題。在無線電監(jiān)測數(shù)據(jù)管理中應(yīng)用重復(fù)數(shù)據(jù)刪除技術(shù)，應(yīng)用更快捷的方式解決問題，為我國的發(fā)展做出了不可磨滅的貢獻。

參考文獻：

[1] 成杰， 李恒志， 祁悅. 重復(fù)數(shù)據(jù)刪除技術(shù)的研究與討論[J]. 中國無線電， 2012， 10（26）.

[2] 倪顯利. 重復(fù)數(shù)據(jù)刪除技術(shù)的應(yīng)用與實踐[J]. 中國金融電腦， 2011，5（7）.