“大數(shù)據(jù)”時代的計算機(jī)信息處理技術(shù)及其應(yīng)用

李超

(江西外語外貿(mào)職業(yè)學(xué)院，江西南昌330099)

摘要：本文提出基于大數(shù)據(jù)技術(shù)應(yīng)用于計算機(jī)信息處理技術(shù)的設(shè)想。

關(guān)鍵詞：大數(shù)據(jù)時代;計算機(jī)信息處理

隨著計算機(jī)信息處理技術(shù)與各行各業(yè)傳統(tǒng)技術(shù)的廣泛和深度的融合，產(chǎn)生了各種各樣獨(dú)具特色的生產(chǎn)生活工具和設(shè)備，都不同程度的具有數(shù)字化、自動化、信息化、智能化特征，正在并且繼續(xù)深刻影響和改變?nèi)祟惖纳a(chǎn)生活方式。現(xiàn)代社會的高速發(fā)展到現(xiàn)階段的顯著特征是，人類自身及其他各種事物隨時產(chǎn)生、高速傳遞極具爆炸性增長的海量的多樣化的信息數(shù)據(jù)，這就是現(xiàn)階段人類所處的大數(shù)據(jù)時代。

面對海量的信息數(shù)據(jù)資源，人類憑借傳統(tǒng)的經(jīng)驗和直覺作出行為決策的方式，往往導(dǎo)致效率低下，無所適從。

大數(shù)據(jù)時代基于大數(shù)據(jù)分析技術(shù)的海量信息數(shù)據(jù)量化分析理念與成果以及信息數(shù)據(jù)安全性，無論是對于國家治理發(fā)展的戰(zhàn)略決策、對于各領(lǐng)域企業(yè)事業(yè)單位的創(chuàng)新發(fā)展管理模式制定，還是對于個人職業(yè)生活發(fā)展規(guī)劃，都有極其重要的引領(lǐng)指導(dǎo)意義和現(xiàn)實意義。

本文提出基于云技術(shù)的大數(shù)據(jù)技術(shù)應(yīng)用于計算機(jī)信息處理技術(shù)的設(shè)想，以不斷創(chuàng)新的計算機(jī)信息處理技術(shù)模式和方法，實現(xiàn)大數(shù)據(jù)時伐海量信息數(shù)據(jù)量化分析優(yōu)化。

一、大數(shù)據(jù)時代計算機(jī)信息處理技術(shù)基本知識簡介

(一)大數(shù)據(jù)概念

大數(shù)據(jù)(big date)是指現(xiàn)階段規(guī)模大到在獲取、存儲、管理、分析等方面大大超出傳統(tǒng)數(shù)據(jù)庫軟件工具能力范圍的、對所有海量數(shù)據(jù)進(jìn)行統(tǒng)計分析法處理的數(shù)據(jù)集合。是計算機(jī)互聯(lián)網(wǎng)技術(shù)與應(yīng)用發(fā)展到現(xiàn)階段的海量信息數(shù)據(jù)特征表現(xiàn)。

(二)大數(shù)據(jù)信息特征

大數(shù)據(jù)信息具有數(shù)據(jù)海量(Volume)、高速流轉(zhuǎn)(Velocity)、數(shù)據(jù)類型多樣(Velocity)、價值密度低(Value)、真實,(Vemcity)的特點。大數(shù)據(jù)時代對于信息數(shù)據(jù)獲取、存儲、搜索、共享、分析、數(shù)據(jù)可視化呈現(xiàn)，都有前所未有的更高要求。

1)數(shù)據(jù)海量(Volume)：現(xiàn)階段大數(shù)據(jù)的基本計量單位是PB，數(shù)據(jù)量越大包含有價值的就越多。

1DB=1024NB,lNB=1 024BB.1BB=1 024YB.

1YB=1024ZB.1ZB=1024EB.1EB=1024PB.

1PB=1024TB.1TB=1024GB.1GB=1024MB.

1MB=1024KB.1KB=1024B.1B=8bit

2)數(shù)據(jù)類型多樣(Varietv)：包括多媒體信息、網(wǎng)絡(luò)日志、地理位置等，對數(shù)據(jù)處理能為有更高要求。

3)價值密度低(Value)：信息量巨大，單個信息數(shù)據(jù)價值密度低，對機(jī)器算法快速性和有效性有更高要求。

4)高速流轉(zhuǎn)(Velocity)：對于信息數(shù)據(jù)采集挖掘處理速度和時效性有更高要求。

5)數(shù)據(jù)可視化呈現(xiàn)：把數(shù)據(jù)及其規(guī)律以圖形圖像直觀表示并隨時間和空間變化。

(三)大數(shù)據(jù)時代計算機(jī)信想處理基本思想

1)是全體信息數(shù)據(jù)，而不是隨機(jī)采樣數(shù)據(jù)。面對海量信息數(shù)據(jù)，利用計算機(jī)信息處理技術(shù)對全體信息數(shù)據(jù)進(jìn)行相關(guān)分析，而不是依賴于傳統(tǒng)的在一定時間范圍內(nèi)用隨機(jī)采樣信息分析法。

2)是宏觀發(fā)展態(tài)勢，而不是微觀精細(xì)準(zhǔn)確。面對海量信息數(shù)據(jù)，掌握特征事物宏觀層面發(fā)展態(tài)勢，而不追究微觀層面精細(xì)準(zhǔn)確。

3)是相關(guān)關(guān)系，而不是因果關(guān)系。在大數(shù)據(jù)時代，通過尋求事物之間的相關(guān)關(guān)系，研判特征事物正在發(fā)生的事態(tài)。而不是追尋事物之間的因果關(guān)系。

(四)大數(shù)據(jù)時代計算機(jī)信息處理技術(shù)基本方法

大數(shù)據(jù)時代海量的信息數(shù)據(jù)處理需求，直接催生了全新的云技術(shù)、云計算信息數(shù)據(jù)處理模式的產(chǎn)生。云技術(shù)、云計算是基于互聯(lián)網(wǎng)的、根據(jù)需求虛擬優(yōu)化配置共享計算機(jī)硬件軟件資源的計算方法，云技術(shù)、云計算是分布式計算、并行計算、效用計算、網(wǎng)絡(luò)存儲、虛擬化、負(fù)債均衡、熱備份冗余等專業(yè)技術(shù)的綜合集合。云技術(shù)、云計算為大數(shù)據(jù)處理提供技術(shù)支撐平臺。云技術(shù)的思維模式基于太陽電腦( Sun Microsystems)在1983年提出的“網(wǎng)絡(luò)就是計算機(jī)”的理念(TheNetwork is the Computer J.

大數(shù)據(jù)時代信息處理技術(shù)就是針對分布式構(gòu)架下計算機(jī)互聯(lián)網(wǎng)絡(luò)中的海量信息數(shù)據(jù)，首先是建立云數(shù)據(jù)庫并進(jìn)行分布式特征信息數(shù)據(jù)挖掘和存儲，其次根據(jù)需求建立數(shù)據(jù)模型體系，然后綜合運(yùn)用云計算、云存儲、云安全和虛擬化技術(shù)根據(jù)需求優(yōu)化配置網(wǎng)絡(luò)資源，進(jìn)行云計算處理分析并產(chǎn)生特征信息數(shù)據(jù)規(guī)律性呈現(xiàn)結(jié)果的綜合高效信息數(shù)據(jù)處理技術(shù)。大數(shù)據(jù)側(cè)重于資源處理，云計算側(cè)重于資源分配。

二、大數(shù)據(jù)時代計算機(jī)信息處理技術(shù)應(yīng)用

面對大數(shù)據(jù)時代的海量信息數(shù)據(jù)的采集、處理、存儲、傳輸需求，全面提升優(yōu)化計算機(jī)信息處理系統(tǒng)的信息處理能力和存儲能力，是廣大從業(yè)者努力工作的方向和目標(biāo)。

運(yùn)用云技術(shù)從海量信息數(shù)據(jù)中，通過對特征相關(guān)信息數(shù)據(jù)采集準(zhǔn)備、數(shù)據(jù)規(guī)律性尋找、數(shù)據(jù)規(guī)律性可視化表示等環(huán)節(jié)，掌握事物各方面發(fā)展的規(guī)律性，為掌握事物歷史和現(xiàn)在狀態(tài)以及后續(xù)發(fā)展研判，提供科學(xué)高效規(guī)劃決策依據(jù)。

(一)大數(shù)據(jù)時代計算機(jī)信息數(shù)據(jù)挖掘采集加工傳輸技術(shù) 面對大數(shù)據(jù)時代的海量信息數(shù)據(jù)，通過分布式數(shù)據(jù)挖掘和存儲技術(shù)，對特征信息數(shù)據(jù)進(jìn)行搜索、篩選、分類、分析、整理、存儲、傳播和實時監(jiān)控等一系列采集加工傳輸處理技術(shù)，發(fā)現(xiàn)數(shù)據(jù)之間的相關(guān)關(guān)系，篩選保留有用數(shù)據(jù)，剔除無用數(shù)據(jù)，為后續(xù)數(shù)據(jù)分析處理提供豐富準(zhǔn)確可靠的原始信息數(shù)據(jù)。

(二)大數(shù)據(jù)時代計算機(jī)信息數(shù)據(jù)存儲技術(shù)

一方面是對現(xiàn)有互聯(lián)網(wǎng)平臺借助云技術(shù)云存儲技術(shù)，實現(xiàn)存儲資源動態(tài)優(yōu)化配置。把廣域分布式的數(shù)據(jù)文件進(jìn)行集群應(yīng)用，使得不同類型廣域分布的存儲設(shè)備協(xié)同工作。也就是把互聯(lián)網(wǎng)中的所有存儲設(shè)備，通過應(yīng)用軟件協(xié)調(diào)管理并共同對互聯(lián)網(wǎng)用戶提供數(shù)據(jù)存儲與業(yè)務(wù)訪問功能的技術(shù)。

另一方面積極開發(fā)新型計算機(jī)數(shù)據(jù)存儲技術(shù)，提高儲存容量。

(三)大數(shù)據(jù)時代計算機(jī)信息數(shù)據(jù)計算處理技術(shù)

一方面是對現(xiàn)有互聯(lián)網(wǎng)平臺借助云技術(shù)云計算技術(shù)，實現(xiàn)計算能力資源動態(tài)優(yōu)化配置。把廣域分布式的計算機(jī)進(jìn)行集群應(yīng)用，使得不同類型廣域分布的計算機(jī)協(xié)同工作。也就是把互聯(lián)網(wǎng)中的所有計算機(jī)，通過應(yīng)用軟件協(xié)調(diào)管理并共同對互聯(lián)網(wǎng)用戶提供數(shù)據(jù)計算處理功能的技術(shù)。

另一方面積極開發(fā)各種新的現(xiàn)代計算機(jī)智能算法，通過對自然界生物生存機(jī)理和策略的模擬過程，啟迪開發(fā)適用于特定領(lǐng)域的具有特定功能的現(xiàn)代計算機(jī)智能算法，有效提高信息計算處理應(yīng)用領(lǐng)域。

(四)大數(shù)據(jù)時代計算機(jī)信息數(shù)據(jù)安全技術(shù)

一方面積極開發(fā)新一代防火墻技術(shù)，通過在不同功能網(wǎng)絡(luò)之間加裝防火墻安全隔離設(shè)備，防止未經(jīng)授權(quán)的用戶登錄，防止各種計算機(jī)病毒和黑客的非法入侵，確保信息數(shù)據(jù)安全。

另一方面，采用對信息數(shù)據(jù)多重加密算法加密處理的安全防護(hù)技術(shù)，增加解密復(fù)雜難度，保證信息數(shù)據(jù)安全。

三、結(jié)束語

以上關(guān)于基于大數(shù)據(jù)技術(shù)應(yīng)用于現(xiàn)代無線移動通信網(wǎng)絡(luò)優(yōu)化的設(shè)想，是本人結(jié)合自己在工作實踐中的心得體會提出的基本設(shè)想，限于本人學(xué)識水平，不足之處，懇請批評指正。

作者簡介：

李超，江西外語外貿(mào)職業(yè)學(xué)院。