IDC發(fā)布《數(shù)字宇宙研究報告》稱：2011年全球被創(chuàng)建和復(fù)制的數(shù)據(jù)總量將達到1.8ZB，與2010年同期相比，上漲超過1ZB。如果按照全球人口總數(shù)70億換算，相當于人手一塊容量為100GB的硬盤。報告預(yù)計到2015年，全球數(shù)據(jù)量將達8ZB。——這意味著人類自結(jié)繩記事以來數(shù)千年所產(chǎn)生的數(shù)據(jù)總量，僅需兩到三年時間即可達到。大數(shù)據(jù)時代已然來臨。
        快速膨脹的數(shù)據(jù)量，若缺乏很好的預(yù)先規(guī)劃跟及時的應(yīng)變對策，企業(yè)面臨的風(fēng)險勢必更加嚴峻。正是認識到了這一點，遼寧電力有限公司率先了解各種大數(shù)據(jù)處理技術(shù)，尤其深入研究了SAP HANA內(nèi)存計算技術(shù)原理及其主要特點,以及該內(nèi)存計算技術(shù)驗證項目實施工程方法,在分析海量歷史和實時信息處理存在的問題的情況下，率先采用SAP HANA內(nèi)存計算技術(shù)進行實際應(yīng)用。為進一步了解該項目情況，本刊記者采訪了遼寧電力有限公司（以下簡稱“遼電”）科技信息部副主任潘明惠先生。
 
        電力信息化用戶參考：成功實施SGERP 以來，遼電的數(shù)據(jù)情況發(fā)生了哪些變化？
        潘明惠：隨著國家電網(wǎng)公司SG186工程全面完成，SGERP全面推進，電網(wǎng)基礎(chǔ)自動化設(shè)備的不斷改進，智能電網(wǎng)應(yīng)用軟件及生產(chǎn)信息管理平臺的快速發(fā)展，信息化基礎(chǔ)設(shè)施和軟硬件快速擴充，信息系統(tǒng)復(fù)雜度也大幅增加，信息量以幾何級數(shù)的增長。然而隨著系統(tǒng)運行與應(yīng)用水平的不斷提高，海量歷史和實時信息處理也出現(xiàn)了不少問題。
   例如數(shù)據(jù)量過大,系統(tǒng)資源有限,效率低、速度慢、運行不出結(jié)果。較難支持大數(shù)據(jù)量的查詢、系統(tǒng)需要較長時間處理查詢與分析。需要較為明確的查詢條件、較難一次性查詢到需要的信息；四是取數(shù)邏輯復(fù)雜，造成運行無效率問題，以致無法及時提供支持緊急需要的決策信息。對于隨著應(yīng)用持續(xù)深化,信息量持續(xù)增長,造成增加硬盤也無法解決的問題。
 
       電力信息化用戶參考：在這樣的情形之下，遼電做了哪些工作？
       潘明惠：遼寧電力ERP項目歷時3年,完成包括ERP計劃、項目、設(shè)備、財務(wù)、物質(zhì)、人力資源等六大模塊在內(nèi)的單軌運行、高級應(yīng)用、全覆蓋、流程管理、易用化及深化應(yīng)用，與PMS、GIS、營銷管理、協(xié)同辦公、電子商務(wù)、經(jīng)濟法律等23個系統(tǒng)實現(xiàn)集成應(yīng)用。2011年，遼寧電力開始著手SAP HANA內(nèi)存計算技術(shù)的驗證項目與應(yīng)用研究, 驗證場景涉及企業(yè)主營業(yè)務(wù)中緊耦合的10大類業(yè)務(wù)36個場景，驗證數(shù)據(jù)達116338.42 萬條，數(shù)據(jù)量達9.52TB 。每種驗證方案至少設(shè)計2個以上場景，由不同的技術(shù)顧問進行多方驗證，以便從不同角度發(fā)現(xiàn)各種潛在問題。經(jīng)過一年多的摸索，遼電在計算技術(shù)應(yīng)用、數(shù)據(jù)庫技術(shù)應(yīng)用和海量數(shù)據(jù)分析處理等方面取得了一些可喜成果。
 
        電力信息化用戶參考：相較于其他大數(shù)據(jù)處理技術(shù)，內(nèi)存計算技術(shù)基本原理是什么？
        潘明惠：在軟件、硬件系統(tǒng)協(xié)同配置環(huán)境下，將數(shù)據(jù)庫及數(shù)據(jù)倉庫移到內(nèi)存中進行的運算，突破I/O瓶徑限制，采用高效并行處理技術(shù)，基于內(nèi)存的高效數(shù)據(jù)讀取和處理以及智能數(shù)據(jù)字典等高效的數(shù)據(jù)壓縮機制，支持行存儲和列存儲的內(nèi)存數(shù)據(jù)庫，支持同時提供OLTP交易系統(tǒng)和OLAP分析系統(tǒng)。利用虛擬數(shù)據(jù)模型，實現(xiàn)內(nèi)存數(shù)據(jù)倉庫數(shù)據(jù)的高效率計算功能，減少冗余的數(shù)據(jù)，應(yīng)用內(nèi)置的計算引擎，將原來在應(yīng)用層進行的運算轉(zhuǎn)移到數(shù)據(jù)庫層面處理，對數(shù)據(jù)密集型運算，優(yōu)化應(yīng)用層和數(shù)據(jù)庫層之間的數(shù)據(jù)交互，從而從整體上提升系統(tǒng)的效率。
電力信息化用戶參考：內(nèi)存計算技術(shù)在數(shù)據(jù)讀取和處理方面有哪些特點？


        潘明惠：內(nèi)存計算技術(shù)是基于內(nèi)存的高效數(shù)據(jù)讀取和處理方式。從數(shù)據(jù)庫中讀取數(shù)據(jù)因為磁盤I/O的性能限制而成為瓶頸，原因是傳統(tǒng)數(shù)據(jù)庫實際上是將數(shù)據(jù)以文件的形式存儲在磁盤上并為應(yīng)用提供訪問數(shù)據(jù)的接口，從數(shù)據(jù)庫中讀取數(shù)據(jù)的本質(zhì)是從磁盤上讀取文件。在過去幾十年的硬件發(fā)展中，內(nèi)存和CPU的性能始終在飛速的提升，只有磁盤I/O的性能提升并不明顯。從磁盤上讀取數(shù)據(jù)的速度是毫秒級。而從內(nèi)存中讀取數(shù)據(jù)的速度是納秒級，基于內(nèi)存的數(shù)據(jù)讀取比基于磁盤的數(shù)據(jù)讀取性能要快100萬倍。所以當基于數(shù)據(jù)倉庫進行報表分析時，