《電力大數據》走進大數據
2.1國內外廠商的技術和產品分析(續前章)
2.1.1 國外廠商
2.1.1.5 SAP 公司
SAP公司是全球領先的企業處理軟件解決方案提供商。SAP為 Systems Applications and Products in Data Processing 的簡稱,是SAP 公司的產品——企業管理解決方案的軟件名稱。其主要業務為公司ERP軟件以及相關業務產品,幫助企業實現成功管理。
SAP公司在大數據方面的業務重點主要是對SAP HANA實時數據平臺的開發和利用。SAP HANA是一個軟硬件結合體,提供高性能的數據查詢功能,用戶可以直接對大量實時業務數據進行查詢和分析,而不需要對業務數據進行建模、聚合等。SAP內存數據庫的數據并不是只在內存里,也會不停地寫到硬盤里,基于內存計算技術的高性能實時數據計算平臺。SAP HANA的快在于用大內存提供內存數據庫,并在內存數據庫里采用列式存儲,從而可以將更多的數據裝進內存(列式存儲更適合數據壓縮)。
SAP HANA提供多用途的內存應用設備.企業可以利用它即時掌握業務運營情況,從而對所有可用的數據進行分析,并對快速變化的業務環境做出迅速響應。通過SAP HANA,企業可以在業務運營期間,基于海量的實時詳細信息,分析業務運營情況。企業可以探索和分析來源于所有數據源的全部運營數據。運營數據在產生時由內存獲取,并通過靈活的視圖迅速將分析信息呈現給用戶。外部數據可輕松地被添加至分析模型,與整個企業的數據進行整合。通過SAP HANA可直接訪問運營數據,而不影響SAP ERP和其他運營系統的性能。企業可以近乎實時地將主要交易表同步到內存中。以便在分析或查找時能夠輕松地對這些表進行訪問。一旦數據可通過內存訪問,各個部門就可以從預訂單據、銷售線索、服務要求等大量列表中查找中個行項目,而不會對運營系統造成任何影響。這種高效的建模流程支持提供明細行項目的直接訪問模型,以及支持更為復雜流程的分析模型。
除了 SAP HANA這款基于內存的大數據平臺以外,SAP公司的另一款面向大數據處理的平臺是SAP Sybase IQ。SAP Sybase IQ 一款高性能列式分析數據庫,主要面向大數據的高級分析,它打破了數據分析的壁壘,并將其集成到企業級分析流程中。SAP Sybase IQ采用三層架構:基本層——數據庫管理系統(DBMS);分析應用程序服務層(提供Java、C++等語言的API);頂層—Sybase IQ 生態系統。將基于 Hadoop的分析結果與運行于Sybase IQ中的查詢相集成,充分利用Hadoop來識別海量結構化和非結構化數據集中的相關數據點,然后將Hadoop中的相關數據點集成到Sybase IQ中,以便利用傳統數據和來自其他數據源的結果集進行分析。
Sybase ASE,全稱力 Sybase Adaptive Server Enterprise,是一款成本低、高效、能夠處理超大數據集的關系型數據庫管理系統 (RDBMS)。面向大數據的處理要求,Sybase ASE基于以下兩方面的提升:一是面向存儲的優化,通過事務日志壓縮,行內LOB存儲技術等實現了數據規模的降低,減少了對存儲的要求;二是采用更加簡單和高效的LOB讀取與運算,極大地減少了客戶端與服務器之間的網絡流量,同時也減少了對客戶端內存的需求。
2.1.1.6 微軟(Microsoft)公司
微軟公司是世界PC ( Personal Computer,個人計算機)軟件開發的先導,以研發、制造、授權和提供廣泛的計算機軟件服務業務為主。微軟公司在大數據戰略上形成了三步關鍵的發展模式:一是如何管理數據,如何獲取、儲數據,如何安全地保護數據:二是如何清理,如何發現相關的數據,如何將其他的數據與其連接起來; 三記如何在數據中得到洞察力,帶來價值。
在技術和產品發展路線上,微軟公司在前端以新一代SQL Server 2012為基準平臺,將大數據管理起來中端以數據集市為依托,配以豐富的數據應用;后端以豐富的界面形式展現數據分析的結果,完成數據應用與分析的匯總。
其中,SQL server 2012是微軟公司大數據戰略的核心,它認為大數據的應用不僅僅是數據的存儲,還有數據的應用。微軟公司發布了一系列很有于意義的Hadoop組件。首先,微軟在SQL Server公有云服務上發布了一款叫Isotope的Hadoop產品。微軟接著發布了服務器版本,該版本著重在企業內部搭建一個Isotofp集群。該集群與傳統的Hadoop集群相比基于三大優勢:第一,前者與與微軟Windows Server有非常好的集成,在該操作系統上有性能優化;第二,Isotope集群能很好地與企業的安全系統、認證系統進行整合; 第三,能夠與微軟傳統的BI(業務分析)工具進行很好的整合;實現了SQL server對Hadoop的橫向整合。
軟硬件一體化設備在大數據解決方案中占據重要地位,IBM、 Oracle、惠普、EMC等IT巨頭紛紛推出面向大數據的一體化產品和解決方案,穩固其在大數據時代的發展地位。在這方面,微軟公司推出廣PDW,即Parallel Data Warehouse,是針對企業數據倉庫高度可擴展而設計的軟硬一體機設備,采用“大規模并行處理(MPP) ” 體系結構。在數據處理方面,基于SQL Server 2012的并行數據倉庫提供了全新的PolyBase數據處理技術,實現了用SQL語句對傳統關系型數據庫表與非關系型Hadoop數據表的統一查詢,并能夠在前端使用常用的Office工具(比如利用Office Excel)進行BI分析的操作和展示。PDW采用了xVelocity列存儲技術,查詢速度提升了10-50倍,滿足了實時數據倉庫的需求。其具有高密度Direct Attached Storage,存儲容量提升7倍,橫向擴展可以實現從幾個TB到6PB的線性擴展。由于是軟硬件一體機,內部經過了深度的優化整合,提升性能的同時,架構設計使得總體成本降低,PDW能夠實現業界每TB更低的成本。
書名:電力大數據:能源互聯網時代的電力企業轉型與價值創造
ISBN:978-7-111-51693-4
作者:賴征田
出版日期:2016-01
出版社:機械工業出版社
責任編輯:繼電保護
-
權威發布 | 新能源汽車產業頂層設計落地:鼓勵“光儲充放”,有序推進氫燃料供給體系建設
2020-11-03新能源,汽車,產業,設計 -
中國自主研制的“人造太陽”重力支撐設備正式啟運
2020-09-14核聚變,ITER,核電 -
探索 | 既耗能又可供能的數據中心 打造融合型綜合能源系統
2020-06-16綜合能源服務,新能源消納,能源互聯網
-
新基建助推 數據中心建設將迎爆發期
2020-06-16數據中心,能源互聯網,電力新基建 -
泛在電力物聯網建設下看電網企業數據變現之路
2019-11-12泛在電力物聯網 -
泛在電力物聯網建設典型實踐案例
2019-10-15泛在電力物聯網案例
-
權威發布 | 新能源汽車產業頂層設計落地:鼓勵“光儲充放”,有序推進氫燃料供給體系建設
2020-11-03新能源,汽車,產業,設計 -
中國自主研制的“人造太陽”重力支撐設備正式啟運
2020-09-14核聚變,ITER,核電 -
能源革命和電改政策紅利將長期助力儲能行業發展
-
探索 | 既耗能又可供能的數據中心 打造融合型綜合能源系統
2020-06-16綜合能源服務,新能源消納,能源互聯網 -
5G新基建助力智能電網發展
2020-06-125G,智能電網,配電網 -
從智能電網到智能城市