大數據時代 高性能存儲的三大挑戰
縱觀當下的科技領域,用風起云涌、如火如荼不足為過。新技術的日益出現和普及,使得我們的工作、生活有了翻天覆地的變化。在過去幾年中,大數據是談及最多的話題,而如今,人工智能、物聯網、機器學習等熱門技術逐漸充斥各種大中小型活動中,產生的數據更是呈現出暴增趨勢。
無可否認,新技術與云計算的融合將以人們無法想象的方式影響著商業和工業運營。但有一件事是顯而易見的,就是會有更多的數據產生,尤其是非結構化數據。根據IDC研究顯示,非結構化數據(29.8%)的增長速度超過了結構化數據(19.6%)。因此,企業需要高性能的存儲解決方案來應對強勁的存儲需求。
強勁的市場需求也催生了存儲供應商的轉變。細數近兩年的市場,非結構化數據持續增長,有關存儲技術最新進展的報道一直甚囂塵上,其中包括非易失性存儲器。隨著新型接口和更現代化軟件的不斷普及,各大供應商也在積極創新,力圖減少因過去20年內CPU發展所導致的數據中心IT基礎架構不平衡。
據悉,這些全新的接口可以實現應用程度的低延遲和高性能數據存取,尤其是對于SQL/NoSQL數據、高性能計算工作負載和大數據應用。而對于大型的非結構化數據使用閃存技術意味著需要更高的性能。而不會出現橫向擴展解決方案帶來的延遲。另外,閃存的密集存儲意味著比磁盤或磁帶小得多的空間,這反過來又轉化為電力、機架和冷卻方面的節省。雖然閃存的成本仍然高于磁盤,但各個供應商們也在努力將價格變得更低。
不過,將非易性存儲器用于非結構化文件數據目前仍然存在重大挑戰,因此,需要一種能力與高性能閃存存儲配合使用的現代二級存儲解決方案。
• 挑戰一:文件服務和數據管理
閃存供應商還沒有建立企業需要管理其數據的文件服務。包括數據管理服務,如數據保護和備份,數據移動及數據檢索等。
這意味著高性能閃存存儲需要一個互補的輔助存儲解決方案,企業需要管理大量數據的文件服務,可以讓企業能夠輕松地保護和備份數PB的數據,并且將數據從其所在的位置移動到所需位置,快速搜索并加以利用。
• 挑戰二:傳統解決方案無法跟上閃存
使用閃存進行非結構化文件數據存儲需要兼容的輔助存儲解決方案,但遺憾的是,傳統備份和歸檔解決方案無法跟上閃存存儲的速度。
一個補充高性能存儲的現代存儲解決方案需要能夠處理并行數據流以盡可能快地讀取數據。
• 挑戰三:更高的價格點
盡管目前供應商們正在努力將閃存價格變得更便宜,但高性能的價格卻在陡增。有了大量的數據,很難證明高性能閃存的成本。
但企業通常只需要將其數據的一部分存儲在高性能主存儲器中。從經濟上來講,對于經常訪問的數據進行分層是非常便捷的,而針對長期保留的數據容量則是以低成本層次進行優化的,而不是為高性能而優化。
當將閃存的性能優勢納入更大策略的優化環境中時,高性能加上巨大的容量在整個數據管理系統中既經濟可行又有價值。
小結
在非結構化數據爆炸的時代,高性能和大容量是目前所需的兩個元素。隨著各大供應商在存儲方案上的不斷推進,市場也逐漸出現使用現代化容量來補充高性能閃存,使企業能夠在在真正需要的地方利用高性能存儲能力,同時為其提供必要的文件服務,以更有效的管理所有數據。
責任編輯:任我行
-
碳中和戰略|趙英民副部長致辭全文
2020-10-19碳中和,碳排放,趙英民 -
兩部門:推廣不停電作業技術 減少停電時間和停電次數
2020-09-28獲得電力,供電可靠性,供電企業 -
國家發改委、國家能源局:推廣不停電作業技術 減少停電時間和停電次數
2020-09-28獲得電力,供電可靠性,供電企業
-
碳中和戰略|趙英民副部長致辭全文
2020-10-19碳中和,碳排放,趙英民 -
深度報告 | 基于分類監管與當量協同的碳市場框架設計方案
2020-07-21碳市場,碳排放,碳交易 -
碳市場讓重慶能源轉型與經濟發展并進
2020-07-21碳市場,碳排放,重慶
-
兩部門:推廣不停電作業技術 減少停電時間和停電次數
2020-09-28獲得電力,供電可靠性,供電企業 -
國家發改委、國家能源局:推廣不停電作業技術 減少停電時間和停電次數
2020-09-28獲得電力,供電可靠性,供電企業 -
2020年二季度福建省統調燃煤電廠節能減排信息披露
2020-07-21火電環保,燃煤電廠,超低排放
-
四川“專線供電”身陷違法困境
2019-12-16專線供電 -
我國能源替代規范法律問題研究(上)
2019-10-31能源替代規范法律 -
區域鏈結構對于數據中心有什么影響?這個影響是好是壞呢!