亞馬遜推出的Prince Check軟件,讓消費者可以在零售店通過智能手機掃描產(chǎn)品編碼,實時比價,在最近距離和傳統(tǒng)零售商爭奪客戶銷售額。Google每分鐘可以支持來自世界各地的70萬次查詢。其強大的查詢引擎和IT架構支撐,使得Google手機一上市就獲得較好成績。大數(shù)據(jù)讓零售無需店面,在最大限度降低投資同時,加快現(xiàn)金流周轉(zhuǎn)效率。大數(shù)據(jù)使各行各業(yè)商家提高獲取優(yōu)質(zhì)客戶資源和提升利潤空間的同時,也使競爭進入“一兵一卒”用戶爭奪戰(zhàn)之中。
大數(shù)據(jù)時代,企業(yè)數(shù)據(jù)量和數(shù)據(jù)種類出現(xiàn)飛速增長。大數(shù)據(jù)時代,全球應用數(shù)量從幾年前的以十萬為單位計算,到了以百萬為單位計算。10年前,IT從業(yè)人員只是以百萬計算,數(shù)據(jù)生成來源也比較單一,但現(xiàn)在,IT服務使用者已經(jīng)上升到十幾億的消費者,數(shù)據(jù)生成來源更為豐富,是名副其實的大數(shù)據(jù)時代 。同時,IT資源的配置和管理要滿足高度虛擬化或集群IT架構的需求。企業(yè)應用部署效率、業(yè)務穩(wěn)定服務性能,以及動態(tài)有效滿足OLTP和OLAP性能要求,直接決定著企業(yè)核心競爭力。企業(yè)要求存儲更靈活、更動態(tài)、性能更穩(wěn)定,以支撐大量用戶對各種IT服務交付的能力。此外,大數(shù)據(jù)時代還需要集中、統(tǒng)一和自動化管理的功能。
中橋2013年7月完成的中國大數(shù)據(jù)市場調(diào)查結果顯示了,中國市場針對大數(shù)據(jù)的需求所面臨的典型的存儲挑戰(zhàn),就此我們看看此次EMC在米蘭發(fā)布的技術是如何解決這些大數(shù)據(jù)存儲挑戰(zhàn)的。
1.業(yè)務關鍵型性能:就“存儲是否能滿足目前業(yè)務關鍵應用性能”的調(diào)查結果顯示,接受調(diào)查人員(總計455名受訪者)中28.1%表示在未來12個月考慮部署新型存儲。36.5%用戶在未來12-24個月考慮部署新存儲。大數(shù)據(jù)時代,應用使用者的快速增加,對存儲并行處理能力提出了更高要求。此外,生產(chǎn)應用虛擬化產(chǎn)生大量隨機讀取,這就對傳統(tǒng)IOPs和時間延遲提出了挑戰(zhàn)。
EMC米蘭發(fā)布的MCx技術讓用戶可以通過多核并行處理方式,經(jīng)濟地提高大數(shù)據(jù)時代存儲對并行處理能力的需求。相對于通過增加控制器和磁盤形式提高存儲IOPs,這種多核動態(tài)優(yōu)化技術更為經(jīng)濟,且不會增加管理強度和開支。此外,MCx結合靈活閃存技術,可以滿足大數(shù)據(jù)環(huán)境下不同應用對IOPs或MBPs的性能需求,并降低時間延遲。
2.存儲利用率:大數(shù)據(jù)時代數(shù)據(jù)量快速增加。如何通過存儲容量優(yōu)化,降低存儲容量和網(wǎng)絡資源需求,降低數(shù)據(jù)保護過程對生產(chǎn)環(huán)境的性能影響,是控制大數(shù)據(jù)存儲新增開支的關鍵。
EMC的VNX產(chǎn)品支持壓縮和重復數(shù)據(jù)刪除,不僅降低存儲容量需求。同時,也降低數(shù)據(jù)傳輸過程中對網(wǎng)絡資源的需求。
3. 容量優(yōu)化系統(tǒng)性能:為了提高存儲資源利用率和業(yè)務連續(xù)性,存儲廠商近年紛紛推出各種企業(yè)級功能。為了降低存儲管理強度,中端以上存儲具有多種工作負載性能監(jiān)控、動態(tài)資源配置和自動化端對端管理功能。然而,傳統(tǒng)存儲控制器處理能力有限,啟動這些企業(yè)級功能需要消耗存儲控制器資源。用戶往往要在存儲資源優(yōu)化和生產(chǎn)性能之間做取舍。
EMC米蘭發(fā)布的MCx通過多核并行處理,讓控制器具有更強大的處理能力,保證啟用企業(yè)級功能不影響業(yè)務性能,實現(xiàn)優(yōu)化和高性能并舉。此外,通過控制信息和數(shù)據(jù)通道分流,徹底解決了控制信息和數(shù)據(jù)流資源爭用導致的性能問題。保證大數(shù)據(jù)時代,在不同業(yè)務發(fā)展階段下應用性能穩(wěn)定性的需求。
4.在大數(shù)據(jù)時代如何利用各種已有存儲資源,為大數(shù)據(jù)時代的業(yè)務發(fā)展提供高可擴展和業(yè)務連續(xù)性是關鍵。傳統(tǒng)存儲下,不同廠商的存儲之間無法實現(xiàn)快照、復制、備份和恢復,由此帶來數(shù)據(jù)保護的大量開支。同時,帶來存儲資源浪費。
EMC的ViPR多種標準API,可部署在ViPR支持的任何文件存儲系統(tǒng)上,這種支持多種平臺的戰(zhàn)略和開放的可擴展性能夠充分為大數(shù)據(jù)環(huán)境的跨平臺、資源靈活性和開源平臺提供IT支撐。用戶不僅可以在ViPR框架下支持第三方存儲設備,同時可以支撐開源技術。讓用戶可以利用服務器存儲、直連存儲、第三方網(wǎng)絡存儲,甚至是標配磁盤技術,滿足大數(shù)據(jù)演進過程的存儲需求。
中橋首席分析師王叢(Kim Wang)認為,大數(shù)據(jù)環(huán)境對系統(tǒng)性能要求非?量,要滿足應用OLTP和大數(shù)據(jù)分析OLAP,以及業(yè)務關鍵型應用的低延遲需求,傳統(tǒng)地通過增加控制器和硬盤這一解決方式不僅帶來高昂的采購、運維成本和占地空間成本,而且還會導致資源的閑置,從而進一步降低了企業(yè)的IT總擁有成本。EMC的MCx多核優(yōu)化并行處理技術,讓用戶能更為經(jīng)濟有效地滿足大數(shù)據(jù)對于IOPs的需求。靈活的閃存技術選擇讓用戶滿足業(yè)務關鍵應用和高虛擬機密度,以及桌面虛擬化對高IOPs和低延遲的需求。同時從戰(zhàn)略維度來看,EMC軟件定義存儲ViPR,對異構平臺和第三方技術的整合能力和對開源平臺的支撐,不僅實現(xiàn)資源配置和管理效率,同時通過管理和數(shù)據(jù)的分離,讓企業(yè)可以逐步從部署管理存儲設備向根據(jù)SLA需求動態(tài)提供存儲服務,實現(xiàn)自動化提高集中統(tǒng)一管理的目的。