時間:2022-06-21 19:53:57
緒論:在尋找寫作靈感嗎?愛發(fā)表網(wǎng)為您精選了8篇企業(yè)數(shù)據(jù)存儲方案,愿這些內(nèi)容能夠啟迪您的思維,激發(fā)您的創(chuàng)作熱情,歡迎您的閱讀與分享!
人們對數(shù)據(jù)存儲備份一詞并不陌生,然而對備份的真正內(nèi)涵并不完全了解。在一般人腦海里,往往把備份和拷貝等同起來,把備份單純看作是更換磁帶、為磁帶編號等一個完全程式化的、單調(diào)的操作過程。其實不然,因為除了拷貝外,還包括更重要的內(nèi)容即管理。備份管理包括備份的可計劃性,磁帶機的自動化操作、歷史記錄的保存以及日志記錄等。事實上,備份管理是一個全面的概念,它不僅包含制度的制定和磁帶的管理,而且還能決定引進(jìn)備份技術(shù),如備份技術(shù)的選擇、備份設(shè)備的選擇、介質(zhì)的選擇乃至軟件技術(shù)的挑選等。
有些人往往也把雙機熱備份、磁盤陣列備份以及磁盤鏡象備份等硬件備份的內(nèi)容和數(shù)據(jù)存儲備份相提并論。事實上,所有的硬件備份都不能代替數(shù)據(jù)存儲備份,硬件備份只是拿一個系統(tǒng)、一個設(shè)備等作犧牲來換取另一臺系統(tǒng)或設(shè)備在短暫時間內(nèi)的安全。若發(fā)生人為的錯誤、自然災(zāi)害、電源故障、病毒侵襲等,引起的后果就不堪設(shè)想,如造成所有系統(tǒng)癱瘓,所有設(shè)備無法運行,由此引起的數(shù)據(jù)丟失也就無法恢復(fù)了。事實證明,只有數(shù)據(jù)存儲備份才能為人們提供萬無一失的數(shù)據(jù)安全保護(hù)。
隨著網(wǎng)絡(luò)應(yīng)用規(guī)模的擴張和計算機應(yīng)用的深入、企業(yè)數(shù)據(jù)存儲量呈爆炸性增長,企業(yè)用戶的存儲系統(tǒng)日益龐雜,存儲管理的成本也在大幅上升。數(shù)據(jù)備份、災(zāi)難恢復(fù)和存儲資源管理等存儲理念正在得到用戶的接受,網(wǎng)絡(luò)存儲也逐漸得到更廣泛的應(yīng)用。目前市場上的存儲產(chǎn)品主要有磁盤陣列、磁帶機與磁帶庫、光盤庫等,其中磁帶設(shè)備以其技術(shù)成熟、價格低廉、產(chǎn)品線齊全、使用方便等優(yōu)點占據(jù)了存儲市場的重要地位。
企業(yè)數(shù)據(jù)存儲的三種方式
在企業(yè)剛剛建立初期,用戶的數(shù)據(jù)規(guī)模并不大,存儲需求也很簡單,只是要把相關(guān)數(shù)據(jù)存放在某一地方即可。而存放數(shù)據(jù)的最終目的不僅是為了能夠安全保存,還必須保證數(shù)據(jù)可以隨時被調(diào)用。我們最早都是采用一種稱之為“DAS(Direct Attached Storage,直接外掛存儲)”存儲方式的一種方案。這種存儲方案的服務(wù)器結(jié)構(gòu)如同PC機架構(gòu),外部數(shù)據(jù)存儲設(shè)備(如磁盤陣列、光盤機、磁帶機等)都直接掛接在服務(wù)器內(nèi)部總線上,數(shù)據(jù)存儲設(shè)備是整個服務(wù)器結(jié)構(gòu)的一部分,同樣服務(wù)器也擔(dān)負(fù)著整個網(wǎng)絡(luò)的數(shù)據(jù)存儲職責(zé)。DAS這種直連方式,能夠解決單臺服務(wù)器的存儲空間擴展、高性能傳輸需求,并且單臺外置存儲系統(tǒng)的容量,已經(jīng)從不到1TB,發(fā)展到了2TB,隨著大容量硬盤的推出,單臺外置存儲系統(tǒng)容量還會上升。此外,DAS還可以構(gòu)成基于磁盤陣列的雙機高可用系統(tǒng),滿足數(shù)據(jù)存儲對高可用的要求。從趨勢上看,DAS仍然會作為一種存儲模式,繼續(xù)得到應(yīng)用。
NAS(Network Attached Storage,網(wǎng)絡(luò)附加存儲)方式則全面改進(jìn)了以前低效的DAS存儲方式,它是采用獨立于PC服務(wù)器,單獨為網(wǎng)絡(luò)數(shù)據(jù)存儲而開發(fā)的一種文件服務(wù)器。NAS服務(wù)器中集中連接了所有的網(wǎng)絡(luò)數(shù)據(jù)存儲設(shè)備(如各種磁盤陣列、磁帶、光盤機等),存儲容量可以較好地擴展,同時由于這種網(wǎng)絡(luò)存儲方式是NAS服務(wù)器獨立承擔(dān)的,所以,對原來的網(wǎng)絡(luò)服務(wù)器性能基本上沒什么影響,以確保整個網(wǎng)絡(luò)性能不受影響。它提供了一個簡單、高性價比、高可用性、高擴展性和低總擁有成本(TCO)的網(wǎng)絡(luò)存儲解決方案。
SAN(Storage Area Network,存儲域網(wǎng)絡(luò))與NAS則是完全不同,它不是把所有的存儲設(shè)備集中安裝在一個專門的NAS服務(wù)器中,而是將這些存儲設(shè)備單獨通過光纖交換機連接起來,形成一個光纖通道的網(wǎng)絡(luò),然后這個網(wǎng)絡(luò)再與企業(yè)現(xiàn)有局域網(wǎng)進(jìn)行連接,在這種方案中,起著核心作用的當(dāng)然就是光纖交換機了,它的支撐技術(shù)就是Fibre Channel(FC,光纖通道)協(xié)議,這是ANSI為網(wǎng)絡(luò)和通道I/O接口建立的一個標(biāo)準(zhǔn)集成,支持HIPPI、IPI、SCSI、IP、ATM等多種高級協(xié)議。在SAN中,數(shù)據(jù)以集中的方式進(jìn)行存儲,加強了數(shù)據(jù)的可管理性,同時適應(yīng)于多操作系統(tǒng)下的數(shù)據(jù)共享同一存儲池,降低了總擁有成本。
選擇合理數(shù)據(jù)存儲方案
企業(yè)存儲應(yīng)用的體系結(jié)構(gòu)主要有DAS、NAS和SAN三種模式,三種模式從體系架構(gòu)的邏輯上看,有明顯的區(qū)別。一個企業(yè)存儲具有以下幾方面的要求: 性能、安全性、擴展性、易用性、整體擁有成本、服務(wù)等等。由于企業(yè)用戶的存儲系統(tǒng)構(gòu)建并不是一蹴而就的事情,會經(jīng)歷從單機邁向網(wǎng)絡(luò)化存儲的過程,因此就存在DAS、NAS和SAN三種存儲方案供企業(yè)用戶進(jìn)行不同的選擇。
1. 選擇DAS方案
DAS直連式存儲依賴服務(wù)器主機操作系統(tǒng)進(jìn)行數(shù)據(jù)的I/O讀寫和存儲維護(hù)管理,數(shù)據(jù)備份和恢復(fù)要求占用服務(wù)器主機資源(包括CPU、系統(tǒng)I/O等),數(shù)據(jù)流需要回流主機再到服務(wù)器連接著的磁帶機(庫),數(shù)據(jù)備份通常占用服務(wù)器主機資源20%~30%,因此許多企業(yè)用戶的日常數(shù)據(jù)備份常常在深夜或業(yè)務(wù)系統(tǒng)不繁忙時進(jìn)行,以免影響正常業(yè)務(wù)系統(tǒng)的運行。直連式存儲的數(shù)據(jù)量越大,備份和恢復(fù)的時間就越長,對服務(wù)器硬件的依賴性和影響就越大。這種方案主要在早期的計算機和服務(wù)器上使用,由于當(dāng)時對數(shù)據(jù)存儲的需求并不大,單個服務(wù)器需要的存儲能力就可以滿足日常數(shù)據(jù)存儲需求,因此在低檔網(wǎng)絡(luò)應(yīng)用中相當(dāng)普遍。
2. 選擇NAS方案
NAS作為一個網(wǎng)絡(luò)附加存儲設(shè)備,NAS設(shè)備內(nèi)置優(yōu)化的獨立存儲操作系統(tǒng),可以有效、緊密地釋放系統(tǒng)總線資源,全力支持I/O存儲,同時NAS設(shè)備一般集成本地的備份軟件,可以不經(jīng)過服務(wù)器將NAS設(shè)備中的重要數(shù)據(jù)進(jìn)行本地備份,而且NAS設(shè)備提供硬盤RAID、冗余的電源和風(fēng)扇以及冗余的控制器,可以滿足保證NAS的穩(wěn)定應(yīng)用。
NAS設(shè)備主要用來實現(xiàn)在不同操作系統(tǒng)平臺下的文件共享應(yīng)用,與傳統(tǒng)的服務(wù)器或DAS存儲設(shè)備相比,NAS設(shè)備的安裝、調(diào)試、使用和管理非常簡單,采用NAS可以節(jié)省一定的設(shè)備管理與維護(hù)費用。NAS設(shè)備提供 RJ- 45 接口和單獨的IP地址,可以將其直接掛接在主干網(wǎng)的交換機或其他局域網(wǎng)的Hub上,通過簡單的設(shè)置(如設(shè)置機器的IP地址等)就可以在網(wǎng)絡(luò)即插即用地使用NAS設(shè)備,而且進(jìn)行網(wǎng)絡(luò)數(shù)據(jù)在線擴容時也無需停頓,從而保證數(shù)據(jù)流暢存儲。
NAS數(shù)據(jù)存儲方案是基于局域網(wǎng)而設(shè)計的,按照傳統(tǒng)的TCP/IP協(xié)議進(jìn)行通信,面向消息傳遞,以文件的I/O方式進(jìn)行數(shù)據(jù)傳輸。在LAN環(huán)境下,NAS已經(jīng)完全可以實現(xiàn)異構(gòu)平臺之間的數(shù)據(jù)級共享,比如Windows NT、Linux、Unix等平臺的共享?;谶@種種原因,NAS存儲方案對于企業(yè)來說的使用和維護(hù)成本就相當(dāng)?shù)停耆梢杂涩F(xiàn)有網(wǎng)管員擔(dān)當(dāng)。
3. 選擇SAN方案
由于SAN是通過一個單獨的通常是基于光纖通道的SAN網(wǎng)絡(luò)把存儲設(shè)備以及服務(wù)器相連,如此當(dāng)有海量數(shù)據(jù)的存取需求時,數(shù)據(jù)完全可以通過SAN網(wǎng)絡(luò)在相關(guān)服務(wù)器和后臺的存儲設(shè)備之間高速傳輸,對于LAN的帶寬占用幾乎為零,而且服務(wù)器可以訪問SAN上的任何一個存儲設(shè)備,提高了數(shù)據(jù)的可用性。在對性能和可靠性要求較高的場合,采用先進(jìn)的SAN數(shù)據(jù)存儲網(wǎng)絡(luò),可以使數(shù)據(jù)的存儲、備份等活動獨立在原先的局域網(wǎng)之外,從而將減輕LAN的負(fù)載,保證原有網(wǎng)絡(luò)應(yīng)用的順暢進(jìn)行; 同時SAN網(wǎng)采用光纖傳輸通道,可以得到高速的數(shù)據(jù)傳輸率。
SAN方案簡化了管理和集中控制,這對于全部存儲設(shè)備都集中在信息中心,是非常有現(xiàn)實意義的。SAN將企業(yè)的存儲和服務(wù)器平臺分開,可以實現(xiàn)24 x 7不間斷的系統(tǒng)可用性和集中管理,在這個平臺的基礎(chǔ)上,還可以應(yīng)用一套統(tǒng)一的災(zāi)難恢復(fù)解決方案,同時可經(jīng)濟高效地擴展存儲環(huán)境。因此SAN非常適用于非線性編輯、服務(wù)器集群、遠(yuǎn)程災(zāi)難恢復(fù)、因特網(wǎng)數(shù)據(jù)服務(wù)等多個領(lǐng)域。
企業(yè)數(shù)據(jù)存儲的發(fā)展趨勢
【關(guān)鍵詞】中小企業(yè);網(wǎng)絡(luò)存儲模式;優(yōu)劣分析;
一、基本簡述
網(wǎng)絡(luò)存儲技術(shù)(Network Storage Technologies)是基于數(shù)據(jù)存儲的一種通用網(wǎng)絡(luò)術(shù)語。網(wǎng)絡(luò)存儲結(jié)構(gòu)大致分為三種:直連式存儲(DAS:Direct Attached Storage)、網(wǎng)絡(luò)存儲設(shè)備(NAS:Network Attached Storage)和存儲網(wǎng)絡(luò)(SAN:Storage Area Network)。
二、數(shù)據(jù)安全性上的優(yōu)劣分析
在NAS網(wǎng)絡(luò)附加存儲方案中,服務(wù)器與實際的存儲設(shè)備是分開的。也就是說,在硬盤等存儲設(shè)備與客戶端之間存在著一個網(wǎng)絡(luò)附加存儲服務(wù)器。如果某臺NAS節(jié)點出現(xiàn)故障,用戶仍然可以訪問其它的數(shù)據(jù),不會造成整個系統(tǒng)的崩潰。
而在DAS直接方式存儲的方案中,往往服務(wù)器與磁盤陣列柜是在一起的。也就是說,如果其中的一臺服務(wù)器出現(xiàn)故障癱瘓,那必須要整個服務(wù)器修復(fù)后才能夠使用??梢钥闯觯琋AS存儲方案在冗余性方面比DAS系統(tǒng)更優(yōu)秀。當(dāng)然,這也只是相對的,DAS方案也可以通過其它的方式,如服務(wù)器冗余等來提高服務(wù)器自身的安全性和可靠性,但是這樣一來,DAS額外的系統(tǒng)成本會是一筆不小的開支。
在數(shù)據(jù)備份上,NAS網(wǎng)絡(luò)附加存儲也有著比較出色的表現(xiàn),在數(shù)據(jù)備份效率、安全性上更加有保障,而且靈活性更高,如可以實現(xiàn)不同設(shè)備之間的數(shù)據(jù)備份等。而DAS直連方式存儲一般需要用戶自己去選擇第三方的備份工具,或者采用RAID磁盤陣列的方式實現(xiàn)數(shù)據(jù)的冗余備份。這種方式盡管在安全性上有保證,但是在備份效率與靈活性方面是很難跟配套的專業(yè)備份軟件相比的。
數(shù)據(jù)安全性的另外一個體現(xiàn)就是容災(zāi)性。對于NAS存儲方案來說,它可以更加容易、簡便地實現(xiàn)遠(yuǎn)程容災(zāi)備份。相反,由于DAS采用磁盤陣列技術(shù)本身就可以在一定程度上實現(xiàn)容災(zāi)的要求。如在磁盤陣列中,即使損壞一塊硬盤,那么服務(wù)器仍然可以根據(jù)一定的規(guī)則自動修復(fù)數(shù)據(jù),而不會導(dǎo)致數(shù)據(jù)的丟失等等。
如果單從安全性方面來考慮采用哪一個存儲方案,那么可以從是否需要遠(yuǎn)程容災(zāi)備份的角度考慮。如果需要的話,則采用NAS存儲方案,否則還是選擇DAS方案。
三、跨平臺性能上的差異分析
眾所周知,跨平臺性能是NAS網(wǎng)絡(luò)附加存儲最出色的優(yōu)點之一。NAS網(wǎng)絡(luò)存儲在處理異構(gòu)操作系統(tǒng)平臺方面相比傳統(tǒng)的磁盤陣列來說具有絕對的優(yōu)勢,如NAS服務(wù)器系統(tǒng)本身就支持多種操作系統(tǒng)。并且,即使在同一個網(wǎng)絡(luò)下,NAS也可以存儲來自多個操作系統(tǒng)的數(shù)據(jù),而不需要做任何的數(shù)據(jù)轉(zhuǎn)換,也不需要為不同的操作系統(tǒng)設(shè)置多個NAS服務(wù)器。
DAS存儲在跨平臺上的表現(xiàn)就要弱勢得多。雖然很多磁盤陣列本身可以支持不同的操作系統(tǒng),但在存儲數(shù)據(jù)時,卻只支持一種客戶端。如果有多個客戶端同時往一個DAS設(shè)備存儲數(shù)據(jù),則需要經(jīng)過數(shù)據(jù)轉(zhuǎn)換,或采用虛擬機等中間設(shè)備才可以實現(xiàn)。這不僅增加了額外的成本與管理難度,而且還會導(dǎo)致數(shù)據(jù)的存儲能力下降。因此,企業(yè)如果需要支持異構(gòu)操作系統(tǒng)平臺,最好在一開始就選擇NAS網(wǎng)絡(luò)附加存儲。
四、部署成本上的高低分析
DAS的磁盤陣列主要有軟件RAID和硬件RAID兩種。而硬件RAID又分為獨立的硬件RAID與內(nèi)置式硬件RAID,所采用的RAID模式不同,成本上相差會很大。而NAS網(wǎng)絡(luò)附加存儲本身就是一立的功能強大的磁盤陣列。從目前市場上主流的產(chǎn)品來看,NAS存儲產(chǎn)品的購買價格要比軟件RAID和內(nèi)置式硬件RAID DAS系統(tǒng)高,但比獨立式硬件RAID系統(tǒng)要低。
獨立式的硬件RAID一般用來做一些中央存儲,如銀行總部的存儲與備份。對于這樣的要害部門而言這點投資是值得的。但是對于中小企業(yè)來說,獨立式硬件RAID的成本就太高了,收益率不高。
對于小型企業(yè)來說,使用軟件RAID或內(nèi)置式RAID的DAS方案就足夠了。而對于中型企業(yè),在資金允許的情況下最好還是選擇NAS方案。對于數(shù)據(jù)量比較大的企業(yè),可以適當(dāng)增加硬盤容量。一些集團(tuán)企業(yè)下面子公司的存儲設(shè)備,也可以采用NAS網(wǎng)絡(luò)附加存儲。
五、維護(hù)成本對比
NAS數(shù)據(jù)存儲方案是基于局域網(wǎng)而設(shè)計的,按照傳統(tǒng)的TCP/IP協(xié)議進(jìn)行通信。在LAN環(huán)境下,NAS已經(jīng)完全可以實現(xiàn)異構(gòu)平臺之間的數(shù)據(jù)級共享,比如Windows NT、Linux、UNIX等平臺的共享和集中管理。因此,NAS存儲方案對于企業(yè)來說的使用和維護(hù)成本相當(dāng)?shù)?,完全可以由現(xiàn)有網(wǎng)管員擔(dān)當(dāng)。相對而言,DAS的維護(hù)成本就要高得多,一般需要專人看管,而且數(shù)據(jù)量越大備份時間越長,維護(hù)周期和成本都要相應(yīng)增加。
綜合以上對比結(jié)果我們可以看到,對于中型企業(yè)來說,基于網(wǎng)絡(luò)架構(gòu)的NAS存儲系統(tǒng)無疑具有更多的優(yōu)勢。首先,它解決了DAS解決方案先天不足的存儲容量上限的問題;其次,它的架構(gòu)相對簡單,容量和設(shè)備部署也比較靈活,而且可以很好地支持跨平臺操作;而網(wǎng)絡(luò)架構(gòu)也使它更容易實現(xiàn)集中管理和維護(hù),特別是在實現(xiàn)遠(yuǎn)程備份和容災(zāi)等方面具有比較明顯的優(yōu)勢,而這些都是中型企業(yè)在選擇數(shù)據(jù)存儲時必須要考慮的。
參考文獻(xiàn):
[1]http:///v8976411.htm.
[2]http:///storage-network-137964.htm.
大數(shù)據(jù)不是一個分析工具,而是新的基礎(chǔ)架構(gòu)。
大數(shù)據(jù)的核心價值是如何把數(shù)據(jù)變成商業(yè)價值。
大數(shù)據(jù)存儲,可以認(rèn)為是存儲廠商基于現(xiàn)有大數(shù)據(jù)應(yīng)用的特點進(jìn)行優(yōu)化的解決方案。
記者不久前去香港出差,剛下飛機就收到招商銀行發(fā)來的一條短信,內(nèi)容是告之香港有哪些商場在舉辦促銷活動。不知道這是巧合,還是招商銀行利用大數(shù)據(jù)的新成果,但是可以肯定,利用大數(shù)據(jù)分析可以為客戶提供定制化的服務(wù),實現(xiàn)精準(zhǔn)營銷。大數(shù)據(jù)正在改變企業(yè)業(yè)務(wù)模式,也讓人們的生活變得更加便利和豐富多彩。
存儲必須整合
大數(shù)據(jù)存儲是一類單獨的產(chǎn)品嗎?賽迪顧問高級分析師陳靚并不這么認(rèn)為:“把大數(shù)據(jù)軟件與存儲進(jìn)行整合,就稱為大數(shù)據(jù)存儲,未免有些牽強。如果非要說出大數(shù)據(jù)存儲的特征,那么我認(rèn)為它至少應(yīng)該能讓大數(shù)據(jù)的‘4V’發(fā)揮出應(yīng)有的效果,滿足大數(shù)據(jù)對性能和擴展性的要求。”
“與其說大數(shù)據(jù)存儲是一類產(chǎn)品,不如說它是下一代的存儲架構(gòu)。這種架構(gòu)可以將傳統(tǒng)的DAS、SAN和NAS有效地整合起來,以滿足上層計算平臺的要求。”Forrester Research首席咨詢分析師戴昆表示,“大數(shù)據(jù)存儲本身的性能與傳統(tǒng)企業(yè)級存儲并沒有顯著差異,它主要依賴于上層計算平臺的分布式并行處理能力,但其擴展性一定要強?!?/p>
“在中國市場上,大數(shù)據(jù)應(yīng)用還沒有真正落地,許多用戶談的還是BI(商業(yè)智能)。而從國外的實踐看,BI只是大數(shù)據(jù)的一部分,屬于大數(shù)據(jù)的起步階段,真正的大數(shù)據(jù)應(yīng)用是近實時或?qū)崟r的數(shù)據(jù)分析?!敝袠蛘{(diào)研咨詢首席分析師王叢告訴記者,“計算、存儲、網(wǎng)絡(luò)等都與大數(shù)據(jù)的價值有關(guān)。大數(shù)據(jù)存儲并不是一類單獨的產(chǎn)品,它也可以通過類似公有云或私有云的方式提供給用戶。應(yīng)用和數(shù)據(jù)量的增加,對數(shù)據(jù)的存取提出了更高要求。因此,并行存儲能力的增強對大數(shù)據(jù)存儲來說非常重要?!?/p>
EMC Isilon存儲事業(yè)部總經(jīng)理楊蘭江表示,大數(shù)據(jù)存儲有很多實現(xiàn)方式,不過它應(yīng)具備以下特性:海量數(shù)據(jù)存儲能力、全局命名空間、支持標(biāo)準(zhǔn)接口、讀寫性能優(yōu)異、易于管理維護(hù)、基于開放架構(gòu)、多級數(shù)據(jù)冗余、多級存儲備份等。
“存儲產(chǎn)品并不像網(wǎng)絡(luò)產(chǎn)品那樣有嚴(yán)格的界線,因此很難將大數(shù)據(jù)存儲單獨劃分出來。其實,大數(shù)據(jù)存儲并不是只有分布式存儲這一種方式,傳統(tǒng)的存儲也可以成為大數(shù)據(jù)存儲解決方案的一部分?!比A為存儲產(chǎn)品線市場總監(jiān)經(jīng)寧解釋說,“華為將大數(shù)據(jù)存儲當(dāng)成相對獨立的一類產(chǎn)品,主要是從產(chǎn)品的主定位角度考慮的。華為有針對企業(yè)級應(yīng)用的高端存儲,也有針對中小型用戶的通用存儲,當(dāng)然還有專門為大數(shù)據(jù)優(yōu)化的分布式、可橫向擴展的大數(shù)據(jù)存儲?!?/p>
目前,業(yè)內(nèi)并沒有關(guān)于大數(shù)據(jù)存儲產(chǎn)品的通用定義,但是綜合考慮廠商的產(chǎn)品以及用戶的需求,可以簡單概括出大數(shù)據(jù)存儲的特征:首先,大數(shù)據(jù)存儲必須能夠支持全類型數(shù)據(jù),包括結(jié)構(gòu)化、半結(jié)構(gòu)化和非結(jié)構(gòu)化數(shù)據(jù),實現(xiàn)統(tǒng)一數(shù)據(jù)支持;其次,在保證可靠性的基礎(chǔ)之上,大數(shù)據(jù)存儲必須具備線性擴展能力,同時還要具有很強的批處理和實時處理能力;最后,在系統(tǒng)達(dá)到一定規(guī)模后,大數(shù)據(jù)存儲平臺的易用性和可管理性也是不可或缺的。
在大數(shù)據(jù)處理過程中,用戶發(fā)現(xiàn)性能的瓶頸并不在計算層面,而在于海量數(shù)據(jù)的上傳和下載。因此,極高的數(shù)據(jù)加載速率是大數(shù)據(jù)存儲必須具備的特性。大數(shù)據(jù)解決方案通常包含數(shù)據(jù)存儲、計算及分析,存儲是大數(shù)據(jù)基礎(chǔ)架構(gòu)中的一部分。
凸顯高性能、可擴展
對中國用戶來說,大數(shù)據(jù)應(yīng)用落地的關(guān)鍵是如何更好地讓企業(yè)的IT決策者和架構(gòu)師理解業(yè)務(wù)需求,建立適合企業(yè)業(yè)務(wù)特點的數(shù)據(jù)應(yīng)用場景和數(shù)據(jù)管理架構(gòu),更好地利用企業(yè)現(xiàn)有的數(shù)據(jù)資產(chǎn),而非盲目地進(jìn)行所謂的大數(shù)據(jù)投資?!坝脩羰紫纫紤]的是什么樣的大數(shù)據(jù)應(yīng)用才能為企業(yè)帶來合理產(chǎn)出,其次再考慮大數(shù)據(jù)平臺和存儲,切勿本末倒置?!贝骼ケ硎尽?/p>
賽迪顧問的研究發(fā)現(xiàn),中國使用大數(shù)據(jù)存儲比較多的行業(yè)是電信、互聯(lián)網(wǎng)、金融等,其他行業(yè)大多還在觀望及測試中。中國用戶對于大數(shù)據(jù)存儲的需求首先是可靠和穩(wěn)定,金融行業(yè)的用戶非常重視這一點;互聯(lián)網(wǎng)用戶則要求大數(shù)據(jù)存儲具有很高的I/O吞吐能力;電信行業(yè)的客戶更青睞高性價比的大數(shù)據(jù)存儲設(shè)備。
中國惠普有限公司企業(yè)集團(tuán)存儲產(chǎn)品部存儲架構(gòu)師張楠表示,很多中國用戶會追求大容量和高性能,忽略了大數(shù)據(jù)存儲本身應(yīng)該具有的其他屬性,這讓用戶在實際應(yīng)用中很容易遇到一些障礙,比如無法將存儲與大數(shù)據(jù)平臺進(jìn)行對接,無法在業(yè)務(wù)中充分發(fā)揮大數(shù)據(jù)存儲的價值等。究其原因,主要障礙在于有些大數(shù)據(jù)存儲產(chǎn)品沒有開放的接口協(xié)議, 沒有針對用戶的大數(shù)據(jù)應(yīng)用場景進(jìn)行特別優(yōu)化, 沒有提供用戶容易接受的易用管理方式等。
存儲的高可擴展性、高可用性和并行處理能力是企業(yè)評估大數(shù)據(jù)存儲最重要的三個因素。高可擴展性可以確保企業(yè)的IT能夠隨著數(shù)據(jù)量的增長和性能需求的提高進(jìn)行擴展;高可用性能夠保證大數(shù)據(jù)分析過程的平穩(wěn)和無間斷運行;高并行處理能力則能夠確保在大數(shù)據(jù)處理過程中同時進(jìn)行更多數(shù)據(jù)的處理,高效地完成數(shù)據(jù)分析,同時縮短產(chǎn)品或技術(shù)的上市周期。低延遲、自動分層存儲以及對10GbE網(wǎng)絡(luò)的支持等也是用戶評估大數(shù)據(jù)存儲的重要考核因素。
“如何管理好大數(shù)據(jù)真的是一個大問題。從IT的角度看,我們還缺乏能夠展現(xiàn)數(shù)據(jù)價值的行之有效的手段。數(shù)據(jù)作為一種資產(chǎn),如何被長期、高效、經(jīng)濟地保存也是一個問題?!比A為海量存儲產(chǎn)品線總經(jīng)理袁遠(yuǎn)表示,“大數(shù)據(jù)提出了一個新的方法論——以數(shù)據(jù)為中心,而不是以應(yīng)用為中心。以數(shù)據(jù)為中心,就要考慮數(shù)據(jù)的來源,如何以更低的成本存儲和管理數(shù)據(jù),誰有權(quán)利獲得哪些數(shù)據(jù),對數(shù)據(jù)進(jìn)行分析前必須進(jìn)行模型化的抽象等。大數(shù)據(jù)需要新的工具、新的管理思路和方法,同時還要對技術(shù)架構(gòu)進(jìn)行創(chuàng)新?!?/p>
歐洲核子研究中心(CERN)創(chuàng)建的OpenLAB旨在通過部署全球領(lǐng)先的IT系統(tǒng)和解決方案,將全球大型強子對撞機(LHC)行業(yè)的資源、研究成果匯集在一起。持續(xù)快速增長的海量科研數(shù)據(jù)對CERN的存儲系統(tǒng)在可擴展性、可靠性等方面提出了嚴(yán)峻挑戰(zhàn),這也促使CERN開始評估新的存儲技術(shù)。最終,CERN選擇了華為UDS云存儲系統(tǒng),并在三個月內(nèi)完成了安裝調(diào)測和基準(zhǔn)性能的評估。測試結(jié)果顯示,UDS創(chuàng)新的軟硬件和系統(tǒng)非常適合海量數(shù)據(jù)存儲的業(yè)務(wù)要求,這讓CERN可以在未來輕松應(yīng)對EB級數(shù)據(jù)量的挑戰(zhàn)。
談到華為大數(shù)據(jù)存儲解決方案的特色,經(jīng)寧概括說:“我們能更好地把握大數(shù)據(jù)的本質(zhì)需求,并依靠自主研發(fā)能力,在IT架構(gòu)上實現(xiàn)創(chuàng)新,將計算與存儲進(jìn)行有機結(jié)合。我們還基于自己的大數(shù)據(jù)存儲平臺,提供了多種類型的接口,便于與應(yīng)用銜接?!睆漠a(chǎn)品研發(fā)的角度看,華為將重點放在了軟件方面,硬件則采用了開放的標(biāo)準(zhǔn)化的存儲服務(wù)器架構(gòu)。在2013年華為云計算大會上,華為與中央電視臺正式簽署合作協(xié)議,在大數(shù)據(jù)存儲領(lǐng)域建立戰(zhàn)略合作關(guān)系,為媒資行業(yè)提供領(lǐng)先的技術(shù)和應(yīng)用模式。雙方計劃聯(lián)合開發(fā)自適應(yīng)、深度節(jié)能的高密度、大容量的媒資存儲系統(tǒng)。
面對大數(shù)據(jù)的需求,存儲永遠(yuǎn)不變的是對數(shù)據(jù)可靠性、性能、可擴展性和效率的追求,而有可能發(fā)生改變的是為了提高效率、節(jié)省消耗,存儲可以變得更加靈活,也可以考慮與計算進(jìn)行融合等。不管存儲如何變化,用戶對高性價比的需求始終不變。
數(shù)據(jù)收集和存儲是大數(shù)據(jù)分析的第一個環(huán)節(jié)。在大數(shù)據(jù)時代,應(yīng)用數(shù)量、數(shù)據(jù)量和使用者數(shù)量的增長,對存儲IOPS以及OLTP和OLAP的要求越來越高,具體表現(xiàn)在現(xiàn)有的存儲已不能滿足業(yè)務(wù)關(guān)鍵型應(yīng)用的需求。中橋調(diào)研咨詢針對中國用戶的調(diào)研數(shù)據(jù)顯示,F(xiàn)C SAN仍是企業(yè)級用戶(42.1%)和中型企業(yè)(34.0%)的首選,遠(yuǎn)高于其他存儲類型的占比。這是因為FC SAN對OLTP和OLAP的性能穩(wěn)定性優(yōu)于其他存儲技術(shù)。這一調(diào)查結(jié)果也顯示,目前中國用戶大多處于大數(shù)據(jù)分析的第一階段,其工作以存儲和IT架構(gòu)的整合和優(yōu)化為主。王叢分析說,隨著Hadoop和MapReduce的不斷普及,中國用戶將逐步進(jìn)入近實時和實時分析階段,節(jié)點式存儲的占比會隨之增加。
打通行業(yè)價值鏈
華為的金字塔型“4V”理論具體來說,第一步,要建立一個高效的存儲架構(gòu)平臺,它既能處理大量的小文件,也能處理單體較大的文件。第二步,這個存儲平臺要具備極高的處理性能。第三步,這個存儲平臺要能處理多樣化的數(shù)據(jù),包括結(jié)構(gòu)化和非結(jié)構(gòu)化數(shù)據(jù)。只有通過前面三步打下的基礎(chǔ),企業(yè)用戶才能進(jìn)入最后一步,在一個高效的專門為大數(shù)據(jù)構(gòu)建和優(yōu)化的平臺上進(jìn)行數(shù)據(jù)分析和挖掘,并最終獲得所需的價值。
經(jīng)寧表示:“如果仔細(xì)甄別,大數(shù)據(jù)與海量數(shù)據(jù)還是有差別的,畢竟大數(shù)據(jù)不僅僅是指數(shù)據(jù)量大,還包括處理、分析和挖掘等過程。從表面上看,大數(shù)據(jù)的‘4V’特征是并列的關(guān)系,但實際上這些因素之間還是有層次性的。我們提出的大數(shù)據(jù)金字塔模型,可以更好展現(xiàn)大數(shù)據(jù)價值的實現(xiàn)過程?!?/p>
華為倡導(dǎo)構(gòu)建高效的大數(shù)據(jù)存儲平臺,而其中的高效又是如何來衡量的呢?高效的第一個衡量指標(biāo)就是性能。性能是大數(shù)據(jù)存儲平臺的基石之一,沒有性能的保證,大數(shù)據(jù)系統(tǒng)無異于空中樓閣。其次,大數(shù)據(jù)強調(diào)的是簡化使用,提高效率。最后,高效的大數(shù)據(jù)存儲平臺應(yīng)該采用融合的技術(shù)架構(gòu)。以華為OceanStor 9000大數(shù)據(jù)存儲系統(tǒng)為例,它采用華為首創(chuàng)的全融合創(chuàng)新架構(gòu),可以實現(xiàn)存儲、分析和歸檔的融合,同時具有很強的橫向擴展能力,最大可擴展至288節(jié)點,單一文件系統(tǒng)可支持40PB容量。分析功能是指OceanStor 9000中內(nèi)置了分布式數(shù)據(jù)庫,能完成數(shù)據(jù)的快速檢索和查詢,以支持上層應(yīng)用。
華為一直堅持“被集成”的策略,這在大數(shù)據(jù)領(lǐng)域同樣適用。華為的大數(shù)據(jù)存儲平臺可以提供開放的接口,方便與BI軟件和應(yīng)用軟件連接,進(jìn)一步提高查詢效率。在OceanStor 9000這樣的融合平臺之上,用戶還可以根據(jù)業(yè)務(wù)的情況靈活添加相關(guān)的功能模塊。“在大數(shù)據(jù)方面,我們主要從垂直行業(yè)切入,與行業(yè)ISV緊密合作,為金融、電信運營商、媒體、智慧城市、石油勘探等領(lǐng)域的用戶提供端到端的大數(shù)據(jù)存儲解決方案?!苯?jīng)寧說,“雖然我們已在大數(shù)據(jù)存儲市場上取得了豐碩的成果,但是我們更看好大數(shù)據(jù)存儲市場未來的潛力,因為其增長速度遠(yuǎn)高于傳統(tǒng)存儲市場?!?/p>
更好的兼容 更經(jīng)濟的交付
關(guān)鍵字:“數(shù)字湖南”;DAS;NAS;SAN;虛擬化存儲
0 前言
地理空間框架是“數(shù)字湖南”的核心、重要基礎(chǔ)與支撐。而地理空間框架由地理信息數(shù)據(jù)組成;因此,解決了地理信息數(shù)據(jù)的存儲問題,也就解決了“數(shù)字湖南”數(shù)據(jù)的存儲問題。地理信息數(shù)據(jù)的主要特點是:數(shù)據(jù)量龐大且增長迅速;數(shù)據(jù)格式繁多且不易轉(zhuǎn)換;數(shù)據(jù)安全性要求高。為滿足以上要求,地理信息數(shù)據(jù)的存儲必須做到:足夠的數(shù)據(jù)存儲容量;較高的數(shù)據(jù)傳輸效率;兼容異構(gòu)平臺;可充分利用局域網(wǎng)內(nèi)各種存儲設(shè)備,減少數(shù)據(jù)多重拷貝;簡化數(shù)據(jù)備份與管理,提高數(shù)據(jù)備份、恢復(fù)效率;最重要的是高可靠的數(shù)據(jù)安全特性。
為了更好地管理快速增長的地理信息數(shù)據(jù),需要對“數(shù)字湖南”數(shù)據(jù)中心的網(wǎng)絡(luò)存儲系統(tǒng)進(jìn)行統(tǒng)籌規(guī)劃;考慮未來技術(shù)發(fā)展趨勢和快速增加的數(shù)據(jù)量,應(yīng)以滿足“十二五”期間的數(shù)據(jù)存儲管理需求為目標(biāo),進(jìn)行數(shù)據(jù)中心網(wǎng)絡(luò)存儲方案設(shè)計。本文在研究當(dāng)前存儲主要技術(shù)、發(fā)展趨勢以及地理信息數(shù)據(jù)存儲現(xiàn)狀的基礎(chǔ)上,制定了“數(shù)字湖南”數(shù)據(jù)中心的內(nèi)網(wǎng)數(shù)據(jù)網(wǎng)絡(luò)存儲方案。
1 當(dāng)前主流存儲技術(shù)
目前,應(yīng)用較多的網(wǎng)絡(luò)化存儲系統(tǒng)主要是表1所列的三種:
從表1可以看出,只有SAN較適用于地理信息數(shù)據(jù)的存儲。
虛擬化存儲和云存儲是未來存儲技術(shù)的發(fā)展方向。存儲虛擬化是為存儲用戶提供統(tǒng)一的虛擬存儲池;即將品牌、級別不同且分散的存儲產(chǎn)品統(tǒng)一到一個(或幾個)大的存儲池下,用戶看見的不再是孤立的、分散的系統(tǒng),而是一個統(tǒng)一的整體;它方便用戶更好地使用存儲資源,提高存儲資源利用效率。虛擬化存儲是提高網(wǎng)絡(luò)存儲系統(tǒng)可管理性的核心技術(shù)之一,也是目前研究的熱點。目前主要有以下三種虛擬化存儲技術(shù):
由表2可見由于基于主機和基于存儲的方法對初建者吸引力最大;但兼容性差?;诼酚善骰蚪粨Q機的方法更為適合于互操縱性要求高的企業(yè);前者具有更高可擴充性。
目前,云存儲由于安全性遠(yuǎn)遠(yuǎn)達(dá)不到地理信息數(shù)據(jù)的保密要求,故不予考慮。
2 數(shù)據(jù)中心數(shù)據(jù)存儲方案設(shè)計
現(xiàn)以某地理信息中心為例設(shè)計數(shù)據(jù)存儲方案。
2.1 數(shù)據(jù)中心數(shù)據(jù)存儲需求
該中心2001年建成了采用DAS方式連接的數(shù)據(jù)存儲系統(tǒng),數(shù)據(jù)容量為1.5TB。雖然數(shù)據(jù)存儲系統(tǒng)經(jīng)過幾次升級擴容,存儲容量擴大到10TB以上,但仍為DAS連接;無法滿足中心的數(shù)據(jù)存儲備份需求。主要存在以下問題:存儲總?cè)萘刻?;?shù)據(jù)的安全性、一致性和完整性面臨多方威脅;存儲資源浪費現(xiàn)象嚴(yán)重;網(wǎng)速太慢。
因此,數(shù)據(jù)中心數(shù)據(jù)存儲系統(tǒng)建成后,應(yīng)具備如下性能:數(shù)據(jù)容量60TB;采用易管理、省投資、可擴展的集中化存儲架構(gòu);較高的存儲備份速度;較好的可管理性;高可靠性;完善的災(zāi)難恢復(fù)計劃;連續(xù)地提供數(shù)據(jù)查詢、檢索和分析、計算的功能。
2.2 存儲技術(shù)選型
通過第2節(jié)的分析已確定了SAN技術(shù)比較適合地理信息中心的數(shù)據(jù)存儲備份,下表對IP-SAN與FC-SAN兩種技術(shù)進(jìn)行了一般性比較。
從表3中可以看出FC-SAN目前比較適合地理信息數(shù)據(jù)存儲。
從第2節(jié)中已知基于交換機的虛擬化技術(shù)與其他虛擬化技術(shù)相比具有較高的安全性、易使用、設(shè)備便宜,較好的互操作性,較易實現(xiàn)故障接替等優(yōu)點,故采用FC-SAN+基于交換機的虛擬化存儲構(gòu)成池化存儲是該地理信息中心的最佳數(shù)據(jù)存儲方案。
2.3 數(shù)據(jù)存儲架構(gòu)
數(shù)據(jù)存儲結(jié)構(gòu)拓?fù)鋱D如下:
3 方案評價
該方案的特點是:
1.采用基于交換機的虛擬化存儲;采用了性價比較高的硬件設(shè)備,故成本較低。
2.存儲網(wǎng)絡(luò)采用了FC-SAN,傳輸速率較高。
3.采用了虛擬化存儲技術(shù),整個存儲系統(tǒng)整合為一個存儲池,設(shè)備利用率高。4.采用了合理的RAID技術(shù),提高了磁盤容錯能力。
4 不足之處是沒有備份和容災(zāi)。
綜上所述,該方案提供了一個可行的高性能、任務(wù)關(guān)鍵性數(shù)據(jù)存儲中心環(huán)境。
“私有云”是針對處于防火墻內(nèi)的有限人群提供托管服務(wù)專有計算網(wǎng)絡(luò)架構(gòu),其優(yōu)點是:構(gòu)筑在防火墻后,數(shù)據(jù)安全性較高、服務(wù)質(zhì)量穩(wěn)定,不影響現(xiàn)有IT管理的流程,大大降低了成本。 隨著云存儲技術(shù)的不斷發(fā)展,未來“數(shù)字湖南”數(shù)據(jù)中心數(shù)據(jù)架構(gòu)存儲可以考慮采用“私有云”方式。
參考文獻(xiàn):
[1]時成閣,《網(wǎng)絡(luò)存儲導(dǎo)論》[M],華東大學(xué)出版社,2007-1.
在如今的企業(yè)中,應(yīng)用得最多的數(shù)據(jù)存儲解決方案主要包括直連式存儲(DAS)、存儲區(qū)域網(wǎng)絡(luò)(SAN)、網(wǎng)絡(luò)接入存儲(NAS)等幾種。其中,SAN采用光纖通道(Fibre Channel)技術(shù),通過光纖通道交換機連接存儲陣列和服務(wù)器主機,建立專用于數(shù)據(jù)存儲的區(qū)域網(wǎng)絡(luò)。而NAS則采用網(wǎng)絡(luò)(TCP/IP、ATM、FDDI)技術(shù),通過網(wǎng)絡(luò)交換機連接存儲系統(tǒng)和服務(wù)器主機,建立專用于數(shù)據(jù)存儲的存儲私網(wǎng)。
非結(jié)構(gòu)化數(shù)據(jù)帶來的難題
目前,SAN、NAS是應(yīng)用的較廣泛的數(shù)據(jù)存儲技術(shù)。然而,現(xiàn)在的非結(jié)構(gòu)化數(shù)據(jù)越來越多,導(dǎo)致現(xiàn)在的存儲系統(tǒng)在管理上越來越難了。
由于很多非結(jié)構(gòu)化的數(shù)據(jù)呈爆炸性、無管理的增長,文件虛擬化目前非常流行。這些數(shù)據(jù)不能放在數(shù)據(jù)庫中進(jìn)行管理,例如郵件、Word文件和音頻視頻文件等。并且企業(yè)也沒有投資成百上千的美元去購置成百上千的NAS設(shè)備以及PB級別的磁盤存儲來管理這些數(shù)據(jù)。
這些數(shù)據(jù)正以無法遏制的速度不斷增長,企業(yè)只好花更多的人力去管理它們。而這些數(shù)據(jù)一開始就創(chuàng)建的亂七八糟,隨處可見,這導(dǎo)致了當(dāng)前的數(shù)據(jù)存儲解決方案難以管理它們。
在這種情況下,Acopi、博科等廠商提出了文件虛擬化解決方案。文件虛擬化技術(shù)能夠隱藏所有你的物理設(shè)備,通過子物理設(shè)備上面構(gòu)建一個新的層,本質(zhì)上也就是為那些NAS設(shè)備提供一個對外的邏輯視圖。所以你可以非常有效地管理你的NAS設(shè)備,讓一切變得非常容易。
使用文件虛擬化的另一個原因是存儲的需求繼續(xù)不斷的擴大,我們需要找到一個非常有效的方式幫助管理員來管理這些數(shù)據(jù)。并且更為關(guān)鍵的是,哪些數(shù)據(jù)能夠管理?多少數(shù)據(jù)需要管理?這兩者之間存在著很大的差異。而這種差異也將變得越來越大并產(chǎn)生更壞的結(jié)果。
理解存儲虛擬化
虛擬化是當(dāng)前討論最多的技術(shù)之一,服務(wù)器虛擬化已經(jīng)得到了很多企業(yè)的認(rèn)同,如今,虛擬化已經(jīng)進(jìn)入存儲領(lǐng)域。
但存儲虛擬化是IT業(yè)的一個奇怪的現(xiàn)象。人們總是不停的提到它,但是準(zhǔn)確的說,虛擬化到底是什么,它的真正功能是什么,還是有很多疑問。
根據(jù)調(diào)查公司Freeform Dynamics在英國最近所進(jìn)行的一次定向企業(yè)的調(diào)查,對于服務(wù)器虛擬化,用戶還是有很高的熱情,而且清楚明白如何部署以及它所帶來的變化。但是到了存儲虛擬化,只有一半的報告回答者可以非常清楚或部分清楚存儲虛擬化的概念。
有一種看法是:存儲虛擬化指在現(xiàn)有的存儲陣列上增加虛擬層的做法來實現(xiàn)。在現(xiàn)在的應(yīng)用中,例如文件系統(tǒng)和存儲陣列,其實就是虛擬化的例子。
其實,存儲虛擬化最重要的一個分類概念在于:將數(shù)據(jù)文件管理系統(tǒng)與存儲介質(zhì)分離出來,從而實現(xiàn)數(shù)據(jù)的統(tǒng)一存儲管理,這就是我們提到的文件虛擬化。
存儲廠商與網(wǎng)絡(luò)廠商群較勁
由上分析可見,文件虛擬化系統(tǒng)可能給當(dāng)前的存儲系統(tǒng)帶來革命性的變化,這是一個潛在的龐大的市場。因此,不少廠商介入了這個領(lǐng)域。
介入文件虛擬化領(lǐng)域的廠商主要分為兩類:一類是原本為存儲設(shè)備的供應(yīng)商,例如博科等,另一類就是思科、F5等網(wǎng)絡(luò)設(shè)備供應(yīng)商。
例如不久前,博科(Brocade)宣布與日立數(shù)據(jù)系統(tǒng)公司(HDS)簽署轉(zhuǎn)售協(xié)議, HDS 將轉(zhuǎn)售 Brocade StorageX 文件虛擬化管理軟件解決方案。根據(jù)此項協(xié)議,Brocade StorageX 將為 HDS 的客戶提供業(yè)界領(lǐng)先的文件數(shù)據(jù)復(fù)制和遷移解決方案,實現(xiàn)對多重命名空間的集中管理。該創(chuàng)新解決方案致力于應(yīng)對目前分布式異構(gòu)環(huán)境中最迫切需要解決的文件數(shù)據(jù)管理挑戰(zhàn),其中包括整合、遠(yuǎn)程辦公數(shù)據(jù)管理、業(yè)務(wù)連續(xù)性和災(zāi)難恢復(fù)。
另外,思科收購了另一家文件虛擬化廠商:NeoPath,以此進(jìn)入文件虛擬化市場。而F5則收購了Acopia,從而進(jìn)入了數(shù)據(jù)存儲領(lǐng)域。
思科、F5等網(wǎng)絡(luò)設(shè)備廠商進(jìn)軍存儲領(lǐng)域,給博科、EMC等老牌存儲廠商帶來了巨大的沖擊。有業(yè)內(nèi)人士認(rèn)為,博科正努力抵擋思科在SAN市場對其發(fā)起的挑戰(zhàn),并且在虛擬文件存儲市場中正占據(jù)著主導(dǎo)地位。然而,思科的力量是極其強大的,博科等存儲廠商必然受到嚴(yán)重的挑戰(zhàn)。
存儲設(shè)備廠商和網(wǎng)絡(luò)設(shè)備廠商都看中了這個市場,由此可見,文件虛擬化市場的確是未來的發(fā)展趨勢。
文件虛擬化的特征
不知現(xiàn)在你對存儲虛擬化結(jié)構(gòu)清楚了沒有。
現(xiàn)在,我們再形象地解釋一下:存儲虛擬化方案主要包括兩個部分,首先就是硬件存儲介質(zhì),例如EMC等供應(yīng)商提供磁盤機等;另一方面,就是文件管理系統(tǒng),這是獨立與存儲介質(zhì)的存儲網(wǎng)絡(luò)管理系統(tǒng),通過于存儲介質(zhì)的分離,實現(xiàn)虛擬化的管理、數(shù)據(jù)的集中管理,并且?guī)砑嫒菪?、低成本等?yōu)勢。
要知道,此前的文件管理系統(tǒng)往往與存儲介質(zhì)聯(lián)合在一起,并且通常由某一個廠商提供,在這種情況下,就帶來了兼容性、技術(shù)高成本、重復(fù)投資等多種問題,這也是當(dāng)前存儲系統(tǒng)價格居高不下的主要原因。
文件虛擬化平臺在行業(yè)標(biāo)準(zhǔn)的服務(wù)器上運行,為在大型企業(yè)中跨多個分布式文件虛擬化系統(tǒng)進(jìn)行管理的管理策略提供了基礎(chǔ),因而顯著簡化了部署和操作,減少了錯誤,并降低了運營成本。
此外,文件虛擬化還有另外一個重要的特征:對數(shù)據(jù)進(jìn)行熱遷移。
如果能夠使各公司將工作中的虛擬機從一個物理服務(wù)器移動到另一個物理服務(wù)器上,無需進(jìn)行中斷操作,這將極大地減少管理時間和成本,并保證了企業(yè)的關(guān)鍵應(yīng)用的業(yè)務(wù)連續(xù)性。
你可以這樣想像:一條生產(chǎn)彩電的生產(chǎn)線,斷電并啟動一次,需要至少半個小時的時間,而三峽水電站如果因為停止發(fā)電半小時間,這將帶來多大的機會損失?
為了解決這個問題,文件虛擬化解決方案提供了虛擬化快照功能。它提供了異構(gòu)(即采用多個不同供應(yīng)商產(chǎn)品的環(huán)境)虛擬化快照的企業(yè)級實施。快照是按照數(shù)據(jù)在某個特定時間點的原樣復(fù)制品。借助這個新功能,管理員能夠立即跨多個異構(gòu)文件管理程序創(chuàng)建快照。然后,用戶和應(yīng)用程序能夠在諸如備份、復(fù)制和恢復(fù)意外刪除或修改的文件以及目錄等多種應(yīng)用中,直接訪問這些聯(lián)合快照。虛擬化快照創(chuàng)建過程對于終端用戶工作流而言是透明的。如果沒有這項功能,快照就不能跨多個異構(gòu)文件管理程序。
數(shù)據(jù)中心虛擬化戰(zhàn)略
一、傳統(tǒng)的XBRL數(shù)據(jù)存儲方式
現(xiàn)階段我國常見的XBRI數(shù)據(jù)存儲方式主要包括:文件系統(tǒng)存儲、關(guān)系數(shù)據(jù)庫存儲、原生數(shù)據(jù)庫存儲。目前運用最為廣泛的XBRL數(shù)據(jù)存儲方式是以關(guān)系數(shù)據(jù)庫存儲XBRL文檔,可以分為CLOB字段存入關(guān)系數(shù)據(jù)庫和拆分方式存入關(guān)系數(shù)據(jù)庫,其中以拆分方式存入關(guān)系數(shù)據(jù)庫最為常見。以拆分方式存入即將XBRL文檔分解映射到關(guān)系數(shù)據(jù)庫的多張關(guān)系型表中。采用該種方式保證了數(shù)據(jù)的安全性和完整性,且易于數(shù)據(jù)查詢、挖掘和數(shù)據(jù)的深加工,是目前廣泛應(yīng)用的XBRL數(shù)據(jù)存儲方案。但此種方式也存在弊端:一是難以映射復(fù)雜的XBRL實例文檔,且其維護(hù)極其復(fù)雜。二是對于XBRL文檔完整性的體現(xiàn)蕩然無存。三是這種分解的方式會耗費數(shù)據(jù)庫服務(wù)器的大量CPU和內(nèi)存資源。四是這種方式破壞XBRL文檔內(nèi)部的關(guān)聯(lián)關(guān)系,容易造成XBRL數(shù)據(jù)失真。盡管以關(guān)系數(shù)據(jù)庫存儲技術(shù)進(jìn)行XBRL數(shù)據(jù)存儲的存儲方案,在目前市場上有著堅實的地位和強大的軟件支持,然而因信息管理技術(shù)不斷進(jìn)步而涌現(xiàn)的諸多問題,將會是關(guān)系型數(shù)據(jù)庫所不能承受的生命之重。
二、新一代XBRL數(shù)據(jù)存儲方式――混合數(shù)據(jù)庫存儲
在關(guān)系型數(shù)據(jù)庫所主宰的堅固世界正在逼近變革的臨界點上,根據(jù)“螺旋式”上升的法則,混合型數(shù)據(jù)庫孕育而生。本文擬將基于混合數(shù)據(jù)庫,就一個商品銷售信息的存儲為例,從下述方面來探討混合數(shù)據(jù)庫存儲技術(shù)所具備的優(yōu)質(zhì)功能特性。(1)邏輯存儲。創(chuàng)建同時包含傳統(tǒng)SQL數(shù)據(jù)類型列和新的XBRL數(shù)據(jù)類型列的表。列表沒有制定XML數(shù)據(jù)的內(nèi)部結(jié)構(gòu),原因是XBRL文檔是自我描述的,混合型數(shù)據(jù)庫對XBRL數(shù)據(jù)存儲時,只需驗證其是否符合XBRL分類標(biāo)準(zhǔn)及規(guī)范。這種寬松的方式給用戶提供了很強的靈活性,更容易存儲包含不同屬性和內(nèi)部結(jié)構(gòu)的XBRL文檔集合,從而保證了XBRL數(shù)據(jù)的完整性與準(zhǔn)確性。(2)物理存儲。以樹和節(jié)點作為模型來存儲和處理XBRL數(shù)據(jù),采用經(jīng)過解析的格式來反映原始XBRL文檔的層次結(jié)構(gòu),混合型數(shù)據(jù)庫將用模式類型信息對XML層次結(jié)構(gòu)中的所有節(jié)點進(jìn)行標(biāo)注,從而保證了XBRL數(shù)據(jù)的內(nèi)部網(wǎng)狀關(guān)聯(lián)以及XBRL數(shù)據(jù)的層次性、多維度性。(3)索引。采用的是SQL DDL語句創(chuàng)建XBRL索引。該索引方式顯著提高了數(shù)據(jù)庫查詢和應(yīng)用程序的性能,減少為返回查詢結(jié)果集而必須讀取的數(shù)據(jù)量,同時具有標(biāo)示性,可以確保數(shù)據(jù)的準(zhǔn)確性。(4)查詢語言。程序員可以使用SQL或XQuery搜索數(shù)據(jù),應(yīng)用程序可以自由地使用這兩種語言的語句,而且一個查詢語句可以結(jié)合使用SQL和XQuery。此外,混合型數(shù)據(jù)庫有兩個查詢語言分析器:一個用于XQuery,另一個用于SQL。這兩種語言編寫的查詢都能高效地重寫查詢操作符以及選擇低成本的數(shù)據(jù)訪問計劃。
混合數(shù)據(jù)庫的核心價值體現(xiàn)在,能將關(guān)系性數(shù)據(jù)庫引擎和XML數(shù)據(jù)庫引擎連接起來,采用“雙核”引擎機制,除了支持表數(shù)據(jù)模型之外,還支持XML文檔的層次化數(shù)據(jù)模型,使用戶能夠同時管理好兩部分的數(shù)據(jù)內(nèi)容。同時,使用SQL和XQuery來查詢和處理這兩種形式的數(shù)據(jù),既保留了關(guān)系型數(shù)據(jù)庫的優(yōu)勢,又融入了XML對復(fù)雜數(shù)據(jù)管理的層次性、靈活性。因此,可以得出結(jié)論,采用混合數(shù)據(jù)庫技術(shù)進(jìn)行XBRL數(shù)據(jù)存儲,是一種最為理想的XBRL數(shù)據(jù)存儲方案,將成為企業(yè)XBRL財務(wù)信息集成管理體系運用的核心關(guān)鍵技術(shù)。
三、企業(yè)級XBRL財務(wù)信息管理體系架構(gòu)
隨著我國企業(yè)會計準(zhǔn)則通用分類標(biāo)準(zhǔn)的公布,企事業(yè)單位大范圍采用XBRL技術(shù)將指日可待。在企業(yè)財務(wù)信息供應(yīng)鏈上,大部分?jǐn)?shù)據(jù)都是分布在不同部門和系統(tǒng)之中,從多數(shù)據(jù)源進(jìn)行信息集成的難度會隨著信息化發(fā)展而帶來的數(shù)據(jù)格式增多和數(shù)據(jù)量增大而迅猛增長。數(shù)據(jù)集成到財務(wù)報告的最終目標(biāo)是滿足使用者的需求,面對眾多的需求,財務(wù)報告要能實時的、準(zhǔn)確的、豐富的、全面的信息來幫助人們做出決策。設(shè)想是否存在這樣一個集成的、高效的財務(wù)信息管理系統(tǒng),它提供用戶集中地管理多數(shù)據(jù)源的財務(wù)報告能力,智能地獲取實時財務(wù)信息,來輔助商業(yè)決策以及金融監(jiān)管。本文就混合數(shù)據(jù)庫存儲技術(shù)探討的基礎(chǔ)上,構(gòu)建一種存儲優(yōu)化的XBRL財務(wù)信息管理體系,如圖1所示。
【關(guān)鍵詞】網(wǎng)絡(luò)數(shù)據(jù);存儲備份系統(tǒng);解決方案
隨著社會的發(fā)展,科技水平的提高,網(wǎng)絡(luò)技術(shù)應(yīng)用于各個領(lǐng)域,同時網(wǎng)絡(luò)結(jié)構(gòu)也趨于復(fù)雜,從而影響著網(wǎng)絡(luò)數(shù)據(jù)的安全與共享。網(wǎng)絡(luò)數(shù)據(jù)存儲備份系統(tǒng)要不斷完善與發(fā)展,才能適應(yīng)社會發(fā)展的需求。本文將通過對DAS、NAS與SAN技術(shù)的分析與研究,提出網(wǎng)絡(luò)數(shù)據(jù)存儲備份系統(tǒng)的解決方案。
一、DAS、NAS、SAN技術(shù)的概況
(一)DAS、NAS、SAN技術(shù)的涵義
DAS即直接附加存儲或磁盤陣列,DAS將直接連接在服務(wù)器或客戶端的數(shù)據(jù)存儲設(shè)備上,它的中心為服務(wù)器,通過服務(wù)器或客戶端實現(xiàn)存儲,主要是由硬件組成的。NAS即網(wǎng)絡(luò)附加存儲,NAS具有特殊性與獨立性等優(yōu)勢,它是一種專用的數(shù)據(jù)存儲服務(wù)器,它具備獨立的系統(tǒng)軟件,從而保證存儲的優(yōu)化,同時其具有共享功能,能夠提供跨平臺的文件。NAS的中心為數(shù)據(jù),通過存儲設(shè)備和服務(wù)器的分離,實現(xiàn)了對數(shù)據(jù)的集中管理,進(jìn)而利于寬帶的高效釋放。SAN即存儲局域網(wǎng),SAN是一種共用的、高速的專用存儲網(wǎng)絡(luò),其存儲設(shè)備主要分布在服務(wù)器的末端。SAN是一種專用的高速光纖網(wǎng)絡(luò),其光纖通道是由PRID陳列連接形成的,同時SAN的架構(gòu)需要專用的光纖交換機與集線器[1]。
(二)DAS、NAS、SAN技術(shù)的比較
關(guān)于DAS與NAS技術(shù)的比較主要表現(xiàn)在以下幾方面:在安裝方面,DAS的安裝相對復(fù)雜,一般情況下需要兩天時間;NAS的安裝相對便捷,通過獨立安裝,在十分鐘左右便可以完成。在文件共享方面,DAS不具備跨平臺文件共享的功能,因此,各個系統(tǒng)平臺的文件存儲需要分別進(jìn)行;NAS具備跨平臺文件共享的功能,因此可以實現(xiàn)文件共享。在操作系統(tǒng)方面,DAS不具備獨立的存儲操作系統(tǒng),其應(yīng)用依賴于服務(wù)器或客戶端,因此,DAS極易造成網(wǎng)絡(luò)的癱瘓與數(shù)據(jù)的丟失;NAS具備獨立的存儲操作系統(tǒng),從而能夠保證其寬帶的釋放,利于網(wǎng)絡(luò)的正常運行。在存儲數(shù)據(jù)結(jié)構(gòu)方面,DAS的數(shù)據(jù)存儲模式相對分散,因此,不利于網(wǎng)絡(luò)管理人員的管理,同時也增加了維護(hù)的費用;NAS的數(shù)據(jù)存儲模式相對集中,因此,其便于網(wǎng)絡(luò)管理人員對數(shù)據(jù)的集中管理,其維護(hù)的成本也相對較少。關(guān)于NAS與SAN技術(shù)的比較主要體現(xiàn)在以下幾方面:在設(shè)計理念方面,NAS擁有專用的數(shù)據(jù)存儲設(shè)備,同時可以直接聯(lián)網(wǎng),是一項獨立的系統(tǒng)存儲平臺;SAN需要存儲在局域網(wǎng),不具備獨立的設(shè)備。在安裝方面,NAS安裝十分便捷,即插即用;SAN的安裝需要在服務(wù)器或存儲設(shè)備上添加光纖網(wǎng)卡。在文件共享方面,NAS具備跨平臺文件共享的功能,因此可以實現(xiàn)文件共享;SAN具有獨立的數(shù)據(jù)存儲池,因此,不同系統(tǒng)平臺的數(shù)據(jù)可以在同一存儲設(shè)備中進(jìn)行存儲。在存儲距離方面,NAS可以滿足長距離、不同區(qū)域數(shù)據(jù)存儲的需求;SAN的存儲距離由光纖傳輸距離決定,因此,SAN可以進(jìn)行短距離的數(shù)據(jù)存儲。
二、網(wǎng)絡(luò)數(shù)據(jù)存儲備份系統(tǒng)的解決方案
網(wǎng)絡(luò)數(shù)據(jù)存儲備份系統(tǒng)采用NAS存儲技術(shù),其具有以下特點:網(wǎng)絡(luò)快,其網(wǎng)絡(luò)訪問為雙千兆以太網(wǎng);容量大,其容量為4U高度和10顆熱插拔的硬盤;實現(xiàn)了文件共享,并可以跨平臺、跨主機;安全性,其具有權(quán)限安全管理功能,并能夠?qū)ο到y(tǒng)進(jìn)行全天候的監(jiān)控。
(一)NAS的系統(tǒng)存儲
在E-mail存儲方面,其系統(tǒng)存儲完全能夠滿足萬人用戶的需求,NAS在E-mail存儲中其容量可以達(dá)到200GB。在光盤數(shù)據(jù)下載方面,NAS的數(shù)據(jù)傳遞可以滿足100個并發(fā)的需求。
(二)NAS的系統(tǒng)安裝與維護(hù)
在硬件安裝方面,NAS的系統(tǒng)安裝可以保持原有網(wǎng)絡(luò)不變,將其連接到網(wǎng)絡(luò)的交換機上,在連接電源便實現(xiàn)了安裝;在軟件安裝方面,NAS的系統(tǒng)安裝可以在局域網(wǎng)的服務(wù)器上進(jìn)行安裝,在軟件運行后,NAS將被自動搜索,再打開設(shè)置窗口,便可以對NAS進(jìn)行設(shè)置。同時,NAS系統(tǒng)中可以安裝防病毒的相關(guān)軟件,進(jìn)而保證其數(shù)據(jù)的安全性[2]。
(三)本方案的優(yōu)點
本方案有眾多的優(yōu)點,主要優(yōu)點如下:
應(yīng)用了負(fù)載均衡技術(shù),NAS根據(jù)并發(fā)量的不可控性,應(yīng)用了負(fù)載均衡技術(shù),從而數(shù)據(jù)的讀取由負(fù)載均衡軟件控制,并提升了并發(fā)訪問的速度。
NAS自身的優(yōu)勢,如:安全性、便捷性與擴展性等,NAS可以即插即用,其安裝十分便捷,其管理不需要專業(yè)的人員,在應(yīng)用過程中,減輕了服務(wù)器的負(fù)荷,保證了網(wǎng)絡(luò)的高效,其安全性與共享性能夠保證數(shù)據(jù)的安全,即便網(wǎng)絡(luò)存在故障。
具有較快的響應(yīng)與較多的并發(fā)用戶。NAS的獨立性與優(yōu)化性,主要體現(xiàn)在其系統(tǒng)存儲平臺的獨立與存儲操作系統(tǒng)的優(yōu)化,從而NAS利用網(wǎng)絡(luò)數(shù)據(jù)傳輸率的提升,利于用戶響應(yīng)時間的降低。在并發(fā)用戶較多的情況下,NAS的性能愈加突顯,它能夠滿足較多的并發(fā)用戶的需求。
實現(xiàn)了跨平臺的文件共享。NAS的跨平臺文件共享,節(jié)約了用戶的費用,可以對不同文件格式的資料進(jìn)行存儲,同時也可以在不同的系統(tǒng)上對數(shù)據(jù)進(jìn)行訪問。
同時具有便捷性與安全性。NAS在安裝與維修方面十分便捷,不僅不需要輔助的軟件,還不需要網(wǎng)絡(luò)服務(wù)的停止,并且在安裝時,不需要改變網(wǎng)絡(luò)架構(gòu),進(jìn)而利于用戶投資與成本的控制。NAS可以保證數(shù)據(jù)的完整性與安全性,主要是將源數(shù)據(jù)變成了日志文件,從而利于文件系統(tǒng)的恢復(fù)[3]。
總結(jié):綜上所述,網(wǎng)絡(luò)數(shù)據(jù)存儲備份系統(tǒng)的完善直接關(guān)系著系統(tǒng)數(shù)據(jù)的安全,文中分析了DAS、NAS、SAN存儲技術(shù),其中NAS技術(shù)具有諸多的優(yōu)勢,因此,網(wǎng)絡(luò)數(shù)據(jù)存儲備份系統(tǒng)解決方案中運用了NAS技術(shù),形成了跨平臺的網(wǎng)絡(luò)數(shù)據(jù)存儲系統(tǒng),這一方案具有實用性、可靠性與擴展性等,不僅控制了成本,還提高了網(wǎng)絡(luò)的性能。
參考文獻(xiàn):
[1]賴晨捷.華能太倉電廠數(shù)據(jù)存儲備份系統(tǒng)解決方案探討[J].電力技術(shù),2010,2(04):26-27.
關(guān)鍵詞:大數(shù)據(jù) 存儲行業(yè)環(huán)境 戰(zhàn)略分析
引言
大數(shù)據(jù)時代,呈爆炸性增長的數(shù)據(jù)規(guī)模,可以直接決定企業(yè)發(fā)展的未來。一方面,數(shù)據(jù)爆炸性增長可能給企業(yè)帶來問題和隱患。比如,如何保證數(shù)據(jù)的絕對安全和可靠?隨著越來越多的應(yīng)用信息轉(zhuǎn)變?yōu)閿?shù)據(jù)進(jìn)行存儲和處理,數(shù)據(jù)的重要性和價值也越來越高,這也使得企業(yè)難以容忍數(shù)據(jù)的損壞或丟失。數(shù)據(jù)信息的毀壞和丟失會給企業(yè)帶來不可估量的損失(Patterson,D.A.,2002)。數(shù)據(jù)的重要性和價值對于諸如廣電行業(yè)企業(yè)這種有海量數(shù)據(jù)存儲需求的客戶來說,體現(xiàn)得更為明顯。另一方面,大數(shù)據(jù)也可以為企業(yè)帶來正面收益,比如從價值密度低的海量數(shù)據(jù)中,通過數(shù)據(jù)分析和數(shù)據(jù)挖掘技術(shù),迅速提取更有價值的數(shù)據(jù),用于提高企業(yè)自身的核心競爭力。在這一背景下,一些存儲行業(yè)企業(yè)紛紛展開兼并收購,提升綜合能力。如存儲行業(yè)領(lǐng)導(dǎo)廠商VMware公司(NYSE:VMW)先后收購了開源Java開發(fā)商SpringSource、關(guān)系型和非關(guān)系型分布式數(shù)據(jù)管理系統(tǒng)廠商GemStone、開源軟件開發(fā)商WaveMaker、企業(yè)社交協(xié)作解決方案提供商Socialcast、PPT在線制作服務(wù)提供商 SlideRocket,并對其進(jìn)行整合,成為提供大數(shù)據(jù)解決方案的服務(wù)提供商。IBM也在大數(shù)據(jù)領(lǐng)域展開了連環(huán)收購,先后收購銷售數(shù)據(jù)分析公司Varicent和企業(yè)搜索和導(dǎo)航軟件提供商Vivisimo,將大數(shù)據(jù)的搜索和分析擴展到Hadoop之外的傳統(tǒng)遺留應(yīng)用和數(shù)據(jù)倉庫。
存儲行業(yè)產(chǎn)業(yè)環(huán)境現(xiàn)狀
產(chǎn)業(yè)環(huán)境分析體現(xiàn)了產(chǎn)業(yè)內(nèi)的競爭激烈程度和企業(yè)的最終獲利潛力。波特認(rèn)為五種力量狀況及其綜合強度決定行業(yè)環(huán)境:新進(jìn)入者的威脅、供方的討價還價能力、買方的討價還價能力、替代品的威脅及現(xiàn)有競爭者之間的競爭。就存儲行業(yè)而言,本文用五力模型對其行業(yè)環(huán)境進(jìn)行分析(見圖1):
(一)新進(jìn)入者的威脅
目前我國存儲產(chǎn)業(yè)的潛在競爭者主要來自于IBM、EMC和VMware等技術(shù)和資金實力雄厚的跨國公司,基于核心傳統(tǒng)的存儲設(shè)備技術(shù)能力,通過內(nèi)部研發(fā)和兼并收購等已經(jīng)具備為客戶提供綜合化存儲解決方案的能力。另外,華為、藍(lán)汛科技、永新視博、同洲、索貝、新奧特、數(shù)碼視訊等公司也紛紛涉足大數(shù)據(jù)領(lǐng)域,推出了針對廣電行業(yè)應(yīng)用的產(chǎn)品與解決方案。以上行業(yè)新進(jìn)入者對現(xiàn)有存儲企業(yè)帶來了較高威脅,雖然存儲產(chǎn)業(yè)具有一定的技術(shù)和資金壁壘,對于中小企業(yè)進(jìn)入障礙較高,但對于這些技術(shù)研發(fā)具有優(yōu)勢的企業(yè),這些壁壘不足以形成障礙。所以,新進(jìn)入者威脅是需要充分考慮的要素。為獲得可持續(xù)發(fā)展,現(xiàn)有存儲企業(yè)必須提升研發(fā)能力,以客戶需求為中心,結(jié)合云計算為用戶提供更多創(chuàng)新的業(yè)務(wù)體驗,還可通過構(gòu)建業(yè)務(wù)研發(fā)云平臺,降低新業(yè)務(wù)開發(fā)成本,加快新業(yè)務(wù)推出速度,為贏得市場先機奠定基礎(chǔ)。
(二)替代產(chǎn)品的威脅
存儲行業(yè)企業(yè)提供的是存儲設(shè)備產(chǎn)品和專業(yè)化服務(wù),諸如廣電和證券行業(yè)等具有海量數(shù)據(jù)存儲需求的企業(yè),由于技術(shù)的局限很難選擇自營的形式為自身提品和服務(wù)。當(dāng)數(shù)據(jù)量達(dá)到一定程度時,只能選擇專業(yè)從事存儲的企業(yè)提品或服務(wù)??梢?,存儲行業(yè)企業(yè)的替代性較低。
(三)供應(yīng)商的討價還價能力
存儲行業(yè)的供應(yīng)商包括存儲基礎(chǔ)零部件設(shè)備供應(yīng)商和數(shù)據(jù)管理服務(wù)供應(yīng)商,大部分是IT制造行業(yè)企業(yè),供應(yīng)商的討價還價能力決定于其規(guī)模、技術(shù)實力和專業(yè)性。如果業(yè)務(wù)量大、技術(shù)能力強、專業(yè)服務(wù)水準(zhǔn)高,討價還價能力就相對較強。
(四)買方的討價還價能力
中國存儲產(chǎn)業(yè)集中度較高,能提供海量數(shù)據(jù)存儲設(shè)備和服務(wù)的國內(nèi)企業(yè)并不多。相對于國外企業(yè)來講,國內(nèi)企業(yè)的產(chǎn)品和服務(wù)具有價格優(yōu)勢,國外企業(yè)提供專業(yè)化產(chǎn)品和服務(wù)水準(zhǔn)較高,客戶方的討價還價能力不高,一般根據(jù)成本節(jié)約的目標(biāo)選擇國內(nèi)或國外企業(yè)的產(chǎn)品。
(五)現(xiàn)有競爭者之間的競爭
存儲行業(yè)競爭雖然激烈,但是主要依靠品牌、本地化支持、技術(shù)和性價比等因素的良性競爭。一方面,在高端市場,國外廠商依靠品牌和技術(shù)優(yōu)勢占據(jù)了一部分對價格不敏感的大客戶,但是由于其本地化支持程度較低,后期發(fā)生的服務(wù)成本較高,很多企業(yè)選擇國內(nèi)存儲企業(yè)的產(chǎn)品和服務(wù)。一部分國內(nèi)存儲行業(yè)企業(yè)依靠強大的本地化支持,依靠性能和價格兩方面競爭;另一部分企業(yè)通過拓展增值型服務(wù)和提升服務(wù)水準(zhǔn),拓展新服務(wù)幫助客戶企業(yè)提升競爭力并創(chuàng)造價值來獲取競爭地位。通過以上分析,可見存儲行業(yè)是個具有吸引力的朝陽產(chǎn)業(yè),服務(wù)市場的需求和利潤空間較大。
大數(shù)據(jù)時代存儲行業(yè)的機遇與挑戰(zhàn)
大數(shù)據(jù)時代的來臨也將會給廣電、銀行、證券等有海量數(shù)據(jù)存儲需求的行業(yè)帶來巨大的價值和影響,這些存儲產(chǎn)業(yè)鏈下游的客戶企業(yè)必定會更加依賴于大數(shù)據(jù)的發(fā)展,這為存儲行業(yè)提供了大量的潛在需求和發(fā)展機遇。另一方面存儲行業(yè)企業(yè)更應(yīng)該明確客戶需求和清楚自身的優(yōu)勢和劣勢,確保從容應(yīng)對大數(shù)據(jù)時代的來臨,并充分利用大數(shù)據(jù)時展帶來的能量,提升和深耕自身能力,建立可持續(xù)發(fā)展的競爭優(yōu)勢(張帥,2000)。以新聞廣電這一典型存儲行業(yè)客戶為例,存在的挑戰(zhàn)主要表現(xiàn)在:第一,高性能和低延時。信息流、工作流的整合對性能要求日益提高。數(shù)據(jù)傳輸?shù)膶崟r性要求高,如節(jié)目播出流暢、不丟幀,要求數(shù)據(jù)必須在限定時間以限定的形式和流量提供;第二,大容量和高可靠性。行業(yè)的數(shù)據(jù)存儲若以音頻視頻流為主,往往一個文件即高達(dá)數(shù)十GB,清晰度提高,使得數(shù)據(jù)量大幅增長,另外數(shù)據(jù)(音視頻資料)這種核心資源,具有珍貴的歷史意義和保留價值,若發(fā)生丟失會給電視臺、網(wǎng)絡(luò)公司帶來巨大損失;第三,節(jié)約成本。由于設(shè)備和服務(wù)的分散采購,給客戶方帶來了額外的交易成本支出,如何為客戶節(jié)約交易流程復(fù)雜帶來的成本,提升綜合服務(wù)能力是存儲行業(yè)企業(yè)面臨的又一挑戰(zhàn)。
大數(shù)據(jù)時代存儲行業(yè)發(fā)展戰(zhàn)略
(一)推進(jìn)增值服務(wù)管理,從存儲設(shè)備提供商向數(shù)據(jù)解決方案的服務(wù)提供商轉(zhuǎn)型
在大數(shù)據(jù)時代背景下,客戶需求和科技發(fā)展相互結(jié)合,相互促進(jìn),一些客戶自身具備豐富的業(yè)務(wù)類型和應(yīng)用場景,具備豐富的實戰(zhàn)經(jīng)驗,可以為大數(shù)據(jù)的方案實施提供寶貴的信息基礎(chǔ);而大數(shù)據(jù)領(lǐng)域的科技發(fā)展則可以為客戶企業(yè)提供高效、安全、合理的技術(shù)平臺,最大程度滿足企業(yè)需求。例如,廣電行業(yè)對大數(shù)據(jù)應(yīng)用存在著諸多顯見或潛在需求,伴隨著大數(shù)據(jù)技術(shù)的飛速發(fā)展,廣電行業(yè)的大數(shù)據(jù)應(yīng)用也必將隨之興起。在廣電行業(yè)內(nèi)部,大部分電臺、電視臺都已經(jīng)完成了數(shù)字化改造,并開始實施包括生產(chǎn)、辦公、網(wǎng)絡(luò)集成一體的全臺網(wǎng)絡(luò)建設(shè)。企業(yè)需要的不僅僅是能存儲海量數(shù)據(jù)的高端存儲設(shè)備,更需要滿足終端綜合需求的數(shù)據(jù)管理解決方案,這要求存儲企業(yè)能夠提品+服務(wù)的“交鑰匙”工程,從存儲設(shè)備提供商向數(shù)據(jù)解決方案的服務(wù)提供商轉(zhuǎn)型。這種轉(zhuǎn)型要求存儲企業(yè)具備較高的綜合需求管理能力,在面對不同客戶的多級多域綜合需求時,能迅速響應(yīng)分解到企業(yè)內(nèi)部和二級、三級供應(yīng)商,再進(jìn)一步整合成定制化的解決方案交遞客戶??梢娕嘤髽I(yè)的供應(yīng)商管理和客戶關(guān)系管理能力是成為數(shù)據(jù)解決方案的服務(wù)提供商的基礎(chǔ)(陳向東、王曉方,2011)。
(二)采用科技前置的營銷策略,提升數(shù)據(jù)整合能力
以市場需求為導(dǎo)向,強化技術(shù)創(chuàng)新所獲得的競爭優(yōu)勢,實現(xiàn)增值營銷。為使存儲企業(yè)高端客戶和產(chǎn)品市場呈現(xiàn)出強勁增長態(tài)勢,必須采取科研前置的技術(shù)營銷策略,這也是大客戶營銷的基礎(chǔ)所在。大客戶代表著前向產(chǎn)業(yè)的拉動者,公司需堅持技術(shù)領(lǐng)先,緊緊跟隨前項產(chǎn)業(yè)的技術(shù)進(jìn)步,如云計算、云平臺和活性存儲等,采取合作開發(fā)、單獨研制等方式不斷創(chuàng)新產(chǎn)品、創(chuàng)新技術(shù),并針對不同使用條件和環(huán)境,為顧客進(jìn)行合理數(shù)據(jù)存儲方案設(shè)計,以滿足個性化需求。一方面,更敏銳地把握技術(shù)發(fā)展趨勢和客戶的最新需求;另一方面,保持向高端客戶和新的產(chǎn)品服務(wù)模式拓進(jìn),把知識營銷運用于存儲企業(yè)的經(jīng)營管理,是對傳統(tǒng)設(shè)備制造型存儲企業(yè)的改造升級,構(gòu)建強勢存儲企業(yè)品牌的長期競爭優(yōu)勢,其主旨是企業(yè)不僅要能夠為客戶提供豐富的產(chǎn)品、協(xié)助數(shù)據(jù)管理,更重要的是能夠針對用戶應(yīng)用環(huán)境研發(fā),提供有針對性的優(yōu)化解決方案。
(三)推進(jìn)產(chǎn)業(yè)聯(lián)盟和培育存儲產(chǎn)業(yè)鏈,構(gòu)建全球化網(wǎng)絡(luò)
一方面,在提升技術(shù)研發(fā)能力的同時,積極與全球各地的研究機構(gòu)開展人才交流和技術(shù)合作;積極開展供應(yīng)商參與的、科研院所聯(lián)合研發(fā),跨企業(yè)、跨產(chǎn)業(yè)的技術(shù)研發(fā)聯(lián)盟;另一方面,建立多方合作平臺,建立以綜合服務(wù)集成商為主導(dǎo)的產(chǎn)業(yè)價值網(wǎng),以建立穩(wěn)定持續(xù)的業(yè)務(wù)關(guān)系為目標(biāo),由專人或?qū)m椥〗M直接與目標(biāo)客戶溝通,為其提供個性化服務(wù)?;谄放啤⒓夹g(shù)、制造和服務(wù)積累力量,作為國際化的 “四輪驅(qū)動”,推動中國存儲企業(yè)的國際化進(jìn)程。無論是現(xiàn)在還是未來,品牌、技術(shù)、服務(wù)和制造都是全球存儲市場的角力點。存儲行業(yè)企業(yè)應(yīng)盡快完成從產(chǎn)品輸出到以技術(shù)、服務(wù)輸出和品牌輸出的轉(zhuǎn)變,極大地提高產(chǎn)品的供應(yīng)能力和服務(wù)能力?;谝陨险归_國際市場布局,面對復(fù)雜陌生的海外市場,還需要建立本土化的供應(yīng)網(wǎng)絡(luò),與當(dāng)?shù)毓?yīng)商合作,在構(gòu)建渠道網(wǎng)絡(luò)的同時,了解和熟悉當(dāng)?shù)厥袌觥kS著國際市場業(yè)務(wù)增長以及銷售渠道和服務(wù)網(wǎng)絡(luò)的完善,提供與之匹配的本地化服務(wù)支持,與國際存儲企業(yè)競爭。
參考文獻(xiàn):
1.Patterson,D.A.2002.Availability and maintainability performance: New focus for a new century. Key note speech at FAST'02
2.2011年存儲行業(yè)十大發(fā)展趨勢預(yù)測[J].微電腦世界,2011(2)
3.邁克爾·波特.競爭優(yōu)勢[M].華夏出版社,1985
4.張帥.存儲行業(yè)的先鋒—美國EMC公司[J].中國科技信息,2000(24)
5.存儲行業(yè)從品質(zhì)競爭轉(zhuǎn)向品位競爭[J].計算機與網(wǎng)絡(luò),2006(13)
6.陳向東,王曉方.創(chuàng)意產(chǎn)業(yè)廣電行業(yè)國際競爭力的比較分析—基于中國和歐洲的對比[J].現(xiàn)代商業(yè),2011(17)