緒論:寫(xiě)作既是個(gè)人情感的抒發(fā),也是對(duì)學(xué)術(shù)真理的探索,歡迎閱讀由發(fā)表云整理的11篇企業(yè)數(shù)據(jù)存儲(chǔ)方案范文,希望它們能為您的寫(xiě)作提供參考和啟發(fā)。
大數(shù)據(jù)存儲(chǔ)不是一類(lèi)單獨(dú)的產(chǎn)品,它有很多實(shí)現(xiàn)方式。EMC Isilon存儲(chǔ)事業(yè)部總經(jīng)理?xiàng)钐m江概括說(shuō),大數(shù)據(jù)存儲(chǔ)應(yīng)該具有以下一些特性:海量數(shù)據(jù)存儲(chǔ)能力,可輕松管理PB級(jí)乃至數(shù)十PB的存儲(chǔ)容量;具有全局命名空間,所有應(yīng)用可以看到統(tǒng)一的文件系統(tǒng)視圖;支持標(biāo)準(zhǔn)接口,應(yīng)用無(wú)需修改可直接運(yùn)行,并提供API接口進(jìn)行面向?qū)ο蟮墓芾恚蛔x寫(xiě)性能優(yōu)異,聚合帶寬高達(dá)數(shù)GB乃至數(shù)十GB;易于管理維護(hù),無(wú)需中斷業(yè)務(wù)即可輕松實(shí)現(xiàn)動(dòng)態(tài)擴(kuò)展;基于開(kāi)放架構(gòu),可以運(yùn)行于任何開(kāi)放架構(gòu)的硬件之上;具有多級(jí)數(shù)據(jù)冗余,支持硬件與軟件冗余保護(hù),數(shù)據(jù)具有高可靠性;采用多級(jí)存儲(chǔ)備份,可靈活支持SSD、SAS、SATA和磁帶庫(kù)的統(tǒng)一管理。
通過(guò)與中國(guó)用戶(hù)的接觸,楊蘭江認(rèn)為,當(dāng)前中國(guó)用戶(hù)最迫切需要了解的是大數(shù)據(jù)存儲(chǔ)有哪些分類(lèi),而在大數(shù)據(jù)應(yīng)用方面面臨的最大障礙就是如何在眾多平臺(tái)中找到適合自己的解決方案。
EMC針對(duì)不同的應(yīng)用需求可以提供不同的解決方案:對(duì)于能源、媒體、生命科學(xué)、醫(yī)療影像、GIS、視頻監(jiān)控、HPC應(yīng)用、某些歸檔應(yīng)用等,EMC會(huì)首推以Isilon存儲(chǔ)為核心的大數(shù)據(jù)存儲(chǔ)解決方案;對(duì)于虛擬化以及具有很多小文件的應(yīng)用,EMC將首推以VNX、XtremIO為核心的大數(shù)據(jù)存儲(chǔ)解決方案;對(duì)于大數(shù)據(jù)分析一類(lèi)的應(yīng)用需求,EMC會(huì)綜合考慮客戶(hù)的具體需求,推薦Pivotal、Isilon等一體化的解決方案。在此,具體介紹一下EMC用于大數(shù)據(jù)的橫向擴(kuò)展NAS解決方案——EMC Isilon,其設(shè)計(jì)目標(biāo)是簡(jiǎn)化對(duì)大數(shù)據(jù)存儲(chǔ)基礎(chǔ)架構(gòu)的管理,為大數(shù)據(jù)提供靈活的可擴(kuò)展平臺(tái),進(jìn)一步提高大數(shù)據(jù)存儲(chǔ)的效率,降低成本。
EMC Isilon存儲(chǔ)解決方案主要包括三部分:EMC Isilon平臺(tái)節(jié)點(diǎn)和加速器,可從單個(gè)文件系統(tǒng)進(jìn)行大數(shù)據(jù)存儲(chǔ),從而服務(wù)于 I/O 密集型應(yīng)用程序、存儲(chǔ)和近線歸檔;EMC Isilon基礎(chǔ)架構(gòu)軟件是一個(gè)強(qiáng)大的工具,可幫助用戶(hù)在大數(shù)據(jù)環(huán)境中保護(hù)數(shù)據(jù)、控制成本并優(yōu)化存儲(chǔ)資源和系統(tǒng)性能;EMC Isilon OneFS操作系統(tǒng)可在集群中跨節(jié)點(diǎn)智能地整合文件系統(tǒng)、卷管理器和數(shù)據(jù)保護(hù)功能。
楊蘭江表示,企業(yè)用戶(hù)選擇EMC Isilon的理由可以歸納為以下幾點(diǎn)。第一,簡(jiǎn)化管理,增強(qiáng)易用性。與傳統(tǒng)NAS相比,無(wú)論未來(lái)存儲(chǔ)容量、性能增加到何種程度,EMC Isilon的安裝、管理和擴(kuò)展都會(huì)保持其簡(jiǎn)單性。第二,強(qiáng)大的可擴(kuò)展性。EMC Isilon可以滿(mǎn)足非結(jié)構(gòu)化數(shù)據(jù)的存儲(chǔ)和分析需求,單個(gè)文件系統(tǒng)和卷中每個(gè)集群的容量為18TB~15PB。第三,更高的處理效率,更低的成本。EMC Isilon在單個(gè)共享存儲(chǔ)池中的利用率超過(guò)80%,而EMC Isilon SmartPools軟件可進(jìn)一步優(yōu)化資源,提供自動(dòng)存儲(chǔ)分層,保證存儲(chǔ)的高性能、經(jīng)濟(jì)性。第四,靈活的互操作性。EMC Isilon支持眾多行業(yè)標(biāo)準(zhǔn),簡(jiǎn)化工作流。它還提供了API可以向客戶(hù)和ISV提供OneFS控制接口,提供Isilon集群的自動(dòng)化、協(xié)調(diào)和資源調(diào)配能力。
EMC Isilon大數(shù)據(jù)存儲(chǔ)解決方案已經(jīng)在醫(yī)療、制造、高校和科研機(jī)構(gòu)中有了許多成功應(yīng)用。
方案點(diǎn)評(píng)
EMC Isilon是一個(gè)強(qiáng)大但簡(jiǎn)單的橫向擴(kuò)展NAS方案,適用于希望投資數(shù)據(jù)管理而不是單純存儲(chǔ)的企業(yè)。當(dāng)初,EMC將收購(gòu)來(lái)的分布式數(shù)據(jù)倉(cāng)庫(kù)軟件廠商Greenplum的軟件與Isilon存儲(chǔ)組合成了EMC最早的大數(shù)據(jù)解決方案。用戶(hù)既可以分開(kāi)選擇Greenplum軟件或Isilon存儲(chǔ),也可以選擇由Greenplum軟件和Isilon存儲(chǔ)組成的一體機(jī)解決方案。現(xiàn)在,Greenplum軟件雖然已歸Pivotal公司,但EMC是Pivotal的經(jīng)銷(xiāo)商與合作伙伴,Greenplum與Isilon存儲(chǔ)的組合方案并不會(huì)因此受到影響。
HDS UCP:統(tǒng)一平臺(tái) 應(yīng)用優(yōu)化
HDS中國(guó)區(qū)解決方案與專(zhuān)業(yè)服務(wù)事業(yè)部總監(jiān)陳戈認(rèn)為,大數(shù)據(jù)存儲(chǔ)應(yīng)該是一個(gè)解決方案:“大數(shù)據(jù)解決方案是由基礎(chǔ)架構(gòu)的各部件組成的,包含數(shù)據(jù)存儲(chǔ)、計(jì)算和分析,而存儲(chǔ)是此架構(gòu)中的一部分。”
大數(shù)據(jù)的存儲(chǔ)類(lèi)型與傳統(tǒng)的存儲(chǔ)類(lèi)型有一定區(qū)別:在大數(shù)據(jù)存儲(chǔ)中,更多的應(yīng)用是一次寫(xiě)、多次讀,讀得更多是大數(shù)據(jù)存儲(chǔ)的一個(gè)特點(diǎn),而在傳統(tǒng)的數(shù)據(jù)存儲(chǔ)中,讀寫(xiě)是隨機(jī)的,由于每個(gè)應(yīng)用不同,其讀寫(xiě)的比例也是隨機(jī)的;大數(shù)據(jù)存儲(chǔ)需要具有橫向的可擴(kuò)展性,并可支持多種接口、多種數(shù)據(jù)訪問(wèn)協(xié)議,便于不同數(shù)據(jù)進(jìn)入這個(gè)大數(shù)據(jù)平臺(tái)。
談到中國(guó)用戶(hù)在大數(shù)據(jù)存儲(chǔ)應(yīng)用中最迫切的需求是什么,陳戈認(rèn)為,中國(guó)用戶(hù)最迫切的需求是如何逐步實(shí)現(xiàn)大數(shù)據(jù)應(yīng)用,即用戶(hù)從現(xiàn)有的模式如何過(guò)渡到大數(shù)據(jù),如何更好地利用大數(shù)據(jù)進(jìn)行經(jīng)營(yíng)分析。
大數(shù)據(jù)的經(jīng)典定義可以歸納為四個(gè)“V”,但企業(yè)不可能一步到位實(shí)現(xiàn)四個(gè)“V”,這需要一個(gè)循序漸進(jìn)的過(guò)程。海量的、多種類(lèi)型的數(shù)據(jù)是一次性全部載入到大數(shù)據(jù)中,還是通過(guò)現(xiàn)有的平臺(tái)進(jìn)行數(shù)據(jù)初選,再導(dǎo)入到大數(shù)據(jù)平臺(tái)中,是兩種不同的實(shí)現(xiàn)途徑。“先通過(guò)現(xiàn)有平臺(tái)進(jìn)行數(shù)據(jù)初選,再導(dǎo)入到大數(shù)據(jù)平臺(tái),這種方式更適合于客戶(hù)逐漸實(shí)現(xiàn)大數(shù)據(jù),可以縮短用戶(hù)實(shí)現(xiàn)大數(shù)據(jù)應(yīng)用的時(shí)間。”陳戈表示,“大數(shù)據(jù)主要是非結(jié)構(gòu)化數(shù)據(jù)。用戶(hù)可以使用基于對(duì)象數(shù)據(jù)存儲(chǔ)的HCP,利用其獨(dú)特的元數(shù)據(jù)采集和智能工具,對(duì)非結(jié)構(gòu)化文件數(shù)據(jù)進(jìn)行管理,實(shí)現(xiàn)智能的自動(dòng)化,這有助于對(duì)數(shù)據(jù)進(jìn)行深度分析,幫助客戶(hù)從單一系統(tǒng)中存儲(chǔ)、共享、同步、保護(hù)、保存、分析和檢索文件數(shù)據(jù),減少垃圾數(shù)據(jù),進(jìn)而為大數(shù)據(jù)分析建立一個(gè)良好的基礎(chǔ)。”
談到用戶(hù)在大數(shù)據(jù)應(yīng)用中遇到的主要障礙,陳戈表示,一方面,應(yīng)用軟件本身的智能程度是否能滿(mǎn)足行業(yè)應(yīng)用需求,應(yīng)用軟件是否已經(jīng)成型,大數(shù)據(jù)人才是否具備等,是讓大數(shù)據(jù)應(yīng)用落地的關(guān)鍵;另一方面,如何抽取數(shù)據(jù),放在大數(shù)據(jù)平臺(tái)中進(jìn)行相應(yīng)的計(jì)算是另一個(gè)關(guān)鍵問(wèn)題。
HDS可為所有數(shù)據(jù)提供單一、可擴(kuò)展的虛擬化集成平臺(tái)。HDS推出了“三步”云戰(zhàn)略,從基礎(chǔ)架構(gòu)、內(nèi)容和信息三個(gè)層面幫助客戶(hù)解決目前所遇到的問(wèn)題。具體來(lái)看,通過(guò)“基礎(chǔ)架構(gòu)云”,HDS可以幫助客戶(hù)進(jìn)行虛擬化和集成管理,實(shí)現(xiàn)數(shù)據(jù)中心的整合;在第二層的“內(nèi)容云”當(dāng)中,HDS可以按需提供內(nèi)容,更可以不受應(yīng)用限制地進(jìn)行數(shù)據(jù)搜索和集成;在第三層的“信息云”中,針對(duì)所有數(shù)據(jù)類(lèi)型,HDS在其存儲(chǔ)平臺(tái)中融入了分析功能,使客戶(hù)可以從數(shù)據(jù)信息中獲取洞察力。
HDS提供的UCP for SAP HANA集成了基于大量數(shù)據(jù)集的創(chuàng)新和內(nèi)存分析技術(shù),并提供實(shí)時(shí)的洞察力,從而使當(dāng)前的信息驅(qū)動(dòng)型企業(yè)可以加快其商業(yè)決策的速度。陳戈介紹說(shuō),UCP for SAP HANA解決方案結(jié)合了HDS刀片服務(wù)器技術(shù)、企業(yè)級(jí)存儲(chǔ)系統(tǒng)和業(yè)內(nèi)領(lǐng)先的網(wǎng)絡(luò)組件,在這樣一個(gè)集成的、高性能的硬件平臺(tái)上可以快速交付SAP下一代內(nèi)存計(jì)算技術(shù)。全球已有超過(guò)200家客戶(hù)在使用HDS和SAP的大數(shù)據(jù)解決方案。
方案點(diǎn)評(píng)
其實(shí),HDS的“三步”云戰(zhàn)略也可以看成是其大數(shù)據(jù)戰(zhàn)略。HDS借助以UCP為核心的大數(shù)據(jù)平臺(tái),可以幫助企業(yè)用戶(hù)構(gòu)建從基礎(chǔ)架構(gòu)到內(nèi)容歸檔和搜索,直至信息提取和分析的全面、高效的大數(shù)據(jù)解決方案。HDS的“信息云”直接與大數(shù)據(jù)相關(guān)。UCP是一個(gè)集成了計(jì)算、存儲(chǔ)與網(wǎng)絡(luò)的一體化平臺(tái),它既可以提供像一體機(jī)一樣的整合性、簡(jiǎn)單性,又可以提供靈活的選擇,連接第三方的設(shè)備組件。HDS還通過(guò)與包括SAP在內(nèi)的眾多大數(shù)據(jù)分析類(lèi)的合作伙伴合作,針對(duì)行業(yè)定制優(yōu)質(zhì)的大數(shù)據(jù)解決方案。
HP StoreAll :快速部署 極速搜索
中國(guó)惠普有限公司企業(yè)集團(tuán)存儲(chǔ)產(chǎn)品部存儲(chǔ)架構(gòu)師張楠向記者表示,大數(shù)據(jù)存儲(chǔ)是一套解決方案,應(yīng)該能夠?qū)Υ髷?shù)據(jù)的Volume、Velocity、Variety和Value四個(gè)方面提供全面的支持。
第一,大數(shù)據(jù)存儲(chǔ)要支持海量級(jí)的數(shù)據(jù)存儲(chǔ),比如具有PB級(jí)的存儲(chǔ)能力。第二,大數(shù)據(jù)存儲(chǔ)要支持更高的存儲(chǔ)速度,支持10Gb甚至更高的網(wǎng)絡(luò)連接。第三,大數(shù)據(jù)存儲(chǔ)要支持?jǐn)?shù)據(jù)的多樣性,如圖片、文本、視頻、音頻等。第四,大數(shù)據(jù)最重要的是價(jià)值的體現(xiàn),而為了實(shí)現(xiàn)這一點(diǎn),存儲(chǔ)本身應(yīng)該具備快速、智能的數(shù)據(jù)檢索能力。“在存儲(chǔ)的最底層提供最直接、快捷的數(shù)據(jù)檢索。這一過(guò)程簡(jiǎn)單說(shuō)就是,將上層的數(shù)據(jù)挖掘工作下移,充分利用存儲(chǔ)強(qiáng)大的處理能力和數(shù)據(jù)識(shí)別能力。”張楠舉例說(shuō),“比如,在秒級(jí)的單位內(nèi)對(duì)數(shù)據(jù)進(jìn)行極速的搜索, 從幾千萬(wàn)甚至上億個(gè)文件中找到目標(biāo)數(shù)據(jù)。”
另外,模糊查詢(xún)能力也是大數(shù)據(jù)存儲(chǔ)不可缺少的功能。智能的模糊查詢(xún)將為大數(shù)據(jù)平臺(tái)提供更加便捷的存儲(chǔ)服務(wù)能力,使得存儲(chǔ)更像一臺(tái)智能的高速計(jì)算設(shè)備。
目前,很多中國(guó)用戶(hù)在存儲(chǔ)廠商的引導(dǎo)下,片面追求存儲(chǔ)的大容量和高性能,而忽略了大數(shù)據(jù)存儲(chǔ)本身應(yīng)該提供的其他額外屬性。中國(guó)用戶(hù)在實(shí)施大數(shù)據(jù)的過(guò)程中經(jīng)常遇到的障礙有以下兩方面:第一,無(wú)法將存儲(chǔ)與大數(shù)據(jù)平臺(tái)進(jìn)行對(duì)接;第二,無(wú)法充分利用大數(shù)據(jù)存儲(chǔ)的價(jià)值,也很難將其運(yùn)用到實(shí)際的業(yè)務(wù)中。張楠表示,究其原因,主要在于有些大數(shù)據(jù)存儲(chǔ)產(chǎn)品沒(méi)有開(kāi)放的接口協(xié)議,或沒(méi)有針對(duì)用戶(hù)的大數(shù)據(jù)場(chǎng)景進(jìn)行特別優(yōu)化,也沒(méi)有用戶(hù)容易接受的易用的管理方式等。
惠普在大數(shù)據(jù)方面可以提供軟硬結(jié)合的解決方案。惠普在收購(gòu)Autonomy公司之后,將其軟件與惠普的硬件平臺(tái)進(jìn)行了整合, 形成了一套完整的大數(shù)據(jù)解決方案。張楠介紹說(shuō),在存儲(chǔ)方面,惠普擁有像StoreAll這樣的大數(shù)據(jù)存儲(chǔ)平臺(tái)。借助HP StoreAll硬件平臺(tái),用戶(hù)除了可以實(shí)現(xiàn)海量數(shù)據(jù)的存儲(chǔ)和高速數(shù)據(jù)訪問(wèn)以外,還能實(shí)現(xiàn)高級(jí)的數(shù)據(jù)檢索功能,對(duì)特殊文件進(jìn)行快速定位。同時(shí),結(jié)合HP Autonomy軟件的特性,惠普還引入了模糊查詢(xún)、智能語(yǔ)義庫(kù)等概念,可以幫助企業(yè)用戶(hù)通過(guò)存儲(chǔ)底層為上層業(yè)務(wù)帶來(lái)所需的大數(shù)據(jù)業(yè)務(wù)價(jià)值。
如今,閃存不僅在大數(shù)據(jù)領(lǐng)域,而且在Tier 1存儲(chǔ)市場(chǎng)同樣占據(jù)著十分重要的地位。對(duì)于大數(shù)據(jù)平臺(tái)來(lái)說(shuō),閃存可用來(lái)提升存儲(chǔ)的存取速度,降低I/O的響應(yīng)時(shí)間等。針對(duì)那些I/O壓力十分明確的大數(shù)據(jù)平臺(tái), SSD可以發(fā)揮其效果, 提升存儲(chǔ)的整體性能。但是,SSD并不是萬(wàn)能的。因?yàn)榇蟛糠值臄?shù)據(jù)都是非結(jié)構(gòu)化的,而非結(jié)構(gòu)化數(shù)據(jù)對(duì)I/O的響應(yīng)要求遠(yuǎn)遠(yuǎn)沒(méi)有對(duì)帶寬的需求大,所以,讓用戶(hù)花數(shù)倍的價(jià)格購(gòu)買(mǎi)SSD存儲(chǔ)在目前來(lái)看還是比較困難的。從目前情況看,引入閃存的大數(shù)據(jù)解決方案還不是很普遍。
方案點(diǎn)評(píng)
惠普在大數(shù)據(jù)方面收購(gòu)了兩個(gè)軟件公司Vertica與Autonomy,然后將它們的軟件與原有的硬件平臺(tái)進(jìn)行整合,針對(duì)結(jié)構(gòu)化和非結(jié)構(gòu)化的數(shù)據(jù)都可以提供針對(duì)性的解決方案。惠普在將大數(shù)據(jù)軟件與存儲(chǔ)硬件結(jié)合上也進(jìn)行了嘗試,其中一個(gè)成功的例子就是HP StoreAll大數(shù)據(jù)存儲(chǔ)平臺(tái)。HP StoreAll具有以下特點(diǎn):橫向擴(kuò)展,最大可以擴(kuò)展到16TB;集成HP Autonomy搜索引擎,可以快速搜索,實(shí)現(xiàn)實(shí)時(shí)大數(shù)據(jù)的價(jià)值;內(nèi)置對(duì)OpenStack的支持,可快速部署;支持文件和對(duì)象類(lèi)型的數(shù)據(jù)存儲(chǔ)。
NetApp:統(tǒng)一架構(gòu) 無(wú)限擴(kuò)展
如今,企業(yè)若想獲得成功,就必須想方設(shè)法應(yīng)對(duì)具有前所未有的復(fù)雜性、高性能的海量數(shù)據(jù),并盡可能地管理這些數(shù)據(jù),從中發(fā)掘更大的商業(yè)價(jià)值。
對(duì)于國(guó)內(nèi)用戶(hù)來(lái)說(shuō),無(wú)論企業(yè)的規(guī)模和數(shù)據(jù)量大小如何,運(yùn)用大數(shù)據(jù)的關(guān)鍵在于,企業(yè)是否把大數(shù)據(jù)作為一個(gè)真正的工具,去體現(xiàn)企業(yè)的差異化,從而提升競(jìng)爭(zhēng)力。隨著越來(lái)越智慧的企業(yè)信息化的發(fā)展,IT不再是束縛企業(yè)發(fā)展的瓶頸,而是真正地融入了企業(yè)自身的業(yè)務(wù)中。越來(lái)越多的公司將大數(shù)據(jù)成功地運(yùn)用于企業(yè)的商業(yè)模式。例如,在歐美,很多企業(yè)已經(jīng)著手將大量資源投放在大數(shù)據(jù)領(lǐng)域。反觀國(guó)內(nèi),在金融領(lǐng)域,有為數(shù)不少的企業(yè)通過(guò)大數(shù)據(jù)的分析工具來(lái)分析金融的走勢(shì),實(shí)現(xiàn)風(fēng)險(xiǎn)管理,進(jìn)行信用卡的追蹤等。此外,像零售、制造、電信等行業(yè)也已在嘗試?yán)么髷?shù)據(jù)分析工具為企業(yè)營(yíng)銷(xiāo)和決策提供支撐。
無(wú)論企業(yè)現(xiàn)在是否正在使用大數(shù)據(jù)工具,企業(yè)都應(yīng)全面地考慮自身未來(lái)發(fā)展的需求,選擇一個(gè)廠家的平臺(tái)與之共同發(fā)展,這可以有效避免因數(shù)據(jù)和應(yīng)用遷移帶來(lái)的麻煩。
在大數(shù)據(jù)方面,NetApp能夠幫助企業(yè)實(shí)現(xiàn)數(shù)據(jù)管理,應(yīng)對(duì)業(yè)務(wù)挑戰(zhàn)的極限,將以數(shù)據(jù)為導(dǎo)向的洞察轉(zhuǎn)化為有效行動(dòng)。若想將數(shù)據(jù)轉(zhuǎn)化為商機(jī),僅僅提升管理能力是不夠的,需要徹底轉(zhuǎn)變數(shù)據(jù)和業(yè)務(wù)之間的聯(lián)系模式。NetApp可以幫助企業(yè)用戶(hù)持續(xù)管理數(shù)據(jù),迅速把握意料之外的新商機(jī),永久保存所有數(shù)據(jù),并在靈活、開(kāi)放的存儲(chǔ)平臺(tái)之上打造屬于企業(yè)自己的大數(shù)據(jù)解決方案。
NetApp提供了可高效處理、分析、管理和訪問(wèn)大規(guī)模數(shù)據(jù)的大數(shù)據(jù)解決方案。NetApp的解決方案組合可劃分為分析、帶寬和內(nèi)容三個(gè)主要用例,這被稱(chēng)之為大數(shù)據(jù)的“ABC”基本要素。
具體來(lái)看,分析(Analysis)是指針對(duì)極大數(shù)據(jù)集的高效分析。NetApp分析解決方案就是幫助用戶(hù)深入了解和利用數(shù)字世界,將數(shù)據(jù)轉(zhuǎn)化為高質(zhì)量的信息,以及提供關(guān)于業(yè)務(wù)的更深入見(jiàn)解,從而幫助企業(yè)做出更好的決策。
帶寬(Bandwidth)是指適用于數(shù)據(jù)密集型工作負(fù)載的性能。此類(lèi)解決方案著重于為速度非常快的工作負(fù)載提供更高的性能。高帶寬應(yīng)用包括高性能計(jì)算(能以極快的速度執(zhí)行復(fù)雜的分析)、用于監(jiān)控和任務(wù)規(guī)劃的高性能視頻流、媒體和娛樂(lè)領(lǐng)域中的視頻剪輯和播放。
內(nèi)容(Content)是指無(wú)限的安全數(shù)據(jù)存儲(chǔ)。此類(lèi)解決方案著重于滿(mǎn)足可擴(kuò)展的安全數(shù)據(jù)存儲(chǔ)需求。內(nèi)容解決方案必須支持存儲(chǔ)的無(wú)限擴(kuò)展能力,以便企業(yè)可以根據(jù)需要存儲(chǔ)任意多的數(shù)據(jù),并能在需要時(shí)找到所需的數(shù)據(jù)。
NetApp致力于通過(guò)一系列解決方案來(lái)提供高性能的運(yùn)算和大數(shù)據(jù)的應(yīng)用。2013年11月,NetApp再次更新了E系列家族產(chǎn)品,推出E2700和E5500。該系列產(chǎn)品采用可輕松擴(kuò)展的設(shè)計(jì),適用于要求99.999%的可靠性且穩(wěn)定、高性能的工作負(fù)載。
用戶(hù)在采購(gòu)大數(shù)據(jù)存儲(chǔ)產(chǎn)品時(shí),需要注意以下五個(gè)方面的問(wèn)題:大數(shù)據(jù)存儲(chǔ)必須具有向上擴(kuò)展與向外擴(kuò)展的能力;架構(gòu)必須是針對(duì)工作負(fù)載進(jìn)行優(yōu)化的,具有實(shí)時(shí)處理能力;具有整合的數(shù)據(jù)保護(hù)功能;保證7×24小時(shí)運(yùn)行不中斷,可在線進(jìn)行容量擴(kuò)展,實(shí)施數(shù)據(jù)遷移等;可以實(shí)現(xiàn)服務(wù)的自動(dòng)化。
方案點(diǎn)評(píng)
NetApp的技術(shù)優(yōu)勢(shì)集中體現(xiàn)在其統(tǒng)一存儲(chǔ)平臺(tái)上,從入門(mén)級(jí)產(chǎn)品到企業(yè)級(jí)產(chǎn)品,全部基于同一個(gè)體系架構(gòu)和操作系統(tǒng),不僅部署和使用方便,而且升級(jí)和擴(kuò)展非常簡(jiǎn)單。當(dāng)初,NetApp收購(gòu)LSI Engenio,其中一個(gè)重要的原因就是為了大數(shù)據(jù)。2013年,NetApp不斷更新E系列產(chǎn)品線,推出E2700和E5500等。E5500可以支持高IOPS混合工作負(fù)載和數(shù)據(jù)庫(kù)、高性能文件系統(tǒng)和帶寬密集型流等應(yīng)用,可確保數(shù)據(jù)的高可用性、完整性和安全性。
曙光XData:高度集成 貼近行業(yè)
關(guān)于大數(shù)據(jù)存儲(chǔ),目前業(yè)界沒(méi)有一個(gè)通用的定義。曙光信息產(chǎn)業(yè)股份有限公司總裁助理兼存儲(chǔ)產(chǎn)品線產(chǎn)品總監(jiān)惠潤(rùn)海從曙光大數(shù)據(jù)平臺(tái)和解決方案角度,概括出大數(shù)據(jù)存儲(chǔ)的主要特征。
首先,大數(shù)據(jù)存儲(chǔ)必須支持全類(lèi)型數(shù)據(jù), 包括結(jié)構(gòu)化、半結(jié)構(gòu)化和非結(jié)構(gòu)數(shù)據(jù),實(shí)現(xiàn)統(tǒng)一數(shù)據(jù)支持。
其次,存儲(chǔ)性能上,一方面,大數(shù)據(jù)存儲(chǔ)要支持海量數(shù)據(jù),并且要在保證數(shù)據(jù)可靠性的基礎(chǔ)之上,實(shí)現(xiàn)容量與性能的線性擴(kuò)展;另一方面,為了實(shí)現(xiàn)大數(shù)據(jù)的價(jià)值,批處理和實(shí)時(shí)處理兩種措施都需要高性能的數(shù)據(jù)訪問(wèn)獲取能力。
最后,在系統(tǒng)達(dá)到一定規(guī)模之后,系統(tǒng)的易用性和可管理性也是不可或缺的。
從應(yīng)用角度來(lái)說(shuō),目前中國(guó)用戶(hù)在大數(shù)據(jù)存儲(chǔ)應(yīng)用中最迫切的需求,是如何真正實(shí)現(xiàn)用戶(hù)數(shù)據(jù)的價(jià)值,如何驅(qū)動(dòng)業(yè)務(wù)發(fā)展,實(shí)現(xiàn)決策和運(yùn)營(yíng)。“從系統(tǒng)構(gòu)建層面說(shuō),要實(shí)現(xiàn)數(shù)據(jù)高性?xún)r(jià)比的存儲(chǔ)和管理,同時(shí)滿(mǎn)足數(shù)據(jù)服務(wù)的相關(guān)需求。”惠潤(rùn)海表示。
針對(duì)用戶(hù)對(duì)大數(shù)據(jù)存儲(chǔ)的需求, 曙光推出了像大數(shù)據(jù)一體機(jī)這樣的全類(lèi)型數(shù)據(jù)分析型產(chǎn)品,同時(shí)還基于該產(chǎn)品構(gòu)建了基于行業(yè)的解決方案,以幫助用戶(hù)實(shí)現(xiàn)大數(shù)據(jù)落地。
“除此之外, 我們還提供了大數(shù)據(jù)統(tǒng)一數(shù)據(jù)中心解決方案, 涵蓋了像主攻事物處理的DS900、DS800,以及針對(duì)文件存儲(chǔ)的Parastor等存儲(chǔ)產(chǎn)品。我們基于這些存儲(chǔ)產(chǎn)品構(gòu)建了大數(shù)據(jù)運(yùn)營(yíng)管理平臺(tái)。”惠潤(rùn)海介紹說(shuō),“曙光的優(yōu)勢(shì)不僅在于可以提供全面的產(chǎn)品支撐,更重要的是能夠提供數(shù)據(jù)生命周期過(guò)程服務(wù)支持。目前,我們提供的免費(fèi)維保期限為5年。”
曙光開(kāi)發(fā)了針對(duì)不同行業(yè)和應(yīng)用場(chǎng)景的大數(shù)據(jù)存儲(chǔ)解決方案。以金融行業(yè)為例,目前國(guó)內(nèi)四大行的應(yīng)用系統(tǒng)每年產(chǎn)生的非結(jié)構(gòu)化數(shù)據(jù)量已達(dá)到PB級(jí),結(jié)構(gòu)化數(shù)據(jù)也以百TB計(jì)。面對(duì)如此大量的數(shù)據(jù),如何存儲(chǔ)、管理、利用和盤(pán)活它們呢?惠潤(rùn)海認(rèn)為,只有通過(guò)商業(yè)智能和高級(jí)分析應(yīng)用解決方案才能將數(shù)據(jù)的價(jià)值最大程度地發(fā)揮出來(lái)。
針對(duì)金融行業(yè)用戶(hù)的需求,曙光開(kāi)發(fā)的XData大數(shù)據(jù)解決方案利用優(yōu)化的大數(shù)據(jù)處理技術(shù),對(duì)文件管理、歷史數(shù)據(jù)查詢(xún)和數(shù)據(jù)分析類(lèi)應(yīng)用等進(jìn)行深入研究,為數(shù)據(jù)爆炸式增長(zhǎng)帶來(lái)的海量數(shù)據(jù)存儲(chǔ)及分析應(yīng)用提供高可靠的解決方案。
曙光金融行業(yè)XData大數(shù)據(jù)解決方案采用曙光自主研發(fā)的SN-MPP并行數(shù)據(jù)庫(kù),同時(shí)結(jié)合大數(shù)據(jù)處理事實(shí)標(biāo)準(zhǔn)Hadoop,并充分考慮了多方面的數(shù)據(jù)收集,加入ETL工具和連接驅(qū)動(dòng)器,提供了類(lèi)SQL的接口,還和現(xiàn)有金融業(yè)務(wù)系統(tǒng)進(jìn)行對(duì)接。
產(chǎn)生這一變革需求的原因除了市場(chǎng)需求因素之外,陸續(xù)出現(xiàn)的一些困擾數(shù)據(jù)存儲(chǔ)行業(yè)發(fā)展的因素也是重要原因。在過(guò)去,由于用戶(hù)對(duì)存儲(chǔ)應(yīng)用需求的復(fù)雜性和個(gè)性化,具備整體解決方案能力的廠商占據(jù)了明顯的市場(chǎng)優(yōu)勢(shì),打造整體解決方案能力也就成為存儲(chǔ)業(yè)界競(jìng)爭(zhēng)的焦點(diǎn)。但在網(wǎng)絡(luò)信息化的新尋求之下,過(guò)去那些具備獨(dú)特優(yōu)勢(shì)的廠商很難在“存儲(chǔ)設(shè)備+網(wǎng)絡(luò)服務(wù)器+軟件+服務(wù)支持”的整體解決方案框架下提出整體解決方案。其中,高額的成本是最重要的原因。對(duì)于很多具有突出專(zhuān)業(yè)優(yōu)勢(shì)的企業(yè)來(lái)講,通過(guò)尋求合作降低成本似乎成為惟一的途徑。
中國(guó)存儲(chǔ)市場(chǎng)很長(zhǎng)時(shí)期以來(lái)是電信、金融行業(yè)的重點(diǎn)服務(wù)對(duì)象,其采購(gòu)量占據(jù)了2/3以上。但自2002年開(kāi)始,更多的行業(yè)涉足存儲(chǔ)應(yīng)用,而且從應(yīng)用的范圍看,不僅僅限于傳統(tǒng)的備份和容災(zāi),在廣度和深度上有更多延伸,如廣電的媒體多級(jí)存儲(chǔ),監(jiān)控的視頻圖像存儲(chǔ),氣象、石油和航天的海量數(shù)據(jù)存儲(chǔ)等。而且,隨著各企業(yè)單位對(duì)業(yè)務(wù)數(shù)據(jù)保護(hù)意識(shí)的加強(qiáng),中小數(shù)據(jù)規(guī)模的用戶(hù),如政府、軍隊(duì)、教育、商業(yè)、制造業(yè)和中小企業(yè)等也開(kāi)始加大了在存儲(chǔ)方面的投入。據(jù)CCID預(yù)測(cè),從2004年開(kāi)始,五年內(nèi)中國(guó)存儲(chǔ)市場(chǎng)會(huì)以10%一20%的年增長(zhǎng)率遞增。2004~2008年中國(guó)外部磁盤(pán)存儲(chǔ)系統(tǒng)市場(chǎng)銷(xiāo)售量將以64,4%的年復(fù)合增長(zhǎng)率快速增長(zhǎng)。到2008年,外部磁盤(pán)存儲(chǔ)系統(tǒng)銷(xiāo)售額及銷(xiāo)售量分別達(dá)到103.3億元人民幣和82436.4TB,存儲(chǔ)軟件2007年的銷(xiāo)售額將接近25億元。
雖然市場(chǎng)的細(xì)分帶來(lái)了更多的機(jī)會(huì),但同樣也使得競(jìng)爭(zhēng)變得更加激烈。事實(shí)上,在數(shù)據(jù)存儲(chǔ)“存儲(chǔ)設(shè)備+網(wǎng)絡(luò)服務(wù)器+軟件+服務(wù)支持”這條產(chǎn)業(yè)鏈上,并不都是很容易切人的。
高端存儲(chǔ)一年考
傳統(tǒng)上,高端存儲(chǔ)市場(chǎng)一直是國(guó)外廠商的天下,中國(guó)存儲(chǔ)廠商通常會(huì)從中低端存儲(chǔ)起步,然后慢慢向高端市場(chǎng)滲透。華為存儲(chǔ)從進(jìn)軍企業(yè)級(jí)市場(chǎng)那天就把高端存儲(chǔ)當(dāng)成了奮斗的目標(biāo),不斷在技術(shù)上推陳出新,并且在一些重點(diǎn)行業(yè)領(lǐng)域?qū)崿F(xiàn)了突破。華為IT存儲(chǔ)產(chǎn)品線總裁范瑞琦在云計(jì)算大會(huì)上告訴記者:“我們的高端存儲(chǔ)產(chǎn)品正式面市雖然只有一年多,但已經(jīng)在運(yùn)營(yíng)商、公安、金融、稅務(wù)、電力、大企業(yè)、政府、社保、醫(yī)療、交通、石油等20余個(gè)重點(diǎn)行業(yè)實(shí)現(xiàn)了突破,累計(jì)銷(xiāo)售超過(guò)70套。”
Gartner的報(bào)告顯示,2013年第一季度,華為存儲(chǔ)取得了中國(guó)區(qū)出貨量第一,全球收入排名第九的好成績(jī)。據(jù)范瑞琦透露,在第二季度中,華為存儲(chǔ)依舊保持了強(qiáng)勁增長(zhǎng)的態(tài)勢(shì)。華為存儲(chǔ)整體實(shí)力增強(qiáng)的同時(shí),其在一些重點(diǎn)產(chǎn)品線上,比如高端HVS存儲(chǔ)、大數(shù)據(jù)存儲(chǔ)N9000等也實(shí)現(xiàn)了突破。
在本次云計(jì)算大會(huì)上,IDC與華為聯(lián)合了《企業(yè)高端存儲(chǔ)安全可信白皮書(shū)》。IDC在白皮書(shū)中建議,企業(yè)在選擇存儲(chǔ)系統(tǒng)時(shí),應(yīng)重點(diǎn)關(guān)注存儲(chǔ)系統(tǒng)在硬件架構(gòu)、數(shù)據(jù)存儲(chǔ)、業(yè)務(wù)應(yīng)用三個(gè)層面的可靠性。華為高端存儲(chǔ)領(lǐng)域經(jīng)理趙海龍表示:“安全可信、彈性高效是華為高端存儲(chǔ)設(shè)計(jì)的核心理念。從Smart Matrix全冗余系統(tǒng)架構(gòu)設(shè)計(jì)到基于全虛擬化設(shè)計(jì)理念的XVE存儲(chǔ)操作平臺(tái),再到革命性的RAID 2.0+兩層虛擬化數(shù)據(jù)管理模式、自檢測(cè)自修復(fù)端到端的數(shù)據(jù)保護(hù)機(jī)制等。”
在本次云計(jì)算大會(huì)召開(kāi)之前,很多業(yè)內(nèi)的記者都在猜測(cè),本次大會(huì)上最重要的存儲(chǔ)產(chǎn)品是什么?大家一致認(rèn)為是全閃存陣列。果不其然,范瑞琦在大會(huì)上正式了華為首款全閃存高端存儲(chǔ)OceanStor 18800F。它具有百萬(wàn)級(jí)IOPS、微秒級(jí)的穩(wěn)定時(shí)延和“0”硬盤(pán)失效率三大特性,此外還具備出色的抗震、抗腐蝕等性能。不過(guò),記者在解決方案展示區(qū)沒(méi)有看到OceanStor 18800F的實(shí)物,商業(yè)化的產(chǎn)品據(jù)說(shuō)明年才能上市。
大數(shù)據(jù)存儲(chǔ)追求高效
媒資是華為大數(shù)據(jù)存儲(chǔ)解決方案最先落地的行業(yè)之一。在本次云計(jì)算大會(huì)上,華為宣布將與中央電視臺(tái)共同研發(fā)深度節(jié)能的大容量存儲(chǔ)設(shè)備,據(jù)稱(chēng)可以比傳統(tǒng)設(shè)備節(jié)省能耗60%~80%。
隨著數(shù)字化技術(shù)的不斷完善以及高清電視、IMAX/3D電影、移動(dòng)新媒體市場(chǎng)的快速增長(zhǎng),媒體的生產(chǎn)者必須及時(shí)提供高清化、多樣化的媒體節(jié)目,而傳統(tǒng)以磁帶設(shè)備為核心的媒資存儲(chǔ)平臺(tái)已經(jīng)不能滿(mǎn)足需求。華為可以為媒體提供以N9000系列存儲(chǔ)為核心的大數(shù)據(jù)存儲(chǔ)架構(gòu)。N9000集海量數(shù)據(jù)的存儲(chǔ)、歸檔和分析于一體,具有極強(qiáng)的橫向擴(kuò)展能力,可支持超大單一文件系統(tǒng)(最大為40PB),實(shí)現(xiàn)非結(jié)構(gòu)化數(shù)據(jù)的存儲(chǔ)與共享。
2013年8月,IBM在國(guó)內(nèi)正式FlashSystem全新閃存解決方案的同時(shí),也首次提出了“數(shù)據(jù)經(jīng)濟(jì)”的概念。在步入大數(shù)據(jù)時(shí)代后,企業(yè)用戶(hù)面對(duì)爆炸性增長(zhǎng)的數(shù)據(jù)量,在數(shù)據(jù)的采集、處理、存儲(chǔ)、分析等方面承受著巨大的壓力。IBM數(shù)據(jù)經(jīng)濟(jì)理念的提出,讓企業(yè)用戶(hù)重新審視現(xiàn)有的數(shù)據(jù)存儲(chǔ)、處置和管理狀況,從經(jīng)濟(jì)化的角度去考慮如何提升存儲(chǔ)的性能、效率,同時(shí)降低成本,并充分彰顯數(shù)據(jù)的價(jià)值。
剛剛上任不久的IBM系統(tǒng)與科技部存儲(chǔ)產(chǎn)品部大中華區(qū)總經(jīng)理黃永志在回答本報(bào)記者提問(wèn)時(shí)表示:“我們之所以提出數(shù)據(jù)經(jīng)濟(jì)的理念,主要目的是提醒行業(yè)用戶(hù)應(yīng)該對(duì)當(dāng)前的數(shù)據(jù)問(wèn)題進(jìn)行梳理,找出數(shù)據(jù)和存儲(chǔ)對(duì)業(yè)務(wù)的影響,使之量化,并按影響程度進(jìn)行排序。在此基礎(chǔ)上,準(zhǔn)確定位目前面臨的存儲(chǔ)問(wèn)題,進(jìn)而制定解決問(wèn)題的近期、中期和遠(yuǎn)期目標(biāo)。”現(xiàn)在,IBM可以通過(guò)一套系統(tǒng)的咨詢(xún)方案,幫助行業(yè)用戶(hù)分析并找到數(shù)據(jù)存儲(chǔ)中的問(wèn)題。不僅如此,IBM還能通過(guò)其完整且具有針對(duì)性的存儲(chǔ)解決方案,幫助用戶(hù)徹底解決數(shù)據(jù)存儲(chǔ)中的各類(lèi)問(wèn)題,并承諾可以在多大程度上讓用戶(hù)的存儲(chǔ)系統(tǒng)得到改善。比如,通常情況下,IBM FlashSystem可以將用戶(hù)的存儲(chǔ)系統(tǒng)利用率提高50%,將所需服務(wù)器的數(shù)量減少17%。
三大業(yè)務(wù)場(chǎng)景因“地”制宜
11月8日,IBM在北京召開(kāi)了主題為“創(chuàng)存儲(chǔ)之先,領(lǐng)數(shù)據(jù)經(jīng)濟(jì)”的IBM智慧存儲(chǔ)“數(shù)據(jù)經(jīng)濟(jì)”會(huì),針對(duì)數(shù)據(jù)密集型業(yè)務(wù)、需要快速上線的社交和移動(dòng)等業(yè)務(wù),以及企業(yè)關(guān)鍵應(yīng)用三種業(yè)務(wù)場(chǎng)景,細(xì)致地闡述了如何實(shí)現(xiàn)數(shù)據(jù)的經(jīng)濟(jì)化,從而推動(dòng)業(yè)務(wù)的變革。
在數(shù)據(jù)密集型業(yè)務(wù)中,企業(yè)需要快速處理海量數(shù)據(jù),為業(yè)務(wù)決策提供支撐,并獲取更多商機(jī)。只有高效的存儲(chǔ)系統(tǒng)才能滿(mǎn)足這種業(yè)務(wù)需求,比如IBM FlashSystem能夠顯著提升OLTP和OLAP的效率,加快數(shù)據(jù)處理速度,并支持大量并發(fā)用戶(hù),而IBM SmartCloud Storage Access則支持軟件定義存儲(chǔ),提供自助配置服務(wù)和用于ISV應(yīng)用集成的云存儲(chǔ)API,幫助客戶(hù)更靈活地構(gòu)建云存儲(chǔ)解決方案。IBM高端存儲(chǔ)XIV具有極高的性能和自動(dòng)化功能,并針對(duì)云部署優(yōu)化,還可支持OpenStack等開(kāi)放標(biāo)準(zhǔn)工具。
該企業(yè)有2個(gè)廠區(qū),其間通過(guò)光纖直連,廠區(qū)間直線距離3km。東廠區(qū)機(jī)房提供核心網(wǎng)絡(luò)支撐,運(yùn)行核心ERP系統(tǒng)和PLM全生命周期管理(設(shè)計(jì)圖紙管理)系統(tǒng),采用存儲(chǔ)陣列提供數(shù)據(jù)存儲(chǔ),其他業(yè)務(wù)系統(tǒng)有CAPP等,采用服務(wù)器自帶的存儲(chǔ)空間存儲(chǔ)數(shù)據(jù);目前,西廠區(qū)機(jī)房運(yùn)行視頻監(jiān)控、辦公自動(dòng)化和黨建系統(tǒng)等非核心業(yè)務(wù)系統(tǒng),現(xiàn)有設(shè)備使用時(shí)間較久。
1.2需求分析
目前,該企業(yè)業(yè)務(wù)系統(tǒng)管理方式較為簡(jiǎn)單,需要通過(guò)存儲(chǔ)備份技術(shù)提供整理的數(shù)據(jù)管理提升數(shù)據(jù)的可靠性、可用性,實(shí)現(xiàn)存儲(chǔ)資源的容量增加和性能擴(kuò)展,同時(shí),通過(guò)備份系統(tǒng)實(shí)現(xiàn)對(duì)現(xiàn)有存儲(chǔ)環(huán)境數(shù)據(jù)的備份管理,確保數(shù)據(jù)的安全和可恢復(fù)。具體目標(biāo)包括以下5點(diǎn):①滿(mǎn)足業(yè)務(wù)系統(tǒng)增長(zhǎng)的數(shù)據(jù)存儲(chǔ)要求;②解決數(shù)據(jù)無(wú)法統(tǒng)一規(guī)劃、分配、管理和性能調(diào)優(yōu),且存儲(chǔ)性能相對(duì)較低的問(wèn)題;③集中的統(tǒng)一存儲(chǔ)系統(tǒng),可使成本降至最低;④解決數(shù)據(jù)分散存儲(chǔ)問(wèn)題,這樣會(huì)增加管理成本;⑤對(duì)個(gè)人電腦上的重要數(shù)據(jù)進(jìn)行集中存儲(chǔ)管理。
1.3建設(shè)目標(biāo)
通過(guò)整體建設(shè)考慮,主要建設(shè)目標(biāo)可分為2步實(shí)現(xiàn):①數(shù)據(jù)存儲(chǔ)建設(shè)。建設(shè)基于存儲(chǔ)備份平臺(tái)的存儲(chǔ)系統(tǒng),將分散、獨(dú)立的各個(gè)平臺(tái)業(yè)務(wù)系統(tǒng)組成一個(gè)高速存儲(chǔ)的SAN網(wǎng)絡(luò),集中管理降低了存儲(chǔ)資源管理的復(fù)雜性。同時(shí),為個(gè)人重要數(shù)據(jù)提供了集中數(shù)據(jù)存儲(chǔ)業(yè)務(wù),避免了因電腦損壞或因其他原因?qū)е碌臄?shù)據(jù)丟失。②備份系統(tǒng)建設(shè)。通過(guò)帶有重復(fù)數(shù)據(jù)刪除技術(shù)的虛擬帶庫(kù)結(jié)合備份軟件進(jìn)行備份系統(tǒng)建設(shè),可確保ERP、PLM等核心業(yè)務(wù)數(shù)據(jù)的安全、可靠,同時(shí),可長(zhǎng)期保存該數(shù)據(jù),且數(shù)據(jù)可恢復(fù)。
2存儲(chǔ)備份系統(tǒng)的設(shè)計(jì)方案
2.1數(shù)據(jù)平臺(tái)基礎(chǔ)的架構(gòu)設(shè)計(jì)
根據(jù)數(shù)據(jù)存儲(chǔ)備份的需求分析進(jìn)行數(shù)據(jù)存儲(chǔ)系統(tǒng)的架構(gòu)設(shè)計(jì)。從目前業(yè)務(wù)系統(tǒng)的實(shí)際情況和未來(lái)業(yè)務(wù)系統(tǒng)的建設(shè)規(guī)劃看,整個(gè)核心業(yè)務(wù)系統(tǒng)中數(shù)據(jù)訪問(wèn)模式以數(shù)據(jù)塊訪問(wèn)為主。基于此情況,存儲(chǔ)備份系統(tǒng)的基本架構(gòu)應(yīng)為SAN架構(gòu)。
2.1.1SAN架構(gòu)
存儲(chǔ)區(qū)域網(wǎng)絡(luò)(StorageAreaNetwork)是高性能的網(wǎng)絡(luò),其主要目的是使存儲(chǔ)設(shè)備與計(jì)算機(jī)系統(tǒng)連接并通信。在進(jìn)行SAN架構(gòu)設(shè)計(jì)時(shí),應(yīng)從以下幾方面考慮。
2.1.2性能
作為整個(gè)信息基礎(chǔ)架構(gòu)的核心基礎(chǔ)架構(gòu),SAN架構(gòu)應(yīng)能滿(mǎn)足多業(yè)務(wù)、大并發(fā)時(shí)的性能需求,因此,在設(shè)計(jì)SAN架構(gòu)時(shí)應(yīng)考慮具備高性能,同時(shí),能支撐多業(yè)務(wù)并訪問(wèn)的存儲(chǔ)系統(tǒng)。
2.1.3可靠性
可靠性是存儲(chǔ)系統(tǒng)的必須具備的條件,應(yīng)提供“99.999%”的可靠性,所有關(guān)鍵的部件都應(yīng)是冗余配置。從數(shù)據(jù)保護(hù)的角度看,不同的RAID保護(hù)機(jī)制應(yīng)可混合使用,以為不同的業(yè)務(wù)系統(tǒng)提供相應(yīng)的數(shù)據(jù)保護(hù)機(jī)制。SAN網(wǎng)絡(luò)系統(tǒng)至少應(yīng)配置2臺(tái)光纖交換機(jī),以保證數(shù)據(jù)訪問(wèn)鏈路是冗余的。
2.1.4可擴(kuò)展性
好的信息基礎(chǔ)架構(gòu)必須能提供足夠的擴(kuò)展能力,其中,包括性能的擴(kuò)展、功能的擴(kuò)展和規(guī)模的擴(kuò)展等。NAS架構(gòu)是指網(wǎng)絡(luò)附加存儲(chǔ)(NetworkAttachedStorage),是連接到網(wǎng)絡(luò)并提供文件訪問(wèn)服務(wù)的存儲(chǔ)系統(tǒng)。
2.2數(shù)據(jù)存儲(chǔ)方案和邏輯架構(gòu)
在該企業(yè)的業(yè)務(wù)系統(tǒng)中,考慮建立以SAN+NAS為核心的存儲(chǔ)系統(tǒng)。考慮未來(lái)可能會(huì)有新的業(yè)務(wù)系統(tǒng)增加到現(xiàn)有環(huán)境中,因此,需要構(gòu)建穩(wěn)定、靈活的存儲(chǔ)體系。系統(tǒng)具體包括以下6部分:①光纖交換機(jī)。作為核心鏈接節(jié)點(diǎn)存在,東、西區(qū)機(jī)房都要求有2臺(tái)冗余配置。②光纖。實(shí)現(xiàn)容災(zāi)端的連接,連接備份設(shè)備,光纖要求有2條冗余設(shè)計(jì)。③核心存儲(chǔ)陣列。作為集中存儲(chǔ)、管理的中心存在,滿(mǎn)足數(shù)據(jù)增長(zhǎng)的需要。④其他存儲(chǔ)陣列。其性能較差、容量較小,作為二級(jí)存儲(chǔ)設(shè)備存儲(chǔ)存在。⑤備份服務(wù)器。安裝備份軟件,配置備份策略。⑥備份設(shè)備。支持消重技術(shù),保障數(shù)據(jù)的長(zhǎng)期儲(chǔ)存。
2.2.1方案描述
SAN存儲(chǔ)空間通過(guò)2臺(tái)FCSAN交換機(jī)提供冗余互聯(lián)。SAN存儲(chǔ)空間供原有業(yè)務(wù)系統(tǒng)數(shù)據(jù)存儲(chǔ),比如將EPR、PLM系統(tǒng)數(shù)據(jù)遷移到新購(gòu)的存儲(chǔ)設(shè)備上,通過(guò)新存儲(chǔ)優(yōu)秀的性能,可提高原有業(yè)務(wù)系統(tǒng)的性能和存儲(chǔ)空間;NAS存儲(chǔ)空間主要用于個(gè)人PC數(shù)據(jù)資料的統(tǒng)一集中管理,確保數(shù)據(jù)不因個(gè)人電腦故障而丟失。
2.2.2磁盤(pán)規(guī)劃
在本次配置中,考慮根據(jù)需求選用SAS磁盤(pán),配置40塊10000轉(zhuǎn)的600GBSAS磁盤(pán)提供數(shù)據(jù)存儲(chǔ)能力,這樣既能保證關(guān)鍵業(yè)務(wù)的快速響應(yīng),也能確保最優(yōu)的性?xún)r(jià)比。
2.3數(shù)據(jù)備份方案
硬件采用虛擬磁帶庫(kù)設(shè)備接入SAN網(wǎng)絡(luò)作為備份設(shè)備。此外,采用備份軟件可實(shí)現(xiàn)對(duì)所有備份主機(jī)系統(tǒng)的備份管理。以下針對(duì)不同的業(yè)務(wù)類(lèi)型展開(kāi)備份策略設(shè)計(jì)。
2.3.1數(shù)據(jù)庫(kù)類(lèi)數(shù)據(jù)備份每周1次全備份,本周內(nèi)其他時(shí)間每天進(jìn)行1次增量備份,備份數(shù)據(jù)保留6個(gè)月。
2.3.2應(yīng)用程序類(lèi)數(shù)據(jù)備份每月進(jìn)行1次全備份,備份數(shù)據(jù)保存3個(gè)月。
2.3.3配置文件類(lèi)數(shù)據(jù)備份每月進(jìn)行1次全備份,備份數(shù)據(jù)保存3個(gè)月。
一、存儲(chǔ)技術(shù)概述
傳統(tǒng)的存儲(chǔ)技術(shù),如磁盤(pán)、光盤(pán)等已經(jīng)不能滿(mǎn)足處理海量數(shù)據(jù)的需求,需要有一個(gè)前瞻性的存儲(chǔ)體系架構(gòu)來(lái)保證業(yè)務(wù)的快速增長(zhǎng)。在這種背景下,網(wǎng)絡(luò)存儲(chǔ)技術(shù)應(yīng)運(yùn)而生。該技術(shù)主要利用網(wǎng)絡(luò)技術(shù)實(shí)現(xiàn)數(shù)據(jù)的異地存儲(chǔ),即數(shù)據(jù)不直接存儲(chǔ)于服務(wù)器本地硬盤(pán)上,而是通過(guò)網(wǎng)絡(luò)保存在服務(wù)器可訪問(wèn)的專(zhuān)門(mén)設(shè)備上。
技術(shù)上比較成熟的3種主要存儲(chǔ)方式是摘要:直接附加存儲(chǔ)(DAS)、網(wǎng)絡(luò)附加存儲(chǔ)(NAS)和存儲(chǔ)區(qū)域網(wǎng)絡(luò)SAN。幾種存儲(chǔ)方式特征各異,應(yīng)根據(jù)不同的需求來(lái)選取不同的存儲(chǔ)技術(shù)。
二、從應(yīng)用角度出發(fā),以數(shù)據(jù)為中心的存儲(chǔ)
建立存儲(chǔ)系統(tǒng)的目的不過(guò)乎數(shù)據(jù)治理、數(shù)據(jù)利用和數(shù)據(jù)保護(hù)3個(gè)方面。
就數(shù)據(jù)治理能力而言,NAS具有一定的上風(fēng),主要在于安裝、配置的方便快捷。
在數(shù)據(jù)利用方面,SAN的速度占有上風(fēng),NAS略遜一籌。SAN結(jié)構(gòu)中專(zhuān)門(mén)面向高性能存儲(chǔ)要求而開(kāi)發(fā)的光纖通道協(xié)議非常優(yōu)秀。和傳統(tǒng)存儲(chǔ)協(xié)議SCSI相比,光纖通道技術(shù)在帶寬、連接能力、I/O性能、連接間隔、擴(kuò)展能力等方面都有明顯上風(fēng)。而且,光纖通道技術(shù)支持交換式連接,可以構(gòu)建類(lèi)似傳統(tǒng)以太網(wǎng)結(jié)構(gòu)的系統(tǒng),具有很強(qiáng)的擴(kuò)展能力。而NAS結(jié)構(gòu)的數(shù)據(jù)傳輸途徑是傳統(tǒng)以太網(wǎng)協(xié)議,不是專(zhuān)門(mén)針對(duì)存儲(chǔ)數(shù)據(jù)要求的。
一般來(lái)說(shuō),NAS適用于工作組級(jí)和部分級(jí)的存儲(chǔ),或者是用于諸如Web服務(wù)那樣需要高效存取文件的環(huán)境。NAS解決方案是低本錢(qián)、易安裝的點(diǎn)式方案,適用于長(zhǎng)間隔的小數(shù)據(jù)塊傳輸。而SAN解決方案則是企業(yè)規(guī)模的方案,要傳送大量的數(shù)據(jù),需要非常先進(jìn)的計(jì)劃,而且采用光纖通道(FC)技術(shù)和SAN治理軟件,可應(yīng)用于關(guān)鍵任務(wù),基于交易的數(shù)據(jù)庫(kù)應(yīng)用處理。用戶(hù)在選擇存儲(chǔ)系統(tǒng)結(jié)構(gòu)時(shí),可以從實(shí)際情況出發(fā),選擇采用SAN或NAS作為基本系統(tǒng)結(jié)構(gòu)。SAN是目前公認(rèn)的最具有發(fā)展?jié)摿Φ拇鎯?chǔ)技術(shù)方案,就發(fā)展趨向而言,在應(yīng)用層面SAN和NAS將實(shí)現(xiàn)充分地融合,SAN提供速度,NAS提供由文件處理帶來(lái)的協(xié)作性,它們的結(jié)合將是非常完美的關(guān)鍵存儲(chǔ)系統(tǒng)的解決方案。
在數(shù)據(jù)保護(hù)方面,SAN 和NAS 結(jié)構(gòu)都具有非常好的數(shù)據(jù)保護(hù)能力。它們都可提供冗余結(jié)構(gòu),實(shí)現(xiàn)高效率的數(shù)據(jù)備份和遠(yuǎn)程容災(zāi)。一般來(lái)說(shuō),用戶(hù)的數(shù)據(jù)在網(wǎng)絡(luò)中較為分散時(shí),適合采用SAN的方式實(shí)現(xiàn)高效的存儲(chǔ)和備份。
三、石油企業(yè)對(duì)數(shù)據(jù)存儲(chǔ)的要求
由于石油企業(yè)其業(yè)務(wù)的非凡性,數(shù)據(jù)存儲(chǔ)系統(tǒng)要滿(mǎn)足幾個(gè)要求摘要:
(一)海量存儲(chǔ)能力。地震勘探、測(cè)井解釋等生產(chǎn)和科研數(shù)據(jù)都是海量的,因此必須擁有大容量甚至超大容量的存儲(chǔ)系統(tǒng)。
(二)足夠的數(shù)據(jù)傳輸能力,保證不同用戶(hù)對(duì)數(shù)據(jù)的不同需求。
近年來(lái),鎮(zhèn)江供電公司企業(yè)信息化不斷深入發(fā)展,部署了大量的計(jì)算機(jī)設(shè)備、業(yè)務(wù)應(yīng)用系統(tǒng),網(wǎng)絡(luò)資源已經(jīng)幾乎布署到了每一個(gè)專(zhuān)職崗位。隨著這些應(yīng)用的不斷完善,大量的業(yè)務(wù)數(shù)據(jù)和個(gè)人文檔需要備份,這樣,數(shù)據(jù)存儲(chǔ)的矛盾就日漸突出。在很多情況下,計(jì)算機(jī)存儲(chǔ)的數(shù)據(jù)丟失可能演變成一場(chǎng)滅項(xiàng)之災(zāi)。因此信息存儲(chǔ)系統(tǒng)的可靠性和可用性,數(shù)據(jù)備份和災(zāi)難恢復(fù)能力是計(jì)算機(jī)網(wǎng)絡(luò)用戶(hù)首先關(guān)心的問(wèn)題。網(wǎng)絡(luò)數(shù)據(jù)存儲(chǔ)技術(shù)的主要目標(biāo)就是要實(shí)現(xiàn)數(shù)據(jù)存儲(chǔ)的安全性、高效性、可靠性、可管理性以及快速恢復(fù)能力和強(qiáng)大的網(wǎng)絡(luò)特性。存儲(chǔ)備份技術(shù)不僅僅指數(shù)據(jù)的簡(jiǎn)單備份,而且還包括內(nèi)容及備份的管理等多方面。
1、網(wǎng)絡(luò)存儲(chǔ)技術(shù)
網(wǎng)絡(luò)存儲(chǔ)技術(shù)是基于數(shù)據(jù)存儲(chǔ)的一種通用網(wǎng)絡(luò)術(shù)語(yǔ)。網(wǎng)絡(luò)存儲(chǔ)結(jié)構(gòu)大致分為三種:直連式存儲(chǔ)(DAS):這是一種直接與主機(jī)系統(tǒng)相連接的存儲(chǔ)設(shè)備,如作為服務(wù)器的計(jì)算機(jī)內(nèi)部硬件驅(qū)動(dòng)。到目前為止,DAS仍是計(jì)算機(jī)系統(tǒng)中最常用的數(shù)據(jù)存儲(chǔ)方法。存儲(chǔ)網(wǎng)絡(luò)(SAN):SAN是指存儲(chǔ)設(shè)備相互連接且與一臺(tái)服務(wù)器或一個(gè)服務(wù)器群相連的網(wǎng)絡(luò)。其中的服務(wù)器用作SAN的接入點(diǎn)。在有些配置中,SAN也與網(wǎng)絡(luò)相連。SAN中將特殊交換機(jī)當(dāng)作連接設(shè)備。它們看起來(lái)很像常規(guī)的以太網(wǎng)絡(luò)交換機(jī),是SAN中的連通點(diǎn)。SAN使得在各自網(wǎng)絡(luò)上實(shí)現(xiàn)相互通信成為可能,同時(shí)并帶來(lái)了很多有利條件。網(wǎng)絡(luò)存儲(chǔ)設(shè)備(NAS):NAS是一種采用直接與網(wǎng)絡(luò)介質(zhì)相連的特殊設(shè)備實(shí)現(xiàn)數(shù)據(jù)存儲(chǔ)的機(jī)制。由于這些設(shè)備都分配有IP地址,所以客戶(hù)機(jī)通過(guò)充當(dāng)數(shù)據(jù)網(wǎng)關(guān)的服務(wù)器可以對(duì)其進(jìn)行存取訪問(wèn),甚至在某些情況下,不需要任何中間介質(zhì)客戶(hù)機(jī)也可以直接訪問(wèn)這些設(shè)備。
2、Wallstor網(wǎng)騰WIP6系列IP SAN存儲(chǔ)系統(tǒng)
Wallstor WIP6系列網(wǎng)絡(luò)存儲(chǔ)采用一體化NAS/IPSAN/FCSAN設(shè)計(jì),支持多功能模塊,便于用戶(hù)按照自己的環(huán)境要求選用合適的功能,該存儲(chǔ)性能突出,易于管理,安裝簡(jiǎn)便,能夠真正做到即插即用。Wallstor存儲(chǔ)系統(tǒng)基于成熟穩(wěn)定的嵌入式Linux系統(tǒng),高性能的四核心xeon架構(gòu)平臺(tái),純64位設(shè)計(jì)體系,通過(guò)對(duì)Linux內(nèi)核及rootfs的精簡(jiǎn)和對(duì)RAID算法、存儲(chǔ)協(xié)議棧、網(wǎng)絡(luò)協(xié)議棧、文件系統(tǒng)的大量?jī)?yōu)化,可以滿(mǎn)足普通中小企業(yè)的數(shù)據(jù)存儲(chǔ)需求。
3、鎮(zhèn)江供電公司信息化建設(shè)在數(shù)據(jù)存儲(chǔ)和數(shù)據(jù)安全方面的需求
大容量存儲(chǔ):信息集中化的發(fā)展必然帶來(lái)大量數(shù)據(jù)的集中,因此,存儲(chǔ)容量的需求是非常巨大的。尤其是高效、可靠、可管理的存儲(chǔ)硬件和軟件,能夠滿(mǎn)足服務(wù)器數(shù)據(jù)集中、個(gè)人文檔數(shù)據(jù)集中的存儲(chǔ)。
數(shù)據(jù)備份系統(tǒng):業(yè)務(wù)應(yīng)用數(shù)據(jù)作為鎮(zhèn)江供電公司信息系統(tǒng)的核心,對(duì)數(shù)據(jù)進(jìn)行集中地備份管理、顯得尤為重要。因此,需要一個(gè)全方位、多層次的備份系統(tǒng)。
4、實(shí)施解決方案
為解決鎮(zhèn)江供電公司信息化發(fā)展過(guò)程中大量的業(yè)務(wù)數(shù)據(jù)和個(gè)人文檔的數(shù)據(jù)備份矛盾,我們?cè)谠O(shè)計(jì)存儲(chǔ)系統(tǒng)時(shí),充分考慮了系統(tǒng)基本功能的實(shí)現(xiàn)和它們的伸縮性、擴(kuò)展性和集成性方面的需求,進(jìn)行了系統(tǒng)的設(shè)計(jì),具體拓?fù)鋱D如下:
存儲(chǔ)方案設(shè)計(jì):經(jīng)過(guò)對(duì)多個(gè)存儲(chǔ)設(shè)備方案的分析、比對(duì),我們最終決定存儲(chǔ)設(shè)備選用Wallstor網(wǎng)騰WIP6系列IP SAN存儲(chǔ)系統(tǒng),客戶(hù)端使用FTP、CIFS、ISCSI target盤(pán)等各種網(wǎng)絡(luò)協(xié)議,通過(guò)高速傳輸端口進(jìn)行各類(lèi)數(shù)據(jù)的上傳、下載。對(duì)于重要數(shù)據(jù),可以進(jìn)行權(quán)限管理以及分級(jí)權(quán)限管理來(lái)保護(hù),增加其數(shù)據(jù)的安全性。Wallstor網(wǎng)騰存儲(chǔ)系統(tǒng)具有以下特性:
存儲(chǔ)系統(tǒng)能夠支持多種RAID算法,保證系統(tǒng)數(shù)據(jù)的安全可靠;支持CIFS,NFS,AFP,iSCSI,WebDAV等各種網(wǎng)絡(luò)存儲(chǔ)協(xié)議;針對(duì)文件系統(tǒng)、塊設(shè)備、RAID算法以及網(wǎng)絡(luò)協(xié)議棧做了多種優(yōu)化,可達(dá)到超高的存儲(chǔ)性能,在大規(guī)模監(jiān)控應(yīng)用領(lǐng)域可以滿(mǎn)足幾百路碼流同時(shí)寫(xiě)入;無(wú)需復(fù)雜且耗時(shí)的安裝過(guò)程,將硬件安裝完成后,直接開(kāi)機(jī)即可運(yùn)行,通過(guò)瀏覽器進(jìn)行配置和管理;內(nèi)置專(zhuān)業(yè)備份軟件,支持Windows,Linux文件備份,操作系統(tǒng)備份,各種數(shù)據(jù)庫(kù)備份,可以為您提供整套的存儲(chǔ)備份解決方案;內(nèi)置文件系統(tǒng)檢測(cè)和恢復(fù)工具,可以在文件系統(tǒng)損壞的情況下對(duì)文件系統(tǒng)進(jìn)行最大程度的恢復(fù)。
備份方案設(shè)計(jì):我們?cè)趥浞莘桨傅脑O(shè)計(jì)上為用戶(hù)提供了完全備份、差異備份和增量備份三種備份方案。完全備份:備份全部選中的文件夾,并不依賴(lài)文件的存檔屬性來(lái)確定備份哪些文件。在備份過(guò)程中,任何現(xiàn)有的標(biāo)記都被清除,每個(gè)文件都被標(biāo)記為已備份。換言之,清除存檔屬性。差異備份:備份自上一次完全備份之后有變化的數(shù)據(jù)。差異備份過(guò)程中,只備份有標(biāo)記的那些選中的文件和文件夾。它不清除標(biāo)記,也即備份后不標(biāo)記為已備份文件。換言之,不清除存檔屬性。增量備份:備份自上一次備份(包含完全備份、差異備份、增量備份)之后有變化的數(shù)據(jù)。增量備份過(guò)程中,只備份有標(biāo)記的選中的文件和文件夾,它清除標(biāo)記,既:備份后標(biāo)記文件,換言之,清除存檔屬性。
5、總結(jié)
信息時(shí)代的核心無(wú)疑是信息技術(shù),而信息技術(shù)的核心則在于信息的處理與存儲(chǔ)。由于越來(lái)越多的信息變成了電子信息,特別是計(jì)算機(jī)網(wǎng)絡(luò)應(yīng)用的迅速增長(zhǎng)更大大增加了對(duì)信息存儲(chǔ)產(chǎn)品的需求量和對(duì)信息備份技術(shù)的安全性、可靠性的要求。因此,在鎮(zhèn)江供電公司信息化建設(shè)的進(jìn)程中如何實(shí)現(xiàn)有效的存儲(chǔ)、交流、管理和備份數(shù)據(jù)無(wú)疑是決定公司信息化成敗的關(guān)鍵。在網(wǎng)絡(luò)存儲(chǔ)備份技術(shù)日新月異的今天雖然新概念,新技術(shù)層出不窮,但是只有結(jié)合鎮(zhèn)江供電公司自身的特點(diǎn),找到最適合公司發(fā)展需求的技術(shù)途徑才是根本。既不可以盲目跟風(fēng)新技術(shù),也不可以對(duì)數(shù)據(jù)增長(zhǎng)帶來(lái)的需求視而不見(jiàn)。
參考文獻(xiàn)
[1]吳海濤.網(wǎng)絡(luò)電氣自動(dòng)化發(fā)展[J].中國(guó)高新技術(shù)企業(yè),2012,14:42-43.
[2]張麗萍.基于XML的多數(shù)據(jù)庫(kù)系統(tǒng)集成數(shù)據(jù)模型[J].低壓電器,2013,24(7):23-25.
中圖分類(lèi)號(hào):TP39文獻(xiàn)標(biāo)識(shí)碼A文章編號(hào)1006-0278(2015)12-151-01
存儲(chǔ)即服務(wù)的概念不斷深入人心,云存儲(chǔ)作為云計(jì)算概念的發(fā)展和延伸得到了快速的發(fā)展。云存儲(chǔ)是一種全新的存儲(chǔ)服務(wù)模式,有效地整合了大規(guī)模的存儲(chǔ)資源并把存儲(chǔ)以服務(wù)的形式提供給用戶(hù)。云存儲(chǔ)實(shí)現(xiàn)了合理的數(shù)據(jù)存儲(chǔ)和高效的數(shù)據(jù)管理,有效地減輕了用戶(hù)對(duì)數(shù)據(jù)存儲(chǔ)和管理的負(fù)擔(dān),同時(shí)也降低了用戶(hù)的開(kāi)銷(xiāo)。隨著云存儲(chǔ)服務(wù)和研究的不斷深入,政府部門(mén)和企業(yè)數(shù)據(jù)外包服務(wù)等應(yīng)用成為云存儲(chǔ)應(yīng)用的重要部分。
隨著云存儲(chǔ)技術(shù)的快速發(fā)展,數(shù)據(jù)安全問(wèn)題得到了產(chǎn)業(yè)界和學(xué)術(shù)界的廣泛關(guān)注。絕大部分用戶(hù)希望在不損害數(shù)據(jù)原有安全性的前提下使用云存儲(chǔ)服務(wù)。針對(duì)云存儲(chǔ)中數(shù)據(jù)保護(hù)需求,研究者開(kāi)始采用密文訪問(wèn)控制機(jī)制來(lái)保護(hù)數(shù)據(jù)在存儲(chǔ)和共享過(guò)程中的安全。然而,在云存儲(chǔ)中采用密文訪問(wèn)控制機(jī)制會(huì)較為明顯地增加用戶(hù)使用開(kāi)銷(xiāo),降低用戶(hù)訪問(wèn)云存儲(chǔ)的效率。特別是當(dāng)數(shù)據(jù)共享規(guī)模大、用戶(hù)屬性較少、訪問(wèn)權(quán)限變更頻繁、數(shù)據(jù)訪問(wèn)集中時(shí),采用密文訪問(wèn)控制機(jī)制會(huì)明顯增加用戶(hù)訪問(wèn)云存儲(chǔ)的延時(shí)。如何有效應(yīng)對(duì)密鑰分發(fā)復(fù)雜、權(quán)限撤銷(xiāo)開(kāi)銷(xiāo)大、用戶(hù)資源受限等挑戰(zhàn),降低采用密文訪問(wèn)控制機(jī)制的額外開(kāi)銷(xiāo),是云存儲(chǔ)數(shù)據(jù)安全保護(hù)研究中亟待解決的關(guān)鍵問(wèn)題。
一、密文訪問(wèn)控制的基本應(yīng)用場(chǎng)景
數(shù)據(jù)所有者主要負(fù)責(zé)數(shù)據(jù)加密和密文分發(fā)操作,數(shù)據(jù)一般采用對(duì)稱(chēng)算法加密后托管到云端,然后通過(guò)安全信道或其他可靠手段將密鑰分發(fā)給授權(quán)的數(shù)據(jù)使用者。數(shù)據(jù)使用者從云存儲(chǔ)中取回?cái)?shù)據(jù)后解密使用,采用不同密文訪問(wèn)控制技術(shù)時(shí)的解密密鑰獲取過(guò)程不盡相同。云存儲(chǔ)服務(wù)提供商只需要提供相應(yīng)的數(shù)據(jù)存儲(chǔ)能力,響應(yīng)數(shù)據(jù)讀寫(xiě)請(qǐng)求即可。系統(tǒng)管理員負(fù)責(zé)配置云存儲(chǔ)服務(wù),完成密文訪問(wèn)控制機(jī)制初始化,管理維護(hù)系統(tǒng)用戶(hù)的身份證書(shū)。
二、簡(jiǎn)單個(gè)人用戶(hù)密文訪問(wèn)控制實(shí)現(xiàn)方案
用戶(hù)將數(shù)據(jù)加密后存放到云存儲(chǔ)中,使用時(shí)取回?cái)?shù)據(jù)并解密。簡(jiǎn)單個(gè)人用戶(hù)很少需要共享數(shù)據(jù),因此可以簡(jiǎn)化密文訪問(wèn)控制過(guò)程,降低用戶(hù)開(kāi)銷(xiāo),簡(jiǎn)單個(gè)人用戶(hù)密文訪問(wèn)控制實(shí)現(xiàn)方案的基本流程,如圖1所示。
三、總結(jié)
本文在深入分析云存儲(chǔ)中數(shù)據(jù)安全防護(hù)需求的基礎(chǔ)上,綜合現(xiàn)有密文訪問(wèn)控制技術(shù)和新型密碼技術(shù),提出了云存儲(chǔ)中密文訪問(wèn)控制模型的數(shù)學(xué)描述,并分析了影響模型性能的主要因素。然后分別針對(duì)簡(jiǎn)單個(gè)人用戶(hù)、社區(qū)個(gè)人用戶(hù)和企業(yè)用戶(hù),給出了模型的多種不同實(shí)現(xiàn)方案。其中,基本密文訪問(wèn)控制方案能夠?yàn)楹?jiǎn)單個(gè)人用戶(hù)的數(shù)據(jù)云端存儲(chǔ)和共享過(guò)程提供簡(jiǎn)潔、有效的保護(hù)。基于本地的云存儲(chǔ)訪問(wèn)效率優(yōu)化技術(shù)。企業(yè)用戶(hù)使用云存儲(chǔ)時(shí)具有數(shù)據(jù)量大、共享頻繁、訪問(wèn)相對(duì)集中等特征,如果簡(jiǎn)單地采用密文訪問(wèn)控制機(jī)制來(lái)保護(hù)數(shù)據(jù)存儲(chǔ)和共享安全,則會(huì)降低云存儲(chǔ)的訪問(wèn)效率。基于本地的云存儲(chǔ)訪問(wèn)效率優(yōu)化技術(shù),能夠在企業(yè)已有計(jì)算、存儲(chǔ)資源上部署本地,然后通過(guò)本地來(lái)代替員工完成密文訪問(wèn)控制相關(guān)操作、并緩存頻繁訪問(wèn)的數(shù)據(jù),最終有效地降低采用密文訪問(wèn)控制機(jī)制對(duì)企業(yè)用戶(hù)的影響。以上研究成果針對(duì)云存儲(chǔ)數(shù)據(jù)安全需求,在保證數(shù)據(jù)安全的前提下提升了密文訪問(wèn)控制機(jī)制的效率,促進(jìn)了密文訪問(wèn)控制技術(shù)在云存儲(chǔ)數(shù)據(jù)安全保護(hù)中的進(jìn)一步應(yīng)用,具有一定的理論意義和實(shí)際應(yīng)用價(jià)值。
參考文獻(xiàn):
[1]李家治.云存儲(chǔ)中基于屬性的密文檢索與訪問(wèn)控制[D].華東師范大學(xué),2015.
引言:云計(jì)算在當(dāng)今互聯(lián)網(wǎng)信息時(shí)代的普及具有必然意義,尤其是近幾年,越來(lái)越多的學(xué)者研究人員開(kāi)始對(duì)云計(jì)算應(yīng)用至各個(gè)領(lǐng)域的理論效用進(jìn)行研究探討,同時(shí)受到多領(lǐng)域多行業(yè)的關(guān)注與應(yīng)用。數(shù)據(jù)的存儲(chǔ)便利與龐大含量是云計(jì)算數(shù)據(jù)存儲(chǔ)的最大特點(diǎn),企業(yè)與個(gè)人更多地開(kāi)始采用云存儲(chǔ)進(jìn)行數(shù)據(jù)儲(chǔ)存,安全問(wèn)題是人們唯一注重的問(wèn)題,因此,本文針對(duì)安全數(shù)據(jù)庫(kù)的構(gòu)建,提出了對(duì)稱(chēng)加密與非對(duì)稱(chēng)加密的結(jié)合加密法,實(shí)現(xiàn)對(duì)數(shù)據(jù)的安全存儲(chǔ)。
一、云計(jì)算的概念與數(shù)據(jù)安全存儲(chǔ)分析
1.1云計(jì)算數(shù)據(jù)存儲(chǔ)概念
云計(jì)算的發(fā)展基于互聯(lián)網(wǎng)信息服務(wù)業(yè)的發(fā)展,云是對(duì)互聯(lián)網(wǎng)龐大信息量的比喻說(shuō)法,云計(jì)算的服務(wù)資源內(nèi)容包括網(wǎng)絡(luò)、服務(wù)器、存儲(chǔ)、應(yīng)用軟件等。云計(jì)算的出現(xiàn)是繼上世紀(jì)八十年代電腦客戶(hù)端-服務(wù)器改革后的又一大重要革新[1],云計(jì)算的數(shù)據(jù)存儲(chǔ),即云存儲(chǔ)是近幾年提出的基于云計(jì)算的延長(zhǎng)概念,通過(guò)集群應(yīng)用、網(wǎng)絡(luò)技術(shù)等功能,將互聯(lián)網(wǎng)中大量的存儲(chǔ)設(shè)備進(jìn)行統(tǒng)一調(diào)動(dòng)服務(wù)的系統(tǒng),能夠及時(shí)對(duì)外提供數(shù)據(jù)存儲(chǔ)或業(yè)務(wù)訪問(wèn)。在存儲(chǔ)服務(wù)功能中,安全性是最受關(guān)注的,云存儲(chǔ)通過(guò)分散性系統(tǒng)實(shí)現(xiàn)存儲(chǔ)系統(tǒng)的整合建立在一定程度上要經(jīng)得住安全考驗(yàn),才能最大程度得到運(yùn)用。
1.2數(shù)據(jù)安全存儲(chǔ)分析
云計(jì)算的數(shù)據(jù)存儲(chǔ)便利性為人們的日常工作減輕了很大的負(fù)擔(dān),有效地推動(dòng)了互聯(lián)網(wǎng)信息大數(shù)據(jù)時(shí)代的發(fā)展進(jìn)程,由于云計(jì)算受到許多大型企業(yè)、專(zhuān)業(yè)機(jī)構(gòu)、國(guó)家機(jī)構(gòu)等廣泛應(yīng)用,因此,數(shù)據(jù)的安全性問(wèn)題至關(guān)重要。大型企業(yè)的應(yīng)用中一旦出現(xiàn)數(shù)據(jù)被盜、數(shù)據(jù)被破壞等情況,將會(huì)導(dǎo)致企業(yè)機(jī)密的泄露,造成嚴(yán)重的經(jīng)濟(jì)損失與不良的社會(huì)影響,也會(huì)給云計(jì)算的數(shù)據(jù)存儲(chǔ)帶來(lái)嚴(yán)重打擊,制約云計(jì)算的發(fā)展[2]。云計(jì)算應(yīng)用的是分布非常廣泛的網(wǎng)絡(luò),從某種意義上講,世界上每一網(wǎng)電腦都是云計(jì)算的終端節(jié)點(diǎn),所以,一旦缺乏嚴(yán)密的安全保護(hù),所有節(jié)點(diǎn)都可以隨時(shí)進(jìn)行數(shù)據(jù)的訪問(wèn)與盜取,這種節(jié)點(diǎn)的廣泛性是云計(jì)算最大的弊端,主要表現(xiàn)在數(shù)據(jù)的傳輸過(guò)程、恢復(fù)過(guò)程或長(zhǎng)期儲(chǔ)存上。
二、云計(jì)算環(huán)境下的數(shù)據(jù)安全存儲(chǔ)中心構(gòu)建
就目前國(guó)內(nèi)的云計(jì)算數(shù)據(jù)安全存儲(chǔ)中心構(gòu)建方案來(lái)看,采用的都是數(shù)據(jù)加密算法,通常由對(duì)稱(chēng)加密算法與非對(duì)稱(chēng)加密算法兩種類(lèi)型,一般對(duì)稱(chēng)加密算法的應(yīng)用范圍比較大,相比較非對(duì)稱(chēng)加密算法,這種加密方式更便于安全數(shù)據(jù)中心的構(gòu)建,因此往往被應(yīng)用于數(shù)據(jù)量比較大的數(shù)據(jù)傳輸加密[3]。而非對(duì)稱(chēng)加密法最大的特性在于能夠?qū)⒓用芘c解密進(jìn)行區(qū)別設(shè)計(jì),兩相獨(dú)立,增加了稻蕕陌踩性。運(yùn)用加密法構(gòu)建安全的數(shù)據(jù)存儲(chǔ)中心有以下兩個(gè)方面:
2.1加密方案
本文站在安全最大化的角度,運(yùn)用對(duì)稱(chēng)加密與非對(duì)稱(chēng)加密結(jié)合的方式進(jìn)行安全中心的構(gòu)建。在數(shù)據(jù)加密過(guò)程中,首先利用對(duì)稱(chēng)加密算法進(jìn)行密鑰生成,隨之會(huì)產(chǎn)生相對(duì)應(yīng)的安全信息校驗(yàn)密鑰,接著利用非對(duì)稱(chēng)加密法將該安全信息校驗(yàn)密鑰進(jìn)行加密,如此一來(lái),數(shù)據(jù)等于被上了多道鎖,將進(jìn)行過(guò)加密算法處理的數(shù)據(jù)信息與對(duì)稱(chēng)加密算法的密鑰同時(shí)交給用戶(hù),實(shí)現(xiàn)數(shù)據(jù)最大化安全。在進(jìn)行數(shù)據(jù)加密過(guò)程中,可以把數(shù)據(jù)量比較大的數(shù)據(jù)進(jìn)行對(duì)稱(chēng)加密算法加密,對(duì)數(shù)據(jù)量較小的數(shù)據(jù)進(jìn)行兩者結(jié)合的加密形式,即對(duì)稱(chēng)加密后用非對(duì)稱(chēng)算法進(jìn)行有關(guān)密鑰的再次加密,將兩種密鑰與數(shù)據(jù)共同存儲(chǔ)在云存儲(chǔ)中心,客戶(hù)只需對(duì)非對(duì)稱(chēng)加密的解密密鑰進(jìn)行保存即可。
2.2解密方案
解密過(guò)程需要用戶(hù)利用非對(duì)稱(chēng)加密算法的密鑰,將對(duì)稱(chēng)算法的密鑰進(jìn)行解密,進(jìn)而得到初始密鑰,在利用初始對(duì)稱(chēng)算法進(jìn)行解密即可獲取數(shù)據(jù)信息。這種看似簡(jiǎn)單的對(duì)稱(chēng)與非對(duì)稱(chēng)加密算法結(jié)合的加密形式,其實(shí)具有非常復(fù)雜的內(nèi)涵,通過(guò)對(duì)兩種算法的充分利用,能夠有效避免單一算法的不足給用戶(hù)數(shù)據(jù)造成泄露或損壞,基于密鑰安全的情況下,通過(guò)利用非對(duì)稱(chēng)密鑰進(jìn)行小數(shù)據(jù)對(duì)稱(chēng)加密算法密鑰的校驗(yàn)信息進(jìn)行加密,能夠徹底解決云計(jì)算中數(shù)據(jù)存儲(chǔ)安全的問(wèn)題。
三、結(jié)束語(yǔ)
隨著云計(jì)算技術(shù)被廣泛應(yīng)用于各個(gè)領(lǐng)域與行業(yè),云計(jì)算的數(shù)據(jù)存儲(chǔ),即云存儲(chǔ)受到人們的關(guān)注與追捧,企業(yè)與個(gè)人開(kāi)始熱衷云存儲(chǔ),摒棄了傳統(tǒng)容量有限的數(shù)據(jù)存儲(chǔ)方式,同時(shí)人們也開(kāi)始注重云存儲(chǔ)數(shù)據(jù)安全性問(wèn)題,通過(guò)對(duì)數(shù)據(jù)進(jìn)行對(duì)稱(chēng)加密算法與非對(duì)稱(chēng)加密算法的結(jié)合,達(dá)到了對(duì)數(shù)據(jù)終極安全保護(hù)的目的,消除了用戶(hù)的心理?yè)?dān)憂(yōu),為云計(jì)算的數(shù)據(jù)存儲(chǔ)發(fā)展起到重要推動(dòng)作用。
參 考 文 獻(xiàn)
智能化ISCSI解決方案 終極無(wú)憂(yōu)
存儲(chǔ)技術(shù)經(jīng)歷了直接連接存儲(chǔ)(DAS)、整合的趨勢(shì)(其整合趨勢(shì)包括用NAS文件服務(wù)器合并)、SAN存儲(chǔ)區(qū)域網(wǎng)三個(gè)過(guò)程。
光纖通道是最常用的SAN技術(shù),F(xiàn)C(光纖通道)最初的發(fā)展是為解決并行SCSI磁盤(pán)陣列的邊線問(wèn)題,最終,業(yè)界在SAN應(yīng)用上擴(kuò)展了該項(xiàng)技術(shù),FC在今天還提供了極好的共享存儲(chǔ)的解決方案。然而, 盡管有這么多優(yōu)點(diǎn),實(shí)際部署的FC數(shù)目還是很少。為什么呢?
首先, 對(duì)于大多數(shù)組織來(lái)說(shuō), 部署和擴(kuò)展一個(gè)FC SAN非常昂貴. 在一個(gè)光纖通道環(huán)境里, 適配器、交換機(jī)和將SAN連接到一起的光纖跳線都是非常昂貴的, 使那些大部分的主流市場(chǎng)力不能及。另外, FC SAN的部署和維護(hù)都是很復(fù)雜的, 需要一些特殊的IT專(zhuān)家,而DAS和NAS則不需要.由于FC SAN的復(fù)雜性, 需要一些昂貴的軟件來(lái)簡(jiǎn)化和自動(dòng)化一些操作, 特別是更大型的部署。
智能化的iSCSI解決方案,是基于下一代的存儲(chǔ)設(shè)計(jì),來(lái)處理企業(yè)和技術(shù)方面的問(wèn)題。
因特網(wǎng)SCSI, 或者iSCSI, 將古老的SCSI塊級(jí)協(xié)議與最廣泛使用的以太網(wǎng)技術(shù)聯(lián)合起來(lái),形成了一個(gè)具有以太網(wǎng)的經(jīng)濟(jì)性、熟悉架構(gòu)的高度靈活SAN技術(shù),既有IETF標(biāo)準(zhǔn)的采納, 又有微軟和CISCO等國(guó)際IT供應(yīng)商的支持, iSCSI很快就成為了一個(gè)可選擇的成熟的SAN技術(shù)。
深圳電信提供的存儲(chǔ)服務(wù)解決方案,是以經(jīng)營(yíng)管理數(shù)據(jù)為核心,為數(shù)據(jù)中心用戶(hù)推出在線磁盤(pán)的存儲(chǔ)服務(wù),在線或離線磁盤(pán)備份和恢復(fù)服務(wù)(需定制),存儲(chǔ)區(qū)域網(wǎng)SAN管理及容災(zāi)備份解決方案等,這些服務(wù)為客戶(hù)提供了無(wú)憂(yōu)的存儲(chǔ)解決方案(參見(jiàn)上圖)。
該方案采用基于ISCSI技術(shù)的IP SAN存儲(chǔ)產(chǎn)品 BS3000系列存儲(chǔ)陣列作為提供存儲(chǔ)服務(wù)的設(shè)備。BS3000直接通過(guò)銅纜雙絞線接入千兆以太網(wǎng)絡(luò),所有需要直接訪問(wèn)存儲(chǔ)設(shè)備的主機(jī)直接通過(guò)IP存儲(chǔ)區(qū)域網(wǎng)絡(luò)來(lái)訪問(wèn) BS3000存儲(chǔ)陣列。存儲(chǔ)區(qū)域網(wǎng)絡(luò)采用私網(wǎng)IP地址以確保安全性。IDC機(jī)房以外的服務(wù)器需直接訪問(wèn) BS3000存儲(chǔ)陣列,則要通過(guò)直接專(zhuān)線與存儲(chǔ)區(qū)域網(wǎng)絡(luò)相聯(lián)或通過(guò)VPN的方式與存儲(chǔ)區(qū)域網(wǎng)絡(luò)聯(lián)接。
數(shù)據(jù)安全問(wèn)題不再是可有可無(wú)
隨著城市產(chǎn)業(yè)信息化的發(fā)展,企業(yè)及政府對(duì)IT系統(tǒng)的依賴(lài)程度越來(lái)越高,數(shù)據(jù)安全已成為人們備受關(guān)注的話(huà)題,由于缺乏足夠的技術(shù)資源來(lái)維護(hù)自身的存儲(chǔ)系統(tǒng),自9.11災(zāi)難發(fā)生后,危機(jī)意識(shí)無(wú)一不成為企業(yè)思考的問(wèn)題。
大型企業(yè)如金融服務(wù)公司由于數(shù)據(jù)敏感性和自身的實(shí)力,獨(dú)立創(chuàng)建、運(yùn)營(yíng)自已的容災(zāi)備份中心實(shí)現(xiàn)業(yè)務(wù)持續(xù)性,只不過(guò)是吹灰的功夫。但對(duì)于那些掣肘于技術(shù)、資金的中小企業(yè),既要資金拓展市場(chǎng),又要為信息建設(shè)與存儲(chǔ)投入大量的物力、財(cái)力,面對(duì)企業(yè)信息化問(wèn)題―“愛(ài)也悠悠,恨也悠悠!”。
據(jù)我們對(duì)相關(guān)企業(yè)的走訪了解,自建數(shù)據(jù)容災(zāi)中心意味著購(gòu)買(mǎi)更多的主機(jī)、存儲(chǔ)設(shè)備和相應(yīng)的軟件等,高昂的投資代價(jià)成為中小企業(yè)如鯁在喉的心病。隨著存儲(chǔ)技術(shù)的發(fā)展、虛擬化、IP存儲(chǔ)以及更加豐富和強(qiáng)大的軟件功能的應(yīng)用,災(zāi)備中心的建設(shè)也不拘一格,出于性?xún)r(jià)比考慮,越來(lái)越多的企業(yè)或機(jī)構(gòu)已開(kāi)始采取將其數(shù)據(jù)備份業(yè)務(wù)外包給專(zhuān)業(yè)的存儲(chǔ)服務(wù)商。
據(jù)深圳電信IDC中心技術(shù)部的專(zhuān)家介紹,當(dāng)前企業(yè)的海量信息存儲(chǔ)手段主要為以下兩種方式:一是自建,二是租賃,極少數(shù)跨地區(qū)企業(yè)兩者兼而有之。由于企業(yè)運(yùn)營(yíng)現(xiàn)實(shí)的壓力,80%的企業(yè)都采取了后者,單獨(dú)為企業(yè)提供數(shù)據(jù)存儲(chǔ)服務(wù)的專(zhuān)業(yè)公司也就應(yīng)運(yùn)而生,即存儲(chǔ)服務(wù)提供商SSP(Storage Service Provider)。如深圳電信推出的無(wú)憂(yōu)備份存儲(chǔ)服務(wù),便是專(zhuān)業(yè)SSP的行業(yè)典范。
無(wú)憂(yōu)存儲(chǔ) 無(wú)憂(yōu)服務(wù)
【深圳電信】是國(guó)內(nèi)IDC行業(yè)領(lǐng)先的數(shù)據(jù)存儲(chǔ)綜合服務(wù)提供商之一,擁有華南地區(qū)最高等級(jí)電信級(jí)標(biāo)準(zhǔn)IDC專(zhuān)業(yè)機(jī)房共計(jì)五個(gè),總面積達(dá)5000余平米,裝機(jī)容量可達(dá)62000余臺(tái)以上。
IDC中心機(jī)房的負(fù)責(zé)人告訴我們:深圳電信IDC擁有華南地區(qū)最高等級(jí)的專(zhuān)業(yè)機(jī)房,現(xiàn)以正式通過(guò)ISO27001標(biāo)準(zhǔn)認(rèn)證,機(jī)房?jī)?nèi)部嚴(yán)格按照國(guó)家AA級(jí)機(jī)房標(biāo)準(zhǔn)提供配套服務(wù)及設(shè)施,整體抗震級(jí)別為8級(jí),供電系統(tǒng)采用不間斷電源供應(yīng)及智能冗余備份UPS系統(tǒng),確保穩(wěn)定的系統(tǒng)運(yùn)行。
嚴(yán)密的智能監(jiān)控系統(tǒng)、冗余線路保證高速可靠的干線連接等雄厚的實(shí)力設(shè)施配備及安防資源為用戶(hù)提供一個(gè)堅(jiān)不可摧的存儲(chǔ)安全環(huán)境。
專(zhuān)業(yè)的存儲(chǔ)解決方案提供商―創(chuàng)新科存儲(chǔ)技術(shù)有限公司,其存儲(chǔ)方案在金融、電信、銀行、證券、廣電等行業(yè)有著廣泛的應(yīng)用,憑借其專(zhuān)業(yè)的技術(shù)研發(fā)和支持團(tuán)隊(duì),可為用戶(hù)提供一個(gè)全面的存儲(chǔ)、備份解決方案。
與自建存儲(chǔ)系統(tǒng)方案而言,深圳電信的無(wú)憂(yōu)存儲(chǔ)服務(wù)主要有以下四個(gè)方面的優(yōu)勢(shì):
1)減少企業(yè)的存儲(chǔ)投入成本,企業(yè)自建數(shù)據(jù)容災(zāi)中心從購(gòu)買(mǎi)主機(jī)、存儲(chǔ)硬軟件設(shè)備到機(jī)房安全防衛(wèi)系統(tǒng)的資源建設(shè)都要占據(jù)企業(yè)IT投入資本的40~50%,而采用直接租用深圳電信成熟的體系及管理維護(hù),能為企業(yè)節(jié)省將近20~30%的經(jīng)營(yíng)成本。
中圖分類(lèi)號(hào):F224.33 文獻(xiàn)標(biāo)志碼:A 文章編號(hào):1673-291X(2008)02-0091-02
一、網(wǎng)絡(luò)存儲(chǔ)技術(shù)
存儲(chǔ)網(wǎng)絡(luò)主要有NAS(網(wǎng)絡(luò)附屬存儲(chǔ))和SAN(存儲(chǔ)區(qū)域網(wǎng)絡(luò))兩種。兩者的共同點(diǎn)在于均以存儲(chǔ)設(shè)備為中心,可實(shí)現(xiàn)存儲(chǔ)設(shè)備的共享,集中式存儲(chǔ)便于管理。不同之處在于兩種存儲(chǔ)網(wǎng)絡(luò)在網(wǎng)絡(luò)連接、數(shù)據(jù)訪問(wèn)控制等方面。可根據(jù)不同的應(yīng)用環(huán)境選用不同的存儲(chǔ)網(wǎng)絡(luò)。
(一)NAS(網(wǎng)絡(luò)附屬存儲(chǔ))
網(wǎng)絡(luò)附屬存儲(chǔ)(Network Attached Storage-NAS)是采用獨(dú)立于PC服務(wù)器,單獨(dú)為網(wǎng)絡(luò)數(shù)據(jù)存儲(chǔ)而開(kāi)發(fā)的一種文件服務(wù)器,它提供了一個(gè)簡(jiǎn)單、高性?xún)r(jià)比、高可用性、高擴(kuò)展性和低總擁有成本(TCO)的網(wǎng)絡(luò)存儲(chǔ)解決方案。
NAS中最關(guān)鍵的是一臺(tái)專(zhuān)用于數(shù)據(jù)存儲(chǔ)設(shè)備管理和數(shù)據(jù)存儲(chǔ)的文件服務(wù)器,該服務(wù)器一般安裝了一個(gè)簡(jiǎn)化的操作系統(tǒng),配備了需要的一些組件,可直接通過(guò)IP以太雙絞網(wǎng)線連接在原有的企業(yè)網(wǎng)絡(luò)上,作為網(wǎng)絡(luò)的一個(gè)節(jié)點(diǎn)存在,服務(wù)器與工作站都可通過(guò)網(wǎng)絡(luò)訪問(wèn)NAS服務(wù)器。
NAS數(shù)據(jù)存儲(chǔ)是基于局域網(wǎng)設(shè)計(jì)的,是部件級(jí)的存儲(chǔ)方法,具有很多的優(yōu)點(diǎn),但其缺點(diǎn)是存儲(chǔ)性能較低,使得NAS只適用于較小的網(wǎng)絡(luò)規(guī)模或者較低數(shù)據(jù)流量的網(wǎng)絡(luò)數(shù)據(jù)存儲(chǔ)。因此,對(duì)于處于企業(yè)業(yè)務(wù)核心層的網(wǎng)絡(luò)財(cái)務(wù)數(shù)據(jù)存儲(chǔ)系統(tǒng)而言,NAS所提供的數(shù)據(jù)存儲(chǔ)服務(wù)存在單點(diǎn)故障,不能很好地滿(mǎn)足網(wǎng)絡(luò)財(cái)務(wù)數(shù)據(jù)存儲(chǔ)的要求。
(二)SAN(存儲(chǔ)區(qū)域網(wǎng)絡(luò))
存儲(chǔ)區(qū)域網(wǎng)絡(luò)(Storage Area Network-SAN)是建立在存儲(chǔ)協(xié)議基礎(chǔ)之上的可使服務(wù)器與存儲(chǔ)設(shè)備之間進(jìn)行“any to any”連接通信的存儲(chǔ)網(wǎng)絡(luò)系統(tǒng),是將所有的存儲(chǔ)設(shè)備單獨(dú)通過(guò)光纖交換機(jī)連接起來(lái),形成一個(gè)光纖通道的存儲(chǔ)網(wǎng)絡(luò)。采用SAN可以實(shí)現(xiàn)在信息系統(tǒng)中的任何服務(wù)器、任何陣列子系統(tǒng)、任何磁帶系統(tǒng)之間的互連;采用SAN可以建造一個(gè)存儲(chǔ)池,實(shí)現(xiàn)多服務(wù)器共享一個(gè)磁盤(pán)陣列子系統(tǒng)、共享一個(gè)自動(dòng)帶庫(kù),實(shí)現(xiàn)數(shù)據(jù)的共享和集中的管理。
由于SCSI技術(shù)在帶寬、安全性、連接柔韌性方面的局限,人們開(kāi)發(fā)了一種新的通道技術(shù)―光纖通道技術(shù),借助光纖通道技術(shù)優(yōu)勢(shì)可以實(shí)現(xiàn)以前無(wú)法或很難實(shí)現(xiàn)的應(yīng)用模式。光纖通道技術(shù)被廣泛采用不僅僅是因?yàn)楣饫w通道具有更高的帶寬、更長(zhǎng)的連接距離、更好的安全性和擴(kuò)展性,而是光纖通道技術(shù)很好地融合了通道技術(shù)和網(wǎng)絡(luò)技術(shù)的優(yōu)勢(shì),利用光纖通道可以創(chuàng)造一個(gè)有別于以前的LAN的存儲(chǔ)區(qū)域網(wǎng)絡(luò)SAN。
在分布式存儲(chǔ)的計(jì)算環(huán)境中,各個(gè)信息中心是相互獨(dú)立的計(jì)算孤島。用戶(hù)進(jìn)行備份、數(shù)據(jù)同步、集群計(jì)算時(shí)數(shù)據(jù)將通過(guò)網(wǎng)絡(luò)進(jìn)行傳送,這樣將會(huì)對(duì)網(wǎng)絡(luò)產(chǎn)生很大的帶寬壓力,用戶(hù)進(jìn)行數(shù)據(jù)的管理也將是復(fù)雜的。
采用SAN可以實(shí)現(xiàn)在網(wǎng)絡(luò)財(cái)務(wù)環(huán)境的公司信息系統(tǒng)中的任何服務(wù)器、任何磁盤(pán)陣列子系統(tǒng)、任何磁帶系統(tǒng)之間的互連。采用SAN可以建造一個(gè)存儲(chǔ)池,實(shí)現(xiàn)多服務(wù)器共享一個(gè)磁盤(pán)陣列子系統(tǒng)、共享一個(gè)自動(dòng)帶庫(kù),實(shí)現(xiàn)數(shù)據(jù)的共享和集中的管理,因而更適用于數(shù)據(jù)流量較大、系統(tǒng)可靠性要求高的網(wǎng)絡(luò)財(cái)務(wù)數(shù)據(jù)存儲(chǔ)系統(tǒng)。
二、網(wǎng)絡(luò)財(cái)務(wù)數(shù)據(jù)存儲(chǔ)系統(tǒng)設(shè)計(jì)
(一)網(wǎng)絡(luò)財(cái)務(wù)數(shù)據(jù)存儲(chǔ)系統(tǒng)設(shè)計(jì)原則
1.集中化的數(shù)據(jù)存儲(chǔ)架構(gòu)。存儲(chǔ)架構(gòu)能夠適應(yīng)數(shù)據(jù)存儲(chǔ)系統(tǒng)建設(shè)目前及未來(lái)存儲(chǔ)容量的需求,又能夠?qū)Υ鎯?chǔ)資源進(jìn)行集中化管理和利用,為系統(tǒng)提供一個(gè)集中、安全、可靠的存儲(chǔ)環(huán)境。
2.高I/O、高性能的存儲(chǔ)架構(gòu)。生產(chǎn)數(shù)據(jù)存儲(chǔ)系統(tǒng)的核心應(yīng)用不但需要集中的存儲(chǔ)系統(tǒng)支持,即同時(shí)連接多臺(tái)服務(wù)器,而且必須兼?zhèn)浜芨叩腎/O性能才能勝任。整合SAN采用2GB的帶寬。
3.可保護(hù)投資的存儲(chǔ)架構(gòu)。存儲(chǔ)系統(tǒng)的結(jié)構(gòu)是十分重要的,除了可以應(yīng)對(duì)存儲(chǔ)硬件設(shè)備的升級(jí)速度外,還必須考慮到對(duì)前期存儲(chǔ)設(shè)備的投資保護(hù),在保證不斷提供功能和性能提高的同時(shí),存儲(chǔ)架構(gòu)在較長(zhǎng)的時(shí)間內(nèi)能夠保持相對(duì)穩(wěn)定。
4.高可用性與高數(shù)據(jù)安全性。數(shù)據(jù)安全是系統(tǒng)核心應(yīng)用的最終保障,必須能夠保證7X24小時(shí)運(yùn)行,存儲(chǔ)系統(tǒng)必須有高可用性,以保證應(yīng)用系統(tǒng)對(duì)數(shù)據(jù)的隨時(shí)存取。
5.可擴(kuò)展/升級(jí)性。結(jié)合生產(chǎn)數(shù)據(jù)存儲(chǔ)系統(tǒng)的數(shù)據(jù)量增長(zhǎng)情況,存儲(chǔ)系統(tǒng)必須有強(qiáng)大的擴(kuò)展性來(lái)滿(mǎn)足這種高速發(fā)展的要求。要求該網(wǎng)絡(luò)備份系統(tǒng)可以方便地?cái)U(kuò)充,支持更多的用戶(hù)及應(yīng)用;也要求隨著存儲(chǔ)、備份需求的不斷提高,網(wǎng)絡(luò)備份系統(tǒng)可以進(jìn)一步升級(jí),可以滿(mǎn)足現(xiàn)在乃至未來(lái)較長(zhǎng)一段時(shí)間內(nèi)的增長(zhǎng)需求,保護(hù)現(xiàn)有的投資,具備支持目前及未來(lái)關(guān)鍵應(yīng)用的能力。
6.易于管理和維護(hù)。數(shù)據(jù)中心的核心是數(shù)據(jù)存儲(chǔ),所以存儲(chǔ)設(shè)備的數(shù)據(jù)分類(lèi)和管理功能十分重要。為了提高系統(tǒng)管理的效率、管理的安全性,存儲(chǔ)系統(tǒng)必須有便于使用的存儲(chǔ)管理工具。
網(wǎng)絡(luò)存儲(chǔ)系統(tǒng)涉及多臺(tái)主機(jī)服務(wù)器、大容量磁盤(pán)陣列等存儲(chǔ)設(shè)備以及各種光纖存儲(chǔ)域和網(wǎng)絡(luò)連接設(shè)備,所以為了保證系統(tǒng)良好運(yùn)轉(zhuǎn),需要系統(tǒng)具有良好的可管理性,備份系統(tǒng)要有監(jiān)測(cè)、故障診斷、遠(yuǎn)程管理等功能,以便于系統(tǒng)的管理和維護(hù)。同時(shí)在產(chǎn)品選型方面應(yīng)盡可能選取集成度高、采用模塊化通用設(shè)計(jì)的產(chǎn)品,以便于管理和維護(hù)。
(二)網(wǎng)絡(luò)財(cái)務(wù)數(shù)據(jù)存儲(chǔ)系統(tǒng)構(gòu)架
1.網(wǎng)絡(luò)財(cái)務(wù)數(shù)據(jù)存儲(chǔ)系統(tǒng)拓樸圖
如圖所示搭建的基于SAN的冗余的基礎(chǔ)存儲(chǔ)架構(gòu),通過(guò)配置兩臺(tái)光纖存儲(chǔ)交換機(jī),一臺(tái)全光纖磁盤(pán)陣列,在每臺(tái)服務(wù)器上面加裝兩塊2Gb的HBA。保證了每臺(tái)服務(wù)器到磁盤(pán)陣列有兩條冗余的存儲(chǔ)鏈路,避免了SAN傳輸系統(tǒng)中可能存在的單點(diǎn)故障問(wèn)題,保證了傳輸系統(tǒng)的高可用性,在主機(jī)層面接入了4臺(tái)服務(wù)器,包括web服務(wù)器、ftp服務(wù)器以及兩臺(tái)集成業(yè)務(wù)服務(wù)器,對(duì)于關(guān)鍵業(yè)務(wù)通過(guò)雙機(jī)系統(tǒng)實(shí)現(xiàn)業(yè)務(wù)數(shù)據(jù)的雙機(jī)熱備份,以保障網(wǎng)絡(luò)財(cái)務(wù)數(shù)據(jù)的高可用性和可靠性。