如今,現(xiàn)代企業(yè)的業(yè)務核心就是數(shù)據(jù)。雖然數(shù)據(jù)存儲一直在企業(yè)運營中發(fā)揮了不可或缺的作用,但在過去,人們卻很少考慮其成功的關(guān)鍵。這是因為那時的數(shù)據(jù)還沒有被確認為非常寶貴的財富,并強大到足以決定公司的命運,而如今則有所不同,得到人們的重視。
然而,我們目前正在對數(shù)字革命重新定義,企業(yè)和個人的自身行為方式也在相互發(fā)生作用。大數(shù)據(jù)集,海量信息和洞察力現(xiàn)在被認為是箱子中的寶貝,可以給企業(yè)帶來競爭優(yōu)勢。
不可能實現(xiàn)的事情
到2020年,機器生成的數(shù)據(jù)量將是人類創(chuàng)造數(shù)據(jù)量的15倍。而常見的IT最佳實踐的實施、操作、管理和存儲的數(shù)據(jù)量已達到數(shù)百PB,而這些將成為不可持續(xù)的期望。
當相關(guān)媒介不能保持與數(shù)據(jù)存儲增長的步伐時,你可能被一個“魔鬼叉子”終結(jié)了,所謂“魔鬼叉子”是一種視覺假象,這意味不可能制造出來的物體?;蛘呤浅隽怂惺艿臉O限。數(shù)據(jù)中心的數(shù)據(jù)更新和存儲需要更高的可擴展性,以及存儲數(shù)據(jù)的恢復,因此,所有權(quán)的總成本過高。那么,存儲技術(shù)的進步如何促進數(shù)據(jù)中心的發(fā)展?
鑒于企業(yè)的經(jīng)營方式和數(shù)據(jù)量非常大的不可阻擋的創(chuàng)作方式的重大變化,令人驚訝的是,傳統(tǒng)的文件系統(tǒng),存儲區(qū)域網(wǎng)絡(SAN)、網(wǎng)絡附加存儲(NAS),統(tǒng)一存儲系統(tǒng)不足以滿足企業(yè)數(shù)據(jù)存儲需求。數(shù)據(jù)中心技術(shù)需要跟上數(shù)據(jù)增長呈指數(shù)式增長這個新的現(xiàn)實。那么解決的方案是什么嗎?對象存儲。但在人們致力于更快的技術(shù)發(fā)展之前,讓我們來看看數(shù)據(jù)存儲的景觀是什么樣子,人們直到幾年前才了解為什么對象存儲如此發(fā)展迅速,并變得如此流行。
傳統(tǒng)存儲技術(shù)有兩種變化。首先是塊存儲,管理磁盤扇區(qū)和磁道內(nèi)的數(shù)據(jù)塊。其次是文件存儲,管理文件組織成分層文件系統(tǒng)中的文件。塊存儲采用SAN的,其中是通過SCSI磁盤陣列,iSCSI或光纖通道網(wǎng)絡連接服務器,而文件存儲提供了標準的網(wǎng)絡文件共享協(xié)議來交換系統(tǒng)之間的文件內(nèi)容。
這些傳統(tǒng)的技術(shù)都具有消極的一面,但就整體而言,還是能夠滿足企業(yè)的數(shù)據(jù)存儲要求,直到需要應對大規(guī)模數(shù)據(jù)的指數(shù)增長。據(jù)調(diào)查機構(gòu)IDC的預測,2015年到2019年,用于大數(shù)據(jù)部署存儲硬件的復合年均增長率為29.9%,2019年的存儲總量將達到73.41EB。作為一個整體,存儲的硬件主軟件,以及大數(shù)據(jù)服務將以24.6%的復合年增長率增長。
輸入對象存儲
讓我們來看看什么是對象存儲,以及它如何幫助那些處于萌芽的數(shù)字企業(yè)轉(zhuǎn)型為全球網(wǎng)絡巨頭的。雖然許多廠商都在開發(fā)PB級別的存儲技術(shù),但一些領(lǐng)先企業(yè),如亞馬遜,谷歌,F(xiàn)acebook,以及雅虎公司都在致力于研發(fā)一些創(chuàng)新技術(shù),解決如數(shù)據(jù)恢復能力,數(shù)據(jù)持久性,基礎(chǔ)設施,管理,電源,冷卻等運營總成本,以及海量存儲的增長等面臨的挑戰(zhàn)。他們目前正在蓬勃開展這樣的項目。
對象存儲的這些早期采用者們很快就認識到,數(shù)據(jù)中心的可擴展性是一個難以克服的障礙,雖然它具有理論上沒有限制的優(yōu)勢:而到目前為止,存儲的數(shù) 據(jù)已經(jīng)達到或超過10艾字節(jié)。這個原因難以忽視除,對象存儲工作迅速地滲透到企業(yè)層面的主流應用中。那么究竟它是否有助于克服PB級別的挑戰(zhàn)嗎?
對象存儲是基于無共享架構(gòu):一個分布式節(jié)點計算架構(gòu),其中沒有節(jié)點共享系統(tǒng)資源,其中包括CPU,存儲器,或物理存儲介質(zhì)。而沒有共享的架構(gòu),就沒有一個單點的失敗,也沒有系統(tǒng)的競爭??蓴U展性在容量和性能上接近線性。而存儲硬件上,其中包括低成本服務器,硬盤,固態(tài)硬盤,網(wǎng)卡等。
對象存儲是軟件定義的存儲(SDS),因為它將低成本服務器的硬件轉(zhuǎn)換成高度可擴展的,彈性存儲系統(tǒng)。事實上,一些對象存儲軟件使用擦除編碼技術(shù),可以允許成本更低的桌面硬盤在不損失性能和可伸縮性的情況下,實現(xiàn)更低的平均時間故障,以及更低誤碼率。
四種不同的對象存儲選項可供選擇:兩個是商業(yè)化的,兩個是開放源碼的。在一般情況下,這四個對象存儲選項都沒有共享架構(gòu)。它們的特點是:
·完全分布沒有單點故障
·可擴展到PB級別
·自動修復
·在大多數(shù)情況下,很少有管理員干預,可以自我管理
·在服務器硬件上運行嵌入式存儲媒體
對象存儲被設計成可大規(guī)模擴展的,因此,與傳統(tǒng)的塊存儲或文件存儲系統(tǒng)有著根本的不同:它將信息轉(zhuǎn)換成彈性大小的容器,這稱之為對象。每個對象 包括數(shù)據(jù)本身以及其相關(guān)聯(lián)的元數(shù)據(jù),并具有一個全局唯一標識符,而不是一個文件名和文件路徑。這些唯一標識符被部署在平面地址空間,從而消除了基于復雜文 件路徑的分層文件系統(tǒng)的復雜性和可擴展性的挑戰(zhàn)。
在當前這樣的數(shù)據(jù)饑餓的環(huán)境中,我們生活的每一個方面是都是由數(shù)據(jù)驅(qū)動的。所有數(shù)據(jù)的過去,現(xiàn)在和未來的業(yè)務,都是有識之士眼中的潛在的金礦,傳統(tǒng)的規(guī)模有限的存儲模式注定不再適應。相反,對象存儲才是最適合的技術(shù),可以提供超大規(guī)模和性能,使IT專業(yè)人員能夠分析和存儲如今盛行的龐大的非結(jié)構(gòu)化數(shù)據(jù)。