2016年8月5日,全球開源領(lǐng)導(dǎo)廠商紅帽攜手ZD至頂網(wǎng)、Intel、云達(dá)科技共同舉辦的主題為“開放 融合 開源開啟存儲(chǔ)新世界”的2016年中國(guó)開源企業(yè)存儲(chǔ)峰會(huì)在北京富力萬(wàn)麗酒店隆重召開。Chris Mawer 紅帽亞太區(qū)存儲(chǔ)業(yè)務(wù)總監(jiān)出席此次峰會(huì),并做了主題為“Gluster存儲(chǔ):戰(zhàn)略方向、路線圖與集成”的精彩演講。
Chirs Mawer談到了存儲(chǔ)系統(tǒng)的重要性及存儲(chǔ)平臺(tái)這幾的變化。他認(rèn)為,目前在各行各業(yè)的應(yīng)用中,有很多仍然采用傳統(tǒng)存儲(chǔ),但在拓展性、容量等方面非常有限?;谑袌?chǎng)需求,紅帽分布式存儲(chǔ)系統(tǒng)使用戶能夠進(jìn)行拓展,基于現(xiàn)在商用的軟件之上,改變了原有的存儲(chǔ)方式,靈活且拓展性強(qiáng)。隨著傳統(tǒng)市場(chǎng)的逐漸萎縮,數(shù)據(jù)中心在不斷的演講,而且不斷變化,從源流的瀑布式到敏捷式轉(zhuǎn)變,這就是分布式的方向發(fā)展。
Gluster是紅帽存儲(chǔ)的一個(gè)產(chǎn)品,在工作量、工作的負(fù)載等方面都能夠滿足網(wǎng)絡(luò)方面的運(yùn)營(yíng),比如研發(fā)運(yùn)維一體化等,這些改變了我們?cè)茟?yīng)用的互相方式,而且提升了性能及系統(tǒng)方式。在細(xì)節(jié)方面,Gluster也做了很多,刪碼、分層、即位衰減檢測(cè)等特征。
以下是演講精彩實(shí)錄:
存儲(chǔ)平臺(tái)跟以前是不一樣的,我們看到30年前存儲(chǔ)的平臺(tái),軟件定義的存儲(chǔ)是一個(gè)新技術(shù),我們有了這個(gè)新技術(shù)有了創(chuàng)新,Intel的伙伴、云達(dá)科技等等有很多不同的創(chuàng)新,今天跟大家說(shuō)一下Gluster,Gluster是我們存儲(chǔ)的一個(gè)產(chǎn)品,我們看到了工作量、工作的負(fù)載,我們有傳統(tǒng)的一些應(yīng)用,還有其他的工作量能夠滿足網(wǎng)絡(luò)方面的運(yùn)營(yíng),比如研發(fā)運(yùn)維一體化等,這些改變了我們?cè)茟?yīng)用的互相方式,而且提升了我們的性能,提升了系統(tǒng)的方式。
大家看到左手邊的不同模式。大家可能看到視頻安全會(huì)有很多要求,但實(shí)際上視頻的監(jiān)控,大家可以拷到今天高性能的視頻,可以實(shí)時(shí)分析數(shù)據(jù),避免對(duì)社區(qū)的威脅,比如恐怖主義等,可以避免汽車碰到的一些情況。還有Gluster可以提供傳統(tǒng)的計(jì)劃,還有傳統(tǒng)的應(yīng)用,還有Gluster可以進(jìn)行擴(kuò)展。
說(shuō)到備份,任何工作軟件可以存儲(chǔ)、可以擴(kuò)展,可以將你的系統(tǒng)進(jìn)行大幅擴(kuò)展,可以存儲(chǔ)更多的數(shù)據(jù)。
看一下文件,今天客戶不光有一個(gè)文件服務(wù)器,而且提供更多的信息。在任何時(shí)候任何地點(diǎn)都可以獲取這樣的信息,由Gluster支持這些項(xiàng)目的服務(wù),我們第三方的合作伙伴也可以在Gluster文件基礎(chǔ)之上提供服務(wù)。另外我們可以網(wǎng)絡(luò)為基礎(chǔ)的網(wǎng)絡(luò)服務(wù)中使用Gluster等一系列的方法。在擴(kuò)展方面可以到61 PB的情況下,所以可以想象一下,當(dāng)前的筆記本是1—4G的內(nèi)存,但現(xiàn)在61 PB,這里講到的是大量存儲(chǔ),講到的信息都可以存儲(chǔ)上去,甚至是一些視頻。還可以看一下自動(dòng)化的分層,例外還是一些比較受歡迎的內(nèi)容分層存儲(chǔ),這樣可以獲得規(guī)模經(jīng)濟(jì),同時(shí)也可以保證積極的受歡迎的信息放到存儲(chǔ)當(dāng)中,不見得都要放上去。
另外要保護(hù)我們的信息,很多企業(yè)關(guān)注自己數(shù)據(jù)的保護(hù),所以可以在一開始出現(xiàn)問(wèn)題的時(shí)候抽取出來(lái)。當(dāng)然如果看當(dāng)前的存儲(chǔ),沒有辦法在一個(gè)Gluster當(dāng)中把硬件抽取出來(lái)。有了存儲(chǔ)系統(tǒng)的變化,可以把它看作是一個(gè)軟件產(chǎn)品,是在Gluster內(nèi)部運(yùn)行的,所以可以把當(dāng)中的產(chǎn)品進(jìn)行劃分,這樣沒有任何存儲(chǔ)的存儲(chǔ)模式,只是一個(gè)只讀的模式。大家看一下視頻監(jiān)控、閉路電視的系統(tǒng)當(dāng)中,中國(guó)很多城市保證一些城市進(jìn)行反恐方面的工作。政府也開始對(duì)這些系統(tǒng)進(jìn)行測(cè)試,也就是有大規(guī)模的投資,看到底在投資當(dāng)中做怎樣的監(jiān)控,確保系統(tǒng)的安全性,能看到它的重要性以及信息有多大。非常好的例子是超越存儲(chǔ)本身,可以對(duì)存儲(chǔ)信息進(jìn)行分析。比如車走在路上的方向不對(duì),逆行的時(shí)候就可以識(shí)別出來(lái)。甚至可以具體到看一個(gè)車的車牌號(hào),然后給這個(gè)人來(lái)發(fā)罰單。還有其他的一些例子,如面部識(shí)別,都可以對(duì)每個(gè)人貼標(biāo)簽。這些系統(tǒng)都是為了設(shè)計(jì)保護(hù)我們的夠民更加安全。這些先進(jìn)的能力完全超過(guò)的數(shù)據(jù)存儲(chǔ)本身,進(jìn)行數(shù)據(jù)分析,把存儲(chǔ)的信息拿出來(lái)進(jìn)行分析。
視頻的安全系統(tǒng)通常是這樣的,由攝像頭產(chǎn)生很多信息,數(shù)據(jù)進(jìn)入到存儲(chǔ)分析,還有遠(yuǎn)程的數(shù)據(jù)中心,及長(zhǎng)期的保存和分析。可能還有一些遠(yuǎn)程用戶,他們是一些警方,可以通過(guò)手機(jī)進(jìn)行IP攝像頭的設(shè)置。這改變了我們平時(shí)使用數(shù)據(jù)和分析數(shù)據(jù)的方式。如果用高清電視擴(kuò)展到其中,需要很強(qiáng)的系統(tǒng)。另外是高清電視,廣播系統(tǒng)需要高質(zhì)量的內(nèi)容,這種內(nèi)容非常大,我們需要非常強(qiáng)的能力才能夠應(yīng)對(duì)當(dāng)前數(shù)據(jù)的需求。這個(gè)電視是4K的電視,未來(lái)可能是8K的電視,至少要把數(shù)據(jù)存儲(chǔ)能力拓展一半以上。另外要把高清數(shù)據(jù)與手機(jī)適配,人們移動(dòng)時(shí)可以看一些視頻或者媒體。所以存儲(chǔ)的信息非常多、畫質(zhì)非常好。有了這樣的Gluster,最新的數(shù)據(jù)可以放到flash當(dāng)中,還有各種各樣的視頻和電視,所編輯的過(guò)程都可以使用Gluster,跨行業(yè)進(jìn)行服務(wù)。
這里是廣播的例子,可以涵蓋不同行業(yè),而且分成多個(gè)服務(wù)器,運(yùn)行不同的Gluster,還可以運(yùn)行在不同的Gluster上。這些信息的復(fù)制沒有問(wèn)題,可以獲得整個(gè)云基礎(chǔ)的解決方案,這是非常適合的,如何使用、如何分布、如何虛擬化,這些都可以在云里,是以軟件為基礎(chǔ)的存儲(chǔ)技術(shù)。
看一下關(guān)于Gluster的細(xì)節(jié)內(nèi)容,一些特征在以前可能聽都沒聽過(guò),比如糾刪碼,有時(shí)候要把數(shù)據(jù)復(fù)制三次,有時(shí)候不只一組數(shù)據(jù),三組都需要復(fù)制,這樣就變得冗余,效力地下。如何更高效?這時(shí)候就要用到糾刪碼了,分析和算法更好的結(jié)合,這些數(shù)據(jù)如果丟失如何創(chuàng)建,使用了糾刪碼不需要三組復(fù)制,1.5倍的數(shù)據(jù)復(fù)制就足夠了,可以大量減少重復(fù)的數(shù)據(jù),但還是有機(jī)會(huì)進(jìn)行數(shù)據(jù)復(fù)制的再生。
還有一個(gè)例子是分層,讓活躍、不活躍的信息,如對(duì)一些客戶來(lái)講可能需要8PB的存儲(chǔ),數(shù)據(jù)增長(zhǎng)力是10%的速度,我們很多的東西需要放在硬盤當(dāng)中,這時(shí)候買8PB的硬盤非常貴,希望有系統(tǒng),有能夠把8PB的東西在上面用,是比較難的。這時(shí)候我們可以把我們發(fā)現(xiàn)的數(shù)據(jù),由一個(gè)工程師組織,他們對(duì)數(shù)據(jù)進(jìn)行研究,三個(gè)月之后搞另外一個(gè)項(xiàng)目。所以這個(gè)數(shù)據(jù)可能活躍了90天時(shí)間。90天存在方面的需求,可能也就是7PB,相對(duì)于原來(lái)的8PB少了很多,給你一種經(jīng)濟(jì)性,不需要存儲(chǔ)那么多,在高性能下存儲(chǔ)不會(huì)很低,不需要買商業(yè)的硬盤。
另外一個(gè)特征是在很多企業(yè)級(jí)存儲(chǔ)當(dāng)中,即位衰減檢測(cè)。這可以保證數(shù)據(jù)可以正常運(yùn)行,沒有數(shù)據(jù)的損失,后臺(tái)掃描時(shí)確保數(shù)據(jù)在,確保不會(huì)出現(xiàn)任何問(wèn)題。如果出現(xiàn)任何問(wèn)題可能會(huì)標(biāo)記紅旗,這樣可以立馬做一個(gè)后臺(tái)的備用。這是一個(gè)非常重要的功能。
而且它也是非常安全的,基于linux技術(shù)之上。而且要想加密,在開源系統(tǒng)當(dāng)中不會(huì)看到這些產(chǎn)品,但是對(duì)于Gluster來(lái)講,如果你想進(jìn)行數(shù)據(jù)的加密,比如EMCA,就可以來(lái)購(gòu)買比較特別的硬件級(jí),給你提供加密的方法。但有的Gluster,所有加密在軟件里來(lái)做,可以進(jìn)行硬盤的加密,也可以在任何數(shù)據(jù)復(fù)制當(dāng)中進(jìn)行加密,非常安全。同時(shí)可以給我們提供非常好的特征,比如出現(xiàn)故障切換的時(shí)候,如果進(jìn)行激活的故障切換或者故障自動(dòng)恢復(fù)都是可以的,我們有專門的紅帽項(xiàng)目支持這方面的功能。這些都是系統(tǒng)當(dāng)中的功能,驅(qū)動(dòng)創(chuàng)新驅(qū)動(dòng)我們存儲(chǔ)的安全,不需要擔(dān)心以社區(qū)為主要的數(shù)據(jù)安全性,想象一下再一個(gè)社區(qū)里沒有紅帽的支持而建立自己的存儲(chǔ)集群,存在的問(wèn)題會(huì)有多少,如何解決它們?除非得有軍隊(duì)專家才行,幫助你支持,但他們可能在幾年時(shí)間內(nèi)解決你的問(wèn)題,尤其當(dāng)程序不能正常運(yùn)行時(shí)。作為紅帽可以更好地提供代碼,提供注冊(cè)服務(wù),如果遇到問(wèn)題,或者新的方面問(wèn)題,可以立馬給你提供服務(wù),并且?guī)湍氵M(jìn)行修正,我們的響應(yīng)非??焖?,這也是我們講到企業(yè)存儲(chǔ)和社區(qū)存儲(chǔ)當(dāng)中最大的區(qū)別,社區(qū)里沒有這么強(qiáng)的支持,我相信我們需要確保您企業(yè)級(jí)的數(shù)據(jù)是非常安全的,永遠(yuǎn)都可以自由地獲取。
有人會(huì)問(wèn)到底是怎樣的配置,為什么不能用戴爾的?到底你的配置是怎樣的?這里給大家舉一個(gè)例子,其中一個(gè)是高性能計(jì)算,HPC是非常好的通量、非常好的性能。我們使用24乘2.5的切換,而且我們的基本配置正常情況下是12乘3.5??赡苡袝r(shí)候需要長(zhǎng)期的存儲(chǔ),比如廣播需求,有時(shí)候存儲(chǔ)時(shí)間比較長(zhǎng),這時(shí)候可以用到60乘3.5的服務(wù)器,非常密集的存儲(chǔ),一次使用60個(gè)盤,非常深入、非常便宜的一個(gè)解決方案。
對(duì)于紅帽存儲(chǔ)本身而言,有Ceph方面的存儲(chǔ),是數(shù)據(jù)服務(wù)當(dāng)中的一些開源軟件為基礎(chǔ)的系統(tǒng)。另外是Gluster有企業(yè)級(jí)的虛擬服務(wù),同時(shí)整個(gè)創(chuàng)新都是在我們社區(qū)背后發(fā)生的。如果你看一下這些例子,物理存儲(chǔ)可以使用企業(yè)級(jí)linux,而且有虛擬的存儲(chǔ)放在企業(yè)級(jí)linux里。還有私有云里,可以將Ceph應(yīng)用到大型的openstack項(xiàng)目當(dāng)中?,F(xiàn)在更多人可能會(huì)使用Gluster,因?yàn)榇蠹蚁M麛?shù)據(jù)有一定的可視性,所以Gluster是非常好的、非常適合的。
最后看一下公有云的服務(wù),這些都是非常好的選擇,但中國(guó)沒有,最后一個(gè)適用不了,但我們想辦法和一些公有云的服務(wù)商進(jìn)行合作。
在整個(gè)社區(qū)背后的增長(zhǎng)創(chuàng)新,Ceph的創(chuàng)新引領(lǐng)整個(gè)行業(yè),云計(jì)算當(dāng)中它也在發(fā)展前沿。這可以看到這么多開發(fā)者都在Ceph背后。就Gluster來(lái)講,它是一個(gè)非常成熟的產(chǎn)品,比如大數(shù)據(jù)的要求等等都可以滿足,有一些數(shù)據(jù)的存儲(chǔ)需要很長(zhǎng)時(shí)間,傳統(tǒng)環(huán)境當(dāng)中目前沒有發(fā)生非常大的變化,但還是有很多創(chuàng)新,我們需要知道數(shù)據(jù)是不是安全,是否是可適應(yīng)的,我們也可以滿足它的靈活性,這樣Ceph、openstack、Gluster在不同環(huán)節(jié)中,紅帽都可以提供其靈活性。
如果大家非常想試用一下,如果你本人有工程背景可以來(lái)做一個(gè)測(cè)試,這樣大家可以來(lái)掃描一下二維碼,自己適用一下數(shù)據(jù),熟悉一下,這是非常好的機(jī)會(huì),實(shí)地的了解一下,并且了解到Ceph能做什么,在Gluster這里可以了解,如果你有特別的應(yīng)用級(jí),可以使用它。所有這些都能夠在我們的測(cè)試當(dāng)中使用,非常好的機(jī)會(huì)讓大家能夠親眼看一看,親手用一下。
剛才給大家做了介紹,如果大家理解不同工作的負(fù)載,一會(huì)兒可以找我們叫來(lái),非常歡迎大家用到您的環(huán)境當(dāng)中,非常感謝大家的聆聽,非常期望在接下來(lái)的時(shí)間見到大家。
分享到微信 ×
打開微信,點(diǎn)擊底部的“發(fā)現(xiàn)”,
使用“掃一掃”即可將網(wǎng)頁(yè)分享至朋友圈。