一種基于lustre存儲的網(wǎng)絡(luò)系統(tǒng)的制作方法
【專利摘要】本實用新型涉及一種基于lustre存儲的網(wǎng)絡(luò)系統(tǒng)，屬于計算機(jī)【技術(shù)領(lǐng)域】。本實用新型將lustre存儲系統(tǒng)的客戶端、元數(shù)據(jù)服務(wù)器和存儲服務(wù)器通過主網(wǎng)絡(luò)交換機(jī)連接起來形成主通訊網(wǎng)絡(luò)，采用網(wǎng)絡(luò)橋技術(shù)，將主網(wǎng)絡(luò)交換機(jī)經(jīng)網(wǎng)絡(luò)橋上聯(lián)到與Inter網(wǎng)互聯(lián)的核心交換機(jī)，從而實現(xiàn)lustre存儲系統(tǒng)的異構(gòu)網(wǎng)絡(luò)互聯(lián)，同時為了在主網(wǎng)絡(luò)出現(xiàn)異常時不影響lustre存儲系統(tǒng)的正常運(yùn)行，該網(wǎng)絡(luò)系統(tǒng)還增設(shè)一冗余網(wǎng)絡(luò)，在主網(wǎng)絡(luò)出現(xiàn)異常時lustre存儲系統(tǒng)能夠正常運(yùn)行。
【專利說明】—種基于lustre存儲的網(wǎng)絡(luò)系統(tǒng)

【技術(shù)領(lǐng)域】
[0001]本實用新型涉及一種基于lustre存儲的網(wǎng)絡(luò)系統(tǒng)，屬于計算機(jī)【技術(shù)領(lǐng)域】。

【背景技術(shù)】
[0002]Lustre是當(dāng)前應(yīng)用最為廣泛的開源性的集群分布式并行文件系統(tǒng)，在高性能存儲領(lǐng)域，一般基于它實現(xiàn)高性能存儲系統(tǒng)，生產(chǎn)單位往往期望在不改變原有網(wǎng)絡(luò)結(jié)構(gòu)的前提下，讓它發(fā)揮最大的性能，確保生產(chǎn)任務(wù)不間斷進(jìn)行。目前，lustre存儲系統(tǒng)只有一套基于Infiniband交換機(jī)的網(wǎng)絡(luò)系統(tǒng)，它和一套高性能計算集群形成一個密閉的高性能應(yīng)用環(huán)境，只能通過串口供特定用戶接入該環(huán)境，具有比較大的局限性，并且，當(dāng)單一的Infiniband存儲網(wǎng)絡(luò)出現(xiàn)異常時，會直接影響存儲系統(tǒng)的正常運(yùn)行。
實用新型內(nèi)容
[0003]本實用新型的目的是提供一種基于lustre存儲的網(wǎng)絡(luò)系統(tǒng)，以實現(xiàn)lustre存儲系統(tǒng)的網(wǎng)絡(luò)異構(gòu)和冗余。
[0004]本實用新型為解決上述技術(shù)問題而提供一種基于lustre存儲的網(wǎng)絡(luò)系統(tǒng)，該網(wǎng)絡(luò)系統(tǒng)包括客戶端、元數(shù)據(jù)服務(wù)器、存儲服務(wù)器、主網(wǎng)絡(luò)交換機(jī)、網(wǎng)絡(luò)橋和核心交換機(jī)，客戶端、元數(shù)據(jù)服務(wù)器和存儲服務(wù)器通過網(wǎng)線與主網(wǎng)絡(luò)交換機(jī)的相應(yīng)端口相連，形成第一網(wǎng)絡(luò)，所述網(wǎng)絡(luò)橋的一個端口通過網(wǎng)線與主網(wǎng)絡(luò)交換機(jī)相連，另一個端口通過網(wǎng)線與核心交換機(jī)相連，核心交換機(jī)用于與外網(wǎng)相連。
[0005]所述的網(wǎng)絡(luò)系統(tǒng)還包括冗余網(wǎng)絡(luò)交換機(jī)，該冗余網(wǎng)絡(luò)交換機(jī)的各端口分別與客戶端、元數(shù)據(jù)服務(wù)器和存儲服務(wù)器相連，形成第一網(wǎng)絡(luò)的冗余網(wǎng)絡(luò)。
[0006]所述的主網(wǎng)絡(luò)交換機(jī)為Infiniband交換機(jī)。
[0007]所述的冗余網(wǎng)絡(luò)交換機(jī)為千兆交換機(jī)。
[0008]所述的客戶端、元數(shù)據(jù)服務(wù)器和存儲服務(wù)器均安裝有Infiniband連接卡、冗余網(wǎng)絡(luò)連接卡、核心網(wǎng)絡(luò)連接卡及相應(yīng)的驅(qū)動。
[0009]所述的網(wǎng)絡(luò)橋上安裝有Infiniband連接卡、核心網(wǎng)絡(luò)連接卡及相應(yīng)的驅(qū)動。
[0010]所述的Infiniband交換機(jī)為Mellanox 5030交換機(jī)。
[0011]本實用新型的有益效果是:本實用新型將lustre存儲系統(tǒng)的客戶端、元數(shù)據(jù)服務(wù)器和存儲服務(wù)器通過主網(wǎng)絡(luò)交換機(jī)連接起來形成主通訊網(wǎng)絡(luò)，采用網(wǎng)絡(luò)橋技術(shù)，將主網(wǎng)絡(luò)交換機(jī)經(jīng)網(wǎng)絡(luò)橋上聯(lián)到與Inter網(wǎng)互聯(lián)的核心交換機(jī)，從而實現(xiàn)lustre存儲系統(tǒng)的異構(gòu)網(wǎng)絡(luò)互聯(lián)，同時為了在主網(wǎng)絡(luò)出現(xiàn)異常時不影響lustre存儲系統(tǒng)的正常運(yùn)行，該網(wǎng)絡(luò)系統(tǒng)還增設(shè)一冗余網(wǎng)絡(luò)，在主網(wǎng)絡(luò)出現(xiàn)異常時lustre存儲系統(tǒng)能夠正常運(yùn)行。

【專利附圖】

【附圖說明】
[0012]圖1是本發(fā)明實施例一中的基于lustre存儲的網(wǎng)絡(luò)系統(tǒng)的結(jié)構(gòu)示意圖；
[0013]圖2是本發(fā)明實施例二中的基于lustre存儲的網(wǎng)絡(luò)系統(tǒng)的結(jié)構(gòu)示意圖。

【具體實施方式】
[0014]實施例一
[0015]本實施考慮到GPU計算性能優(yōu)勢和lustre I/O性能優(yōu)勢，以Infiniband網(wǎng)絡(luò)為主作為lustre存儲系統(tǒng)的客戶端、元數(shù)據(jù)服務(wù)器、存儲服務(wù)器之間的通訊網(wǎng)絡(luò)，采用網(wǎng)絡(luò)橋技術(shù)，經(jīng)由I個網(wǎng)橋節(jié)點(diǎn)上聯(lián)到核心交換機(jī)，該網(wǎng)絡(luò)系統(tǒng)如圖1所示，包括客戶端、元數(shù)據(jù)服務(wù)器、存儲服務(wù)器、Infiniband交換機(jī)、網(wǎng)絡(luò)橋和核心交換機(jī)，客戶端、元數(shù)據(jù)服務(wù)器和存儲服務(wù)器通過Infiniband網(wǎng)線與Infiniband交換機(jī)的端口相連,形成Infiniband網(wǎng)絡(luò)，網(wǎng)絡(luò)橋的一個端口通過Infiniband網(wǎng)線與Infiniband交換機(jī)相連,另一個端口通過萬兆網(wǎng)線與核心交換機(jī)相連，核心交換機(jī)用于與Inter網(wǎng)相連。Infiniband交換機(jī)選用基于InfiniBand技術(shù)的高性能36 口 Mellanox 5030交換機(jī),該交換機(jī)能夠提供36個全速穩(wěn)定無阻的40Gb/s端口，數(shù)據(jù)傳輸延遲小于200納秒，客戶端、元數(shù)據(jù)服務(wù)器和所有存儲服務(wù)器通過InfiniBand網(wǎng)線連接到Mellanox 5030交換機(jī)的各對應(yīng)端口。網(wǎng)絡(luò)橋節(jié)點(diǎn)安裝有Infiniband連接卡、萬兆網(wǎng)卡及驅(qū)動,通過I根InfiniBand網(wǎng)線連接到Mellanox5030交換機(jī)端口，通過I根萬兆網(wǎng)線高速上聯(lián)到核心交換機(jī)萬兆模塊作為外聯(lián)主要通訊通道，實現(xiàn)2種異構(gòu)網(wǎng)絡(luò)互聯(lián)。
[0016]本實施例中的客戶端是一套安裝lustre客戶端軟件的GPU/CPU集群，包括I個管理節(jié)點(diǎn)和9個計算節(jié)點(diǎn),每個節(jié)點(diǎn)安裝有l(wèi)ustre文件系統(tǒng)客戶端軟件、Infiniband連接卡及驅(qū)動，INTEL 1000M網(wǎng)卡及驅(qū)動。其中每個計算節(jié)點(diǎn)配置I塊500GB硬盤做系統(tǒng)盤，2塊2TB硬盤做RAIDO用作臨時存儲，搭載2個Tesla S1070 GPU服務(wù)器，每個Tesla S1070 GPU服務(wù)器提供480個并行處理核心；管理節(jié)點(diǎn)配置I塊500GB硬盤做系統(tǒng)盤。元數(shù)據(jù)服務(wù)器，配置8個硬盤，其中2塊500GB硬盤為RAIDl用作系統(tǒng)盤，6塊500GB硬盤為RAID6用作元數(shù)據(jù)存儲MDT。安裝有Lustre文件系統(tǒng)主程序、內(nèi)置文件系統(tǒng)、Infiniband連接卡及驅(qū)動，INTEL1000M網(wǎng)卡及驅(qū)動。存儲服務(wù)器共有5個，每個存儲服務(wù)器配置16盤，其中2塊500GB硬盤做RAIDl用作系統(tǒng)盤，14個2TB硬盤為RAID6分成3個8TB的0ST，共有15個0ST。每個存儲服務(wù)器節(jié)點(diǎn)上均安裝有Lustre文件系統(tǒng)主程序、內(nèi)置文件系統(tǒng)、Infiniband連接卡及驅(qū)動，千兆網(wǎng)卡及驅(qū)動。
[0017]實施例二
[0018]本實施例是在實施例一的基礎(chǔ)的進(jìn)一步改進(jìn),該改進(jìn)是針對Infiniband網(wǎng)絡(luò)出現(xiàn)異常而進(jìn)行維修導(dǎo)致影響生產(chǎn)任務(wù)而提出的，本實施例中的基于lustre存儲的網(wǎng)絡(luò)系統(tǒng)增加I條網(wǎng)絡(luò)作為冗余網(wǎng)絡(luò)，具體結(jié)構(gòu)如圖2所示，客戶端、元數(shù)據(jù)服務(wù)器和存儲服務(wù)器除了通過Infiniband網(wǎng)線與Infiniband交換機(jī)的端口相連,形成Infiniband網(wǎng)絡(luò)外,客戶端、元數(shù)據(jù)服務(wù)器和存儲服務(wù)器上還均設(shè)有冗余網(wǎng)絡(luò)連接卡和驅(qū)動，客戶端、元數(shù)據(jù)服務(wù)器和存儲服務(wù)器通過相應(yīng)網(wǎng)線分別與冗余交換設(shè)備的相應(yīng)端口連接，這里的冗余交換設(shè)備選用48 口的Foundry千兆交換機(jī)，千兆交換機(jī)通過I根千兆網(wǎng)線上聯(lián)到核心交換機(jī)千兆模塊作為外聯(lián)冗余通訊通道，在Infiniband網(wǎng)絡(luò)正常的情況下，處于斷開狀態(tài)，當(dāng)在Infiniband網(wǎng)絡(luò)出現(xiàn)異常情況時，千兆交換機(jī)與核心交換機(jī)處于連接狀態(tài)，所有客戶端、元數(shù)據(jù)服務(wù)器和所有存儲服務(wù)器通過千兆網(wǎng)線連接到48 口 Foundry千兆交換機(jī)端口，并通過核心交換機(jī)與外網(wǎng)連接，實現(xiàn)在Infiniband網(wǎng)線出現(xiàn)故障時整個網(wǎng)絡(luò)系統(tǒng)能夠正常工作。
【權(quán)利要求】
1.一種基于lustre存儲的網(wǎng)絡(luò)系統(tǒng)，其特征在于，該網(wǎng)絡(luò)系統(tǒng)包括客戶端、元數(shù)據(jù)服務(wù)器、存儲服務(wù)器、主網(wǎng)絡(luò)交換機(jī)、網(wǎng)絡(luò)橋和核心交換機(jī)，客戶端、元數(shù)據(jù)服務(wù)器和存儲服務(wù)器通過網(wǎng)線與主網(wǎng)絡(luò)交換機(jī)的相應(yīng)端口相連，形成第一網(wǎng)絡(luò)，所述網(wǎng)絡(luò)橋的一個端口通過網(wǎng)線與主網(wǎng)絡(luò)交換機(jī)相連，另一個端口通過網(wǎng)線與核心交換機(jī)相連，核心交換機(jī)用于與外網(wǎng)相連。
2.根據(jù)權(quán)利要求1所述的基于lustre存儲的網(wǎng)絡(luò)系統(tǒng)，其特征在于，所述的網(wǎng)絡(luò)系統(tǒng)還包括冗余網(wǎng)絡(luò)交換機(jī)，該冗余網(wǎng)絡(luò)交換機(jī)的各端口分別與客戶端、元數(shù)據(jù)服務(wù)器和存儲服務(wù)器相連，形成第一網(wǎng)絡(luò)的冗余網(wǎng)絡(luò)。
3.根據(jù)權(quán)利要求2所述的基于lustre存儲的網(wǎng)絡(luò)系統(tǒng)，其特征在于，所述的主網(wǎng)絡(luò)交換機(jī)為Infiniband交換機(jī)。
4.根據(jù)權(quán)利要求2所述的基于lustre存儲的網(wǎng)絡(luò)系統(tǒng)，其特征在于，所述的冗余網(wǎng)絡(luò)交換機(jī)為千兆交換機(jī)。
5.根據(jù)權(quán)利要求3所述的基于lustre存儲的網(wǎng)絡(luò)系統(tǒng)，其特征在于，所述的客戶端、元數(shù)據(jù)服務(wù)器和存儲服務(wù)器均安裝有Infiniband連接卡、冗余網(wǎng)絡(luò)連接卡、核心網(wǎng)絡(luò)連接卡及相應(yīng)的驅(qū)動。
6.根據(jù)權(quán)利要求3所述的基于lustre存儲的網(wǎng)絡(luò)系統(tǒng)，其特征在于，所述的網(wǎng)絡(luò)橋上安裝有Infiniband連接卡、核心網(wǎng)絡(luò)連接卡及相應(yīng)的驅(qū)動。
7.根據(jù)權(quán)利要求3所述的基于lustre存儲的網(wǎng)絡(luò)系統(tǒng)，其特征在于，所述的Infiniband 交換機(jī)為 Mellanox 5030 交換機(jī)。
【文檔編號】H04L29/08GK204046652SQ201420430693
【公開日】2014年12月24日 申請日期:2014年7月31日 優(yōu)先權(quán)日:2014年7月31日
【發(fā)明者】張娟, 翟中霞, 侯朋輝, 祖國峰, 楊丹, 何胡平, 方江雪, 陳明俊 申請人:中國石油化工股份有限公司, 中國石油化工股份有限公司河南油田分公司石油物探技術(shù)研究院