欧美在线观看视频网站,亚洲熟妇色自偷自拍另类,啪啪伊人网,中文字幕第13亚洲另类,中文成人久久久久影院免费观看 ,精品人妻人人做人人爽,亚洲a视频

支持海量采集終端的分布式內(nèi)存實(shí)時(shí)存儲(chǔ)裝置及方法與流程

文檔序號(hào):12038996閱讀:來源:國知局
支持海量采集終端的分布式內(nèi)存實(shí)時(shí)存儲(chǔ)裝置及方法與流程

技術(shù)特征:
1.一種支持海量采集終端的分布式內(nèi)存實(shí)時(shí)存儲(chǔ)裝置,包括主控服務(wù)器和至少一個(gè)數(shù)據(jù)服務(wù)器,所述的主控服務(wù)器與數(shù)據(jù)服務(wù)器通訊,其特征在于:所述的主控服務(wù)器,其用于從系統(tǒng)數(shù)據(jù)庫中讀取終端檔案信息表,并將所讀取的終端檔案信息表分割成多個(gè)檔案塊,并將每個(gè)檔案塊分配到所轄數(shù)據(jù)服務(wù)器,在所述的主控服務(wù)器內(nèi)存中存儲(chǔ)記錄了終端檔案信息表的分割情況及檔案塊存儲(chǔ)情況的檔案塊元數(shù)據(jù),并提供所轄數(shù)據(jù)服務(wù)器當(dāng)前負(fù)載情況查詢及比較功能;所述的數(shù)據(jù)服務(wù)器,用于接收主控服務(wù)器分配的檔案塊,以多個(gè)檔案塊的形式將終端檔案信息表存儲(chǔ)在內(nèi)存中,并面向電量計(jì)算任務(wù)模塊提供查詢功能,數(shù)據(jù)服務(wù)器數(shù)量設(shè)置多個(gè)并能實(shí)現(xiàn)動(dòng)態(tài)增減;所述主控服務(wù)器還包括以下模塊:檔案分配模塊,用于從系統(tǒng)數(shù)據(jù)庫中讀取終端檔案信息表,將其分割成多個(gè)檔案塊并分配到所轄數(shù)據(jù)服務(wù)器;檔案分配模塊根據(jù)終端檔案信息表的實(shí)際情況配置檔案塊的大小,從終端檔案信息表中按終端編號(hào)從小至大的順序讀取檔案信息,當(dāng)讀入的終端檔案信息達(dá)到配置大小時(shí),打包形成一個(gè)檔案塊;因此檔案塊元數(shù)據(jù)的檔案表分割情況中只需記錄第一個(gè)及最后一個(gè)存入該檔案塊的終端編號(hào);檔案元數(shù)據(jù)存儲(chǔ)模塊,用于存儲(chǔ)檔案分配模塊形成的檔案塊元數(shù)據(jù),提供基于終端編號(hào)的檔案塊位置查詢;負(fù)載比較模塊,用于查詢所轄數(shù)據(jù)服務(wù)器當(dāng)前的負(fù)載情況,在此基礎(chǔ)上比較所轄數(shù)據(jù)服務(wù)器的負(fù)載大小,得出負(fù)載最小的數(shù)據(jù)服務(wù)器。2.如權(quán)利要求1所述的分布式內(nèi)存實(shí)時(shí)存儲(chǔ)裝置,其特征在于:所述數(shù)據(jù)服務(wù)器還包括以下模塊:檔案管理模塊,用于接收檔案分配模塊分配的檔案塊;檔案存儲(chǔ)模塊,用于存儲(chǔ)檔案塊的實(shí)際數(shù)據(jù),并接受檔案查詢模塊的查詢;檔案查詢模塊,用于提供數(shù)據(jù)服務(wù)器的負(fù)載信息以及實(shí)現(xiàn)終端檔案信息表的查詢,并面向電量計(jì)算任務(wù)模塊提供查詢功能。3.如權(quán)利要求2所述的分布式內(nèi)存實(shí)時(shí)存儲(chǔ)裝置,其特征在于:所述的每個(gè)數(shù)據(jù)服務(wù)器的檔案管理模塊之間能相互復(fù)制。4.如權(quán)利要求1所述的分布式內(nèi)存實(shí)時(shí)存儲(chǔ)裝置,其特征在于:所述的負(fù)載比較模塊能查詢數(shù)據(jù)服務(wù)器的檔案查詢模塊。5.如權(quán)利要求1所述的分布式內(nèi)存實(shí)時(shí)存儲(chǔ)裝置,其特征在于:所述的負(fù)載比較模塊查 詢到負(fù)載最小的數(shù)據(jù)服務(wù)器后,發(fā)送給電量計(jì)算任務(wù)模塊。6.一種支持海量采集終端的分布式內(nèi)存實(shí)時(shí)存儲(chǔ)裝置的存儲(chǔ)方法,其特征在于,包括以下步驟:(1)主控服務(wù)器的檔案分配模塊根據(jù)終端檔案信息表的實(shí)際情況配置檔案塊的大小,從終端檔案信息表中按終端編號(hào)從小至大的順序讀取檔案信息,當(dāng)讀入的終端檔案信息達(dá)到配置大小時(shí),打包形成一個(gè)檔案塊;因此檔案塊元數(shù)據(jù)的檔案表分割情況中只需記錄第一個(gè)及最后一個(gè)存入該檔案塊的終端編號(hào),減小了檔案塊元數(shù)據(jù)所占用的內(nèi)存;(2)為保證檔案數(shù)據(jù)的高可靠性,為每個(gè)檔案塊設(shè)置n個(gè)副本;檔案分配模塊的分配方式是將一個(gè)檔案塊分配到n個(gè)不同的數(shù)據(jù)服務(wù)器進(jìn)行存儲(chǔ),并保證其n個(gè)不同的數(shù)據(jù)服務(wù)器中位于不同的機(jī)架上,其中n為自然數(shù),且n≥3;(3)將檔案塊元數(shù)據(jù)寫入檔案元數(shù)據(jù)存儲(chǔ)模塊,將檔案的實(shí)際數(shù)據(jù)寫入分配的數(shù)據(jù)服務(wù)器中;(4)數(shù)據(jù)服務(wù)器中的檔案管理模塊接收檔案分配模塊分配的檔案塊存入檔案存儲(chǔ)模塊,終端檔案數(shù)據(jù)以流水線的方式從檔案分配模塊寫入第一個(gè)數(shù)據(jù)服務(wù)器檔案存儲(chǔ)模塊,從第一個(gè)復(fù)制到第二個(gè),從第二個(gè)復(fù)制到第三個(gè),依次輪推,直到從第n-1個(gè)復(fù)制到n個(gè)。7.如權(quán)利要求6所述的存儲(chǔ)方法,其特征在于,所述的步驟(4)中的檔案塊寫入數(shù)據(jù)服務(wù)器的同時(shí),檔案分配模塊繼續(xù)接收終端檔案信息表中的數(shù)據(jù);檔案分配模塊定期從系統(tǒng)數(shù)據(jù)庫中讀取采集終端檔案信息表,重復(fù)以上存儲(chǔ)過程,實(shí)現(xiàn)檔案信息的同步。8.如權(quán)利要求6所述的存儲(chǔ)方法,其特征在于:在步驟(4)的檔案存儲(chǔ)完成后,面向電量計(jì)算任務(wù)模塊的檔案查詢是由電量計(jì)算任務(wù)模塊發(fā)起的,包括以下步驟:(1)首先電量計(jì)算任務(wù)模塊與檔案塊元數(shù)據(jù)存儲(chǔ)模塊通信,查詢?nèi)蝿?wù)涉及終端所屬的檔案塊及檔案塊位置;終端編號(hào)位于某檔案塊的編號(hào)區(qū)間內(nèi),則返回這一檔案塊所處的數(shù)據(jù)服務(wù)器信息;轉(zhuǎn)到步驟(2);(2)將數(shù)據(jù)服務(wù)器信息輸入負(fù)載比較模塊,通過與數(shù)據(jù)服務(wù)器的檔案查詢模塊通信,查詢比較這些數(shù)據(jù)服務(wù)器的負(fù)載情況,向電量計(jì)算任務(wù)模塊返回負(fù)載最小的數(shù)據(jù)服務(wù)器信息;(3)電量計(jì)算任務(wù)模塊向該服務(wù)器發(fā)起查詢,檔案查詢模塊接受查詢指令,在檔案存儲(chǔ)模塊中進(jìn)行匹配查詢,向電量計(jì)算任務(wù)模塊返回終端檔案信息,完成檔案查詢。
當(dāng)前第2頁1 2 3 
網(wǎng)友詢問留言 已有0條留言
  • 還沒有人留言評(píng)論。精彩留言會(huì)獲得點(diǎn)贊!
1
南通市| 土默特左旗| 夏邑县| 平塘县| 阿拉善盟| 浦江县| 浦江县| 栾城县| 临泽县| 珲春市| 兰州市| 乌什县| 万年县| 南丰县| 五华县| 南雄市| 荥经县| 新竹市| 班玛县| 介休市| 克拉玛依市| 同仁县| 庐江县| 灵台县| 昭苏县| 襄垣县| 鹤峰县| 连南| 同仁县| 和静县| 布拖县| 大连市| 望奎县| 长岭县| 临江市| 昭苏县| 三都| 大城县| 洛南县| 且末县| 阜新|