本發(fā)明涉及數(shù)據(jù)庫，特別是涉及一種基于智能調(diào)度的冷熱數(shù)據(jù)自動遷移方法。

背景技術(shù)：

1、隨著數(shù)字化時代的到來，數(shù)據(jù)量呈爆炸式增長，企業(yè)面臨著巨大的數(shù)據(jù)存儲和管理挑戰(zhàn)。傳統(tǒng)數(shù)據(jù)存儲方式往往無法高效應(yīng)對冷熱數(shù)據(jù)的不同需求,因此針對冷熱數(shù)據(jù)的分區(qū)管理則成為了降本增效的有效方式，但現(xiàn)目前的冷熱數(shù)據(jù)遷移方案通常依賴于靜態(tài)規(guī)則或人工干預(yù)，對于冷熱數(shù)據(jù)的轉(zhuǎn)換依靠設(shè)置的固定閾值進(jìn)行判斷，對于冷熱數(shù)據(jù)的存儲策略單一，不適應(yīng)大數(shù)據(jù)時代的特性，體現(xiàn)在冷數(shù)據(jù)未能及時遷移至低成本存儲設(shè)備，導(dǎo)致不必要的存儲費(fèi)用支出、熱數(shù)據(jù)未能及時回遷至高性能存儲設(shè)備，影響數(shù)據(jù)訪問速度和系統(tǒng)響應(yīng)時間。

技術(shù)實(shí)現(xiàn)思路

1、為解決現(xiàn)有技術(shù)中存在的不足，本發(fā)明提供了一種基于智能調(diào)度的冷熱數(shù)據(jù)自動遷移方法，該基于智能調(diào)度的冷熱數(shù)據(jù)自動遷移方法通過智能調(diào)度算法和設(shè)備性能監(jiān)控進(jìn)行動態(tài)調(diào)整，以動態(tài)的遷移策略去適應(yīng)數(shù)據(jù)訪問模式的變化，實(shí)現(xiàn)更加精準(zhǔn)的識別冷熱數(shù)據(jù)，提高遷移的準(zhǔn)確性和效率，顯著降低企業(yè)的存儲成本，提升數(shù)據(jù)的訪問速度和系統(tǒng)響應(yīng)時間。

2、為實(shí)現(xiàn)上述目的，本發(fā)明采用如下技術(shù)方案：

3、本發(fā)明提供了一種基于智能調(diào)度的冷熱數(shù)據(jù)自動遷移方法，包括以下步驟：

4、基于遷移策略，在高性能存儲設(shè)備和低成本存儲設(shè)備之間進(jìn)行冷熱數(shù)據(jù)的遷移；

5、所述遷移策略基于智能調(diào)度算法和設(shè)備性能監(jiān)控進(jìn)行動態(tài)調(diào)整。

6、本發(fā)明的基于智能調(diào)度的冷熱數(shù)據(jù)自動遷移方法，首先在日常工作中實(shí)時監(jiān)控存儲設(shè)備的各種指標(biāo)，再基于存儲設(shè)備的性能指標(biāo)配合智能調(diào)度算法，來動態(tài)的調(diào)整遷移策略，基于這個動態(tài)的遷移策略對冷熱數(shù)據(jù)進(jìn)行遷移，確保了本方法在多樣化的數(shù)據(jù)訪問和存儲模式下能夠保持一定的處理能力，保持對冷熱數(shù)據(jù)準(zhǔn)確的識別和高效的遷移。

7、本發(fā)明的基于智能調(diào)度的冷熱數(shù)據(jù)自動遷移方法通過智能調(diào)度算法和設(shè)備性能監(jiān)控進(jìn)行動態(tài)調(diào)整，以動態(tài)的遷移策略去適應(yīng)數(shù)據(jù)訪問模式的變化，實(shí)現(xiàn)更加精準(zhǔn)的識別冷熱數(shù)據(jù)，提高遷移的準(zhǔn)確性和效率，顯著降低企業(yè)的存儲成本，提升數(shù)據(jù)的訪問速度和系統(tǒng)響應(yīng)時間。

8、在進(jìn)一步的技術(shù)方案中，所述設(shè)備性能監(jiān)控包括對高性能存儲設(shè)備和低成本存儲設(shè)備的讀寫速度、延遲、帶寬監(jiān)控。

9、對設(shè)備的讀寫速度、延遲、帶寬進(jìn)行監(jiān)控，有利于智能調(diào)度算法精準(zhǔn)進(jìn)行動態(tài)的遷移策略調(diào)整，進(jìn)一步的提升遷移的效率。

10、在進(jìn)一步的技術(shù)方案中，所述設(shè)備性能監(jiān)控還包括基于性能指標(biāo)評估高性能存儲設(shè)備和低成本存儲設(shè)備的負(fù)載能力和剩余容量，為數(shù)據(jù)遷移提供資源分配依據(jù)。

11、準(zhǔn)確的評估是準(zhǔn)確進(jìn)行資源分配的前置條件，基于性能指標(biāo)對負(fù)載能力和剩余容量進(jìn)行評估，有利于智能調(diào)度算法精準(zhǔn)的進(jìn)行動態(tài)的遷移策略調(diào)整，進(jìn)一步的提升遷移的效率。

12、在進(jìn)一步的技術(shù)方案中，所述智能調(diào)度算法包括基于迪杰斯特拉算法分析數(shù)據(jù)遷移的最佳路徑。

13、基于迪杰斯特拉算法進(jìn)行數(shù)據(jù)遷移路徑規(guī)劃，能夠最快的完成數(shù)據(jù)遷移，進(jìn)一步的提升數(shù)據(jù)遷移的效率。

14、在進(jìn)一步的技術(shù)方案中，在冷熱數(shù)據(jù)遷移的前后，通過加密簽名的方式對數(shù)據(jù)進(jìn)行一致性校驗。

15、通過實(shí)時監(jiān)控和錯誤處理機(jī)制，確保遷移過程的數(shù)據(jù)一致性和完整性，降低數(shù)據(jù)丟失風(fēng)險。

16、有益效果在于：

17、1、本發(fā)明的基于智能調(diào)度的冷熱數(shù)據(jù)自動遷移方法通過智能調(diào)度算法和設(shè)備性能監(jiān)控進(jìn)行動態(tài)調(diào)整，以動態(tài)的遷移策略去適應(yīng)數(shù)據(jù)訪問模式的變化，實(shí)現(xiàn)更加精準(zhǔn)的識別冷熱數(shù)據(jù)，提高遷移的準(zhǔn)確性和效率，顯著降低企業(yè)的存儲成本，提升數(shù)據(jù)的訪問速度和系統(tǒng)響應(yīng)時間。

18、2、對設(shè)備的讀寫速度、延遲、帶寬進(jìn)行監(jiān)控，有利于智能調(diào)度算法精準(zhǔn)進(jìn)行動態(tài)的遷移策略調(diào)整，進(jìn)一步的提升遷移的效率。

19、3、準(zhǔn)確的評估是準(zhǔn)確進(jìn)行資源分配的前置條件，基于性能指標(biāo)對負(fù)載能力和剩余容量進(jìn)行評估，有利于智能調(diào)度算法精準(zhǔn)的進(jìn)行動態(tài)的遷移策略調(diào)整，進(jìn)一步的提升遷移的效率。

20、4、基于迪杰斯特拉算法進(jìn)行數(shù)據(jù)遷移路徑規(guī)劃，能夠最快的完成數(shù)據(jù)遷移，進(jìn)一步的提升數(shù)據(jù)遷移的效率。

21、5、通過實(shí)時監(jiān)控和錯誤處理機(jī)制，確保遷移過程的數(shù)據(jù)一致性和完整性，降低數(shù)據(jù)丟失風(fēng)險。

技術(shù)特征：

1.一種基于智能調(diào)度的冷熱數(shù)據(jù)自動遷移方法，其特征在于，包括以下步驟：

2.根據(jù)權(quán)利要求1所述的基于智能調(diào)度的冷熱數(shù)據(jù)自動遷移方法，其特征在于，所述設(shè)備性能監(jiān)控包括對高性能存儲設(shè)備和低成本存儲設(shè)備的讀寫速度、延遲、帶寬監(jiān)控。

3.根據(jù)權(quán)利要求2所述的基于智能調(diào)度的冷熱數(shù)據(jù)自動遷移方法，其特征在于，所述設(shè)備性能監(jiān)控還包括基于性能指標(biāo)評估高性能存儲設(shè)備和低成本存儲設(shè)備的負(fù)載能力和剩余容量，為數(shù)據(jù)遷移提供資源分配依據(jù)。

4.根據(jù)權(quán)利要求1所述的基于智能調(diào)度的冷熱數(shù)據(jù)自動遷移方法，其特征在于，所述智能調(diào)度算法包括基于迪杰斯特拉算法分析數(shù)據(jù)遷移的最佳路徑。

5.根據(jù)權(quán)利要求1所述的基于智能調(diào)度的冷熱數(shù)據(jù)自動遷移方法，其特征在于，在冷熱數(shù)據(jù)遷移的前后，通過加密簽名的方式對數(shù)據(jù)進(jìn)行一致性校驗。

技術(shù)總結(jié)
本發(fā)明公開了一種基于智能調(diào)度的冷熱數(shù)據(jù)自動遷移方法，包括以下步驟：基于遷移策略，在高性能存儲設(shè)備和低成本存儲設(shè)備之間進(jìn)行冷熱數(shù)據(jù)的遷移；所述遷移策略基于智能調(diào)度算法和設(shè)備性能監(jiān)控進(jìn)行動態(tài)調(diào)整，本發(fā)明的基于智能調(diào)度的冷熱數(shù)據(jù)自動遷移方法通過智能調(diào)度算法和設(shè)備性能監(jiān)控進(jìn)行動態(tài)調(diào)整，以動態(tài)的遷移策略去適應(yīng)數(shù)據(jù)訪問模式的變化，實(shí)現(xiàn)更加精準(zhǔn)的識別冷熱數(shù)據(jù)，提高遷移的準(zhǔn)確性和效率，顯著降低企業(yè)的存儲成本，提升數(shù)據(jù)的訪問速度和系統(tǒng)響應(yīng)時間。

技術(shù)研發(fā)人員：楚鎮(zhèn)豪,魏飛,周文明
受保護(hù)的技術(shù)使用者：四川開物信息技術(shù)有限公司
技術(shù)研發(fā)日：
技術(shù)公布日：2025/1/6