本發(fā)明涉及調(diào)度分配優(yōu)化，具體為一種業(yè)務(wù)數(shù)據(jù)調(diào)度分配方法及系統(tǒng)。

背景技術(shù)：

1、調(diào)度優(yōu)化方法在工業(yè)、經(jīng)濟(jì)等領(lǐng)域有廣泛的應(yīng)用價(jià)值。多電價(jià)下負(fù)載實(shí)時(shí)調(diào)度主要目的是在滿足slas的前提下通過前端服務(wù)器將負(fù)載調(diào)度到低電價(jià)的數(shù)據(jù)中心進(jìn)行云服務(wù)，使得云提供商的電費(fèi)成本最低。

2、根據(jù)公開號(hào)cn102752395b公開了一種用于分布式數(shù)據(jù)中心實(shí)時(shí)業(yè)務(wù)分配的在線調(diào)度方法，該方法能夠保證在傳輸延時(shí)情況下，根據(jù)負(fù)載流路徑具體分配的反饋結(jié)果，再利用啟發(fā)式分支定界方法對(duì)目標(biāo)進(jìn)行優(yōu)化，能夠有效解決混合整型線性規(guī)劃中延時(shí)約束模型參數(shù)耦合的問題，并且該方法具有快速、準(zhǔn)確和高效性；尤其是在前端服務(wù)器和數(shù)據(jù)中心數(shù)目大量增加的情況下，其更能體現(xiàn)出高效、快速的優(yōu)勢。

3、但是部分現(xiàn)有的調(diào)度分配系統(tǒng)在對(duì)任務(wù)進(jìn)行調(diào)度的時(shí)候，由于數(shù)據(jù)的多樣性，在進(jìn)行分配的時(shí)候采用統(tǒng)一的方式進(jìn)行分配，這樣的分配方式會(huì)導(dǎo)致對(duì)資源調(diào)度不合理的情況，進(jìn)一步地影響整體的數(shù)據(jù)處理效率。

技術(shù)實(shí)現(xiàn)思路

1、針對(duì)現(xiàn)有技術(shù)的不足，本發(fā)明提供了一種業(yè)務(wù)數(shù)據(jù)調(diào)度分配方法及系統(tǒng)，解決了統(tǒng)一資源調(diào)度分配的方式，存在資源分配不合理的情況，對(duì)整體數(shù)據(jù)處理效率造成影響的問題。

2、為實(shí)現(xiàn)以上目的，本發(fā)明通過以下技術(shù)方案予以實(shí)現(xiàn)：一種業(yè)務(wù)數(shù)據(jù)調(diào)度分配方法，包括以下步驟：

3、s101：獲取所有的待調(diào)業(yè)務(wù)數(shù)據(jù)和數(shù)據(jù)處理節(jié)點(diǎn)，同時(shí)對(duì)待調(diào)業(yè)務(wù)數(shù)據(jù)和數(shù)據(jù)處理節(jié)點(diǎn)進(jìn)行分類得到分類結(jié)果，且分類結(jié)果包括待調(diào)業(yè)務(wù)數(shù)據(jù)分類結(jié)果和數(shù)據(jù)處理節(jié)點(diǎn)分類結(jié)果；

4、s102：對(duì)得到的分類結(jié)果中的待調(diào)業(yè)務(wù)數(shù)據(jù)分類結(jié)果進(jìn)行分析，根據(jù)數(shù)據(jù)關(guān)聯(lián)性對(duì)分類后的待調(diào)度業(yè)務(wù)數(shù)據(jù)進(jìn)行組合處理得到組合處理包；

5、s103：基于分類結(jié)果中的數(shù)據(jù)處理節(jié)點(diǎn)分類結(jié)果對(duì)待調(diào)業(yè)務(wù)數(shù)據(jù)進(jìn)行分配處理，通過計(jì)算低負(fù)載節(jié)點(diǎn)的綜合值，并結(jié)合節(jié)點(diǎn)對(duì)應(yīng)的處理完成情況選取待分配節(jié)點(diǎn)；

6、s104：對(duì)選取的待分配節(jié)點(diǎn)進(jìn)行分配處理，根據(jù)待調(diào)業(yè)務(wù)數(shù)據(jù)的分類類型進(jìn)行不同優(yōu)先級(jí)調(diào)度，并結(jié)合高負(fù)載節(jié)點(diǎn)的處理任務(wù)進(jìn)行二次調(diào)度分配，同時(shí)生成對(duì)應(yīng)的任務(wù)調(diào)度信息。

7、作為本發(fā)明的進(jìn)一步方案：所述步驟s101中對(duì)待調(diào)業(yè)務(wù)數(shù)據(jù)和數(shù)據(jù)處理節(jié)點(diǎn)進(jìn)行分類的具體方式為：

8、獲取所有的待調(diào)業(yè)務(wù)數(shù)據(jù)，并對(duì)待調(diào)業(yè)務(wù)數(shù)據(jù)進(jìn)行數(shù)據(jù)特征提取，同時(shí)根據(jù)數(shù)據(jù)特征對(duì)待調(diào)業(yè)務(wù)數(shù)據(jù)進(jìn)行分類得到常規(guī)業(yè)務(wù)數(shù)據(jù)和重要業(yè)務(wù)數(shù)據(jù)；

9、獲取所有的數(shù)據(jù)處理節(jié)點(diǎn)記作i，且i＝1、2、…、j，其中j表示數(shù)據(jù)處理節(jié)點(diǎn)的數(shù)量，同時(shí)獲取數(shù)據(jù)處理節(jié)點(diǎn)i對(duì)應(yīng)的資源負(fù)載記作ki，并將獲取的資源負(fù)載ki與預(yù)設(shè)值ky進(jìn)行比較；

10、當(dāng)資源負(fù)載ki大于預(yù)設(shè)值ky時(shí)，則將對(duì)應(yīng)的數(shù)據(jù)處理節(jié)點(diǎn)分類為高負(fù)載節(jié)點(diǎn)，反之則將對(duì)應(yīng)的數(shù)據(jù)處理節(jié)點(diǎn)分類為低負(fù)載節(jié)點(diǎn)。

11、作為本發(fā)明的進(jìn)一步方案：所述步驟s102中根據(jù)數(shù)據(jù)關(guān)聯(lián)性對(duì)分類后的待調(diào)度業(yè)務(wù)數(shù)據(jù)進(jìn)行組合處理得到組合處理包的具體方式為：

12、接著獲取分類后的待調(diào)度業(yè)務(wù)數(shù)據(jù)，具體獲取的為常規(guī)業(yè)務(wù)數(shù)據(jù)和重要業(yè)務(wù)數(shù)據(jù)，同時(shí)基于數(shù)據(jù)挖掘算法對(duì)常規(guī)業(yè)務(wù)數(shù)據(jù)和重要業(yè)務(wù)數(shù)據(jù)進(jìn)行關(guān)聯(lián)性分析，并將存在關(guān)聯(lián)性的業(yè)務(wù)數(shù)據(jù)進(jìn)行組合得到組合處理包；

13、對(duì)組合處理包中常規(guī)業(yè)務(wù)數(shù)據(jù)和重要業(yè)務(wù)數(shù)據(jù)對(duì)應(yīng)的數(shù)據(jù)容量進(jìn)行獲取，并以數(shù)據(jù)容量較大的類型數(shù)據(jù)對(duì)組合處理包的數(shù)據(jù)類型進(jìn)行確定，而針對(duì)不存在數(shù)據(jù)關(guān)聯(lián)性的分類數(shù)據(jù)，則不進(jìn)行處理。

14、作為本發(fā)明的進(jìn)一步方案：所述步驟s103中計(jì)算低負(fù)載節(jié)點(diǎn)的綜合值的具體方式為：

15、獲取數(shù)據(jù)處理節(jié)點(diǎn)分類結(jié)果中所有的低負(fù)載節(jié)點(diǎn)，并對(duì)低負(fù)載節(jié)點(diǎn)進(jìn)行標(biāo)號(hào)記作a，且a＝1、2、…、b，其中b表示低負(fù)載節(jié)點(diǎn)的數(shù)量，同時(shí)獲取低負(fù)載節(jié)點(diǎn)a對(duì)應(yīng)的處理速度va、處理容量la和網(wǎng)絡(luò)帶寬ka；

16、將獲取的低負(fù)載節(jié)點(diǎn)a對(duì)應(yīng)的參數(shù)代入公式計(jì)算得到低負(fù)載節(jié)點(diǎn)a對(duì)應(yīng)的綜合值qa，其中δ為系統(tǒng)內(nèi)置參數(shù)，同時(shí)根據(jù)計(jì)算得到的綜合值qa從大到小對(duì)低負(fù)載節(jié)點(diǎn)a進(jìn)行排序。

17、作為本發(fā)明的進(jìn)一步方案：所述步驟s103中結(jié)合節(jié)點(diǎn)對(duì)應(yīng)的處理完成情況選取待分配節(jié)點(diǎn)的具體方式為：

18、按照綜合值qa排序順序從大到小進(jìn)行分析，對(duì)低負(fù)載節(jié)點(diǎn)a對(duì)應(yīng)的周期處理量進(jìn)行獲取，同時(shí)獲取低負(fù)載節(jié)點(diǎn)a對(duì)應(yīng)的實(shí)時(shí)處理量，并計(jì)算低負(fù)載節(jié)點(diǎn)a對(duì)應(yīng)的任務(wù)完成占比值，接著將低負(fù)載節(jié)點(diǎn)a對(duì)應(yīng)的任務(wù)完成占比值與閾值進(jìn)行比較；

19、當(dāng)任務(wù)完成占比值大于閾值時(shí)，則將對(duì)應(yīng)的低負(fù)載節(jié)點(diǎn)標(biāo)記為待分配節(jié)點(diǎn)，反之則不對(duì)低負(fù)載節(jié)點(diǎn)進(jìn)行處理。

20、作為本發(fā)明的進(jìn)一步方案：所述步驟s104中根據(jù)待調(diào)業(yè)務(wù)數(shù)據(jù)的分類類型進(jìn)行不同優(yōu)先級(jí)調(diào)度的具體方式為：

21、獲取所有的組合處理包、常規(guī)業(yè)務(wù)數(shù)據(jù)和重要業(yè)務(wù)數(shù)據(jù)，并按照不同業(yè)務(wù)數(shù)據(jù)的優(yōu)先級(jí)進(jìn)行調(diào)度分配，獲取所有的待分配節(jié)點(diǎn)，并獲取待分配節(jié)點(diǎn)對(duì)應(yīng)的空閑處理容量，同時(shí)根據(jù)空閑處理容量對(duì)待調(diào)業(yè)務(wù)數(shù)據(jù)進(jìn)行計(jì)算并分配，并生成任務(wù)調(diào)度信息。

22、作為本發(fā)明的進(jìn)一步方案：所述步驟s104中結(jié)合高負(fù)載節(jié)點(diǎn)的處理任務(wù)進(jìn)行二次調(diào)度分配的具體方式為：

23、獲取剩余的待分配節(jié)點(diǎn)并記作二次待分配節(jié)點(diǎn)n，且n＝1、2、…、m，其中m表示二次待分配節(jié)點(diǎn)的數(shù)量，對(duì)所有的高負(fù)載節(jié)點(diǎn)進(jìn)行獲取，同時(shí)對(duì)高負(fù)載節(jié)點(diǎn)中未處理的重要業(yè)務(wù)數(shù)據(jù)容量進(jìn)行獲取，并按照未處理重要業(yè)務(wù)數(shù)據(jù)的數(shù)據(jù)容量從大到小排序；

24、接著對(duì)二次待分配節(jié)點(diǎn)n對(duì)應(yīng)的空閑處理容量l1?n和對(duì)應(yīng)的綜合值qn進(jìn)行獲取，同時(shí)計(jì)算二者之和，并選取和值最大的二次待分配節(jié)點(diǎn)為標(biāo)準(zhǔn)處理節(jié)點(diǎn)，生成任務(wù)調(diào)度信息。

25、一種業(yè)務(wù)數(shù)據(jù)調(diào)度分配系統(tǒng)，所述包括：調(diào)度數(shù)據(jù)信息采集單元、調(diào)度分類處理單元、任務(wù)調(diào)度分配單元和調(diào)度信息輸出單元；

26、調(diào)度數(shù)據(jù)信息采集單元，該單元用于將獲取的待調(diào)業(yè)務(wù)數(shù)據(jù)和數(shù)據(jù)處理節(jié)點(diǎn)傳輸?shù)秸{(diào)度分類處理單元；

27、調(diào)度分類處理單元，該單元用于對(duì)獲取的待調(diào)業(yè)務(wù)數(shù)據(jù)和數(shù)據(jù)處理節(jié)點(diǎn)進(jìn)行分類，通過對(duì)待調(diào)業(yè)務(wù)數(shù)據(jù)分類得到常規(guī)業(yè)務(wù)數(shù)據(jù)和重要業(yè)務(wù)數(shù)據(jù)，對(duì)數(shù)據(jù)處理節(jié)點(diǎn)進(jìn)行分類得到高負(fù)載節(jié)點(diǎn)和低負(fù)載節(jié)點(diǎn)，并生成分類結(jié)果，同時(shí)將分類結(jié)果傳輸?shù)饺蝿?wù)調(diào)度分配單元；

28、任務(wù)調(diào)度分配單元，該單元用于根據(jù)獲取的分類結(jié)果進(jìn)行調(diào)度分配，根據(jù)數(shù)據(jù)關(guān)聯(lián)性對(duì)分類后的待調(diào)業(yè)務(wù)數(shù)據(jù)進(jìn)行處理得到組合處理包，接著計(jì)算低負(fù)載節(jié)點(diǎn)的綜合值，并根據(jù)綜合值和節(jié)點(diǎn)任務(wù)處理完成情況對(duì)低負(fù)載節(jié)點(diǎn)進(jìn)行篩選得到待分配節(jié)點(diǎn)，同時(shí)根據(jù)待調(diào)業(yè)務(wù)數(shù)據(jù)的分類類型按照優(yōu)先級(jí)進(jìn)行調(diào)度生成任務(wù)調(diào)度信息，并對(duì)高負(fù)載節(jié)點(diǎn)對(duì)應(yīng)的重要業(yè)務(wù)數(shù)據(jù)進(jìn)行二次調(diào)度分配生成任務(wù)調(diào)度信息，同時(shí)將任務(wù)調(diào)度信息傳輸?shù)秸{(diào)度信息輸出單元；

29、調(diào)度信息輸出單元，該單元用于將生成的任務(wù)調(diào)度信息顯示給對(duì)應(yīng)的操作人員。

30、本發(fā)明提供了一種業(yè)務(wù)數(shù)據(jù)調(diào)度分配方法及系統(tǒng)。與現(xiàn)有技術(shù)相比具備以下有益效果：

31、本發(fā)明通過對(duì)待調(diào)度業(yè)務(wù)數(shù)據(jù)進(jìn)行分類得到不同類型的數(shù)據(jù)，同時(shí)對(duì)處理數(shù)據(jù)的服務(wù)器節(jié)點(diǎn)進(jìn)行分類，在對(duì)數(shù)據(jù)進(jìn)行調(diào)度分配的時(shí)候，根據(jù)不同節(jié)點(diǎn)的負(fù)載情況以及節(jié)點(diǎn)任務(wù)處理完成情況進(jìn)行分配處理，一方面能夠結(jié)合節(jié)點(diǎn)實(shí)際的負(fù)載情況進(jìn)行優(yōu)化調(diào)度分配，避免單一節(jié)點(diǎn)負(fù)載過大造成數(shù)據(jù)處理異常的情況，另一方面通過對(duì)完成情況進(jìn)行分析，并結(jié)合高負(fù)載節(jié)點(diǎn)的實(shí)際情況進(jìn)行綜合調(diào)度，提高了整體的資源調(diào)度利用率。