數(shù)據(jù)校驗方法和裝置的制造方法
【技術(shù)領(lǐng)域】
[0001]本發(fā)明涉及數(shù)據(jù)處理技術(shù)領(lǐng)域，特別涉及一種數(shù)據(jù)校驗方法和裝置。
【背景技術(shù)】
[0002]在一些數(shù)據(jù)處理系統(tǒng)中需要對用戶輸入的數(shù)據(jù)進(jìn)行校驗，以避免因用戶輸入錯誤的數(shù)據(jù)影響后續(xù)數(shù)據(jù)處理。例如，對于大數(shù)據(jù)應(yīng)用來說，數(shù)據(jù)的采集是系統(tǒng)不可缺少的組成部分。例如，在大數(shù)據(jù)分析系統(tǒng)中，數(shù)據(jù)的采集位于系統(tǒng)的最前端，也是后續(xù)分析和展示的基礎(chǔ)。因此，數(shù)據(jù)的有效性直接關(guān)系到后續(xù)的分析和處理。
[0003]然而，對于數(shù)據(jù)采集系統(tǒng)來說，如何確定用戶的輸入數(shù)據(jù)或者采集數(shù)據(jù)是否正確，十分困難。目前大多系統(tǒng)只是對采集數(shù)據(jù)做一個非常粗范的有效性檢查，例如，對數(shù)據(jù)格式(如只能輸入數(shù)字或者小數(shù)格式)，或者對數(shù)據(jù)取值范圍進(jìn)行限定。但是，對于一些采集指標(biāo)，比如:經(jīng)濟(jì)指標(biāo)等，由于季節(jié)因素或者其他因素等，指標(biāo)取值波動變化較大。如果對指標(biāo)的取值范圍定義過小，會引起誤報，如果取值范圍定義過大，又會因范圍過大導(dǎo)致無法準(zhǔn)確檢測到用戶輸入的錯誤數(shù)據(jù)。
[0004]特別是在指標(biāo)多、需要用戶手動輸入數(shù)據(jù)的情況，輸入數(shù)據(jù)的準(zhǔn)確性更加難以保證。因此，如何對用戶輸入的數(shù)據(jù)進(jìn)行一個有效性的校驗，是一個有待解決的難題。

【發(fā)明內(nèi)容】

[0005]本發(fā)明旨在至少在一定程度上解決上述技術(shù)問題。
[0006]為此，本發(fā)明的第一個目的在于提出一種數(shù)據(jù)校驗方法，能夠提高數(shù)據(jù)校驗的精度，提高輸入數(shù)據(jù)的可靠性。
[0007]本發(fā)明的第二個目的在于提出一種數(shù)據(jù)校驗裝置。
[0008]為達(dá)上述目的，根據(jù)本發(fā)明第一方面實施例提出了一種數(shù)據(jù)校驗方法，包括以下步驟:接收用戶輸入的數(shù)據(jù)，并獲取所述用戶輸入的數(shù)據(jù)的業(yè)務(wù)類型;根據(jù)所述業(yè)務(wù)類型選擇對應(yīng)的預(yù)測算法，其中，所述預(yù)測算法是根據(jù)所述業(yè)務(wù)類型的歷史輸入數(shù)據(jù)訓(xùn)練得到的；根據(jù)所述預(yù)測算法預(yù)測所述業(yè)務(wù)類型對應(yīng)的輸入?yún)^(qū)間；判斷所述用戶輸入的數(shù)據(jù)是否在所述輸入?yún)^(qū)間之中；如果不在所述輸入?yún)^(qū)間之中，則確定所述用戶輸入的數(shù)據(jù)異常。
[0009]本發(fā)明實施例的數(shù)據(jù)校驗方法，在接收到用戶輸入的數(shù)據(jù)之后，可獲取該數(shù)據(jù)的業(yè)務(wù)類型，并根據(jù)業(yè)務(wù)類型選擇對應(yīng)的預(yù)測算法預(yù)測輸入?yún)^(qū)間，如果用戶輸入的數(shù)據(jù)不在該輸入?yún)^(qū)間之中，則確定該數(shù)據(jù)異常，，由此，能夠加強(qiáng)不同應(yīng)用場景下對用戶輸入的數(shù)據(jù)的合法性的檢查，減少因為輸入過程中誤操作導(dǎo)致的一些錯誤，提高數(shù)據(jù)校驗的精度，提高輸入數(shù)據(jù)的可靠性，減少較少通過人工進(jìn)行異常數(shù)據(jù)檢查的工作量。
[0010]本發(fā)明第二方面實施例提出了一種數(shù)據(jù)校驗裝置，包括:接收模塊，用于接收用戶輸入的數(shù)據(jù)，并獲取所述用戶輸入的數(shù)據(jù)的業(yè)務(wù)類型;選擇模塊，用于根據(jù)所述業(yè)務(wù)類型選擇對應(yīng)的預(yù)測算法，其中，所述預(yù)測算法是根據(jù)所述業(yè)務(wù)類型的歷史輸入數(shù)據(jù)訓(xùn)練得到的；預(yù)測模塊，用于根據(jù)所述預(yù)測算法預(yù)測所述業(yè)務(wù)類型對應(yīng)的輸入?yún)^(qū)間；判斷模塊，用于判斷所述用戶輸入的數(shù)據(jù)是否在所述輸入?yún)^(qū)間之中；確定模塊，用于當(dāng)所述用戶輸入的數(shù)據(jù)不在所述輸入?yún)^(qū)間之中時，確定所述用戶輸入的數(shù)據(jù)異常。
[0011]本發(fā)明實施例的數(shù)據(jù)校驗裝置，在接收到用戶輸入的數(shù)據(jù)之后，可獲取該數(shù)據(jù)的業(yè)務(wù)類型，并根據(jù)業(yè)務(wù)類型選擇對應(yīng)的預(yù)測算法預(yù)測輸入?yún)^(qū)間，如果用戶輸入的數(shù)據(jù)不在該輸入?yún)^(qū)間之中，則確定該數(shù)據(jù)異常，，由此，能夠加強(qiáng)不同應(yīng)用場景下對用戶輸入的數(shù)據(jù)的合法性的檢查，減少因為輸入過程中誤操作導(dǎo)致的一些錯誤，提高數(shù)據(jù)校驗的精度，提高輸入數(shù)據(jù)的可靠性，減少較少通過人工進(jìn)行異常數(shù)據(jù)檢查的工作量。
[0012]本發(fā)明的附加方面和優(yōu)點將在下面的描述中部分給出，部分將從下面的描述中變得明顯，或通過本發(fā)明的實踐了解到。
【附圖說明】
[0013]本發(fā)明的上述和/或附加的方面和優(yōu)點從結(jié)合下面附圖對實施例的描述中將變得明顯和容易理解，其中:
[0014]圖1為根據(jù)本發(fā)明一個實施例的數(shù)據(jù)校驗方法的流程圖；
[0015]圖2為根據(jù)本發(fā)明一個實施例中訓(xùn)練預(yù)測算法的示意圖；
[0016]圖3為根據(jù)本發(fā)明一個具體實施例的數(shù)據(jù)校驗方法的流程圖；
[0017]圖4為根據(jù)本發(fā)明另一個實施例的數(shù)據(jù)校驗方法的流程圖；
[0018]圖5為根據(jù)本發(fā)明一個實施例的數(shù)據(jù)校驗裝置的結(jié)構(gòu)示意圖；
[0019]圖6為根據(jù)本發(fā)明另一個實施例的數(shù)據(jù)校驗裝置的結(jié)構(gòu)示意圖。
【具體實施方式】
[0020]下面詳細(xì)描述本發(fā)明的實施例，所述實施例的示例在附圖中示出，其中自始至終相同或類似的標(biāo)號表示相同或類似的元件或具有相同或類似功能的元件。下面通過參考附圖描述的實施例是示例性的，僅用于解釋本發(fā)明，而不能理解為對本發(fā)明的限制。
[0021]在本發(fā)明的描述中，需要理解的是，術(shù)語“多個”指兩個或兩個以上;術(shù)語“第一”、“第二”僅用于描述目的，而不能理解為指示或暗示相對重要性。
[0022]下面參考附圖描述根據(jù)本發(fā)明實施例的數(shù)據(jù)校驗方法和裝置。
[0023]圖1為根據(jù)本發(fā)明一個實施例的數(shù)據(jù)校驗方法的流程圖。
[0024]如圖1所示，根據(jù)本發(fā)明實施例的數(shù)據(jù)校驗方法，包括:
[0025]SlOl，接收用戶輸入的數(shù)據(jù)，并獲取用戶輸入的數(shù)據(jù)的業(yè)務(wù)類型。
[0026]數(shù)據(jù)錄入系統(tǒng)可提供輸入界面，輸入界面中可包括與不同業(yè)務(wù)對應(yīng)的輸入框。當(dāng)用戶在輸入框中輸入數(shù)據(jù)時，可根據(jù)輸入框?qū)?yīng)的業(yè)務(wù)類型確定用戶輸入的數(shù)據(jù)的業(yè)務(wù)類型。
[0027]S102，根據(jù)業(yè)務(wù)類型選擇對應(yīng)的預(yù)測算法，其中，預(yù)測算法是根據(jù)業(yè)務(wù)類型的歷史輸入數(shù)據(jù)訓(xùn)練得到的。
[0028]具體地，可根據(jù)業(yè)務(wù)類型在預(yù)先建立的算法庫中查找對應(yīng)的預(yù)測算法。
[0029]其中，算法庫中存儲了預(yù)先分別針對各個業(yè)務(wù)類型訓(xùn)練的預(yù)測算法。因此，可根據(jù)用戶輸入的數(shù)據(jù)的業(yè)務(wù)類型從算法庫中選擇對應(yīng)的預(yù)測算法。
[0030]在本發(fā)明的實施例中，還可包括訓(xùn)練上述預(yù)測算法的過程。圖2為根據(jù)本發(fā)明一個實施例中訓(xùn)練預(yù)測算法的示意圖。
[0031]具體地，首先可分別獲取各個業(yè)務(wù)類型對應(yīng)的歷史輸入數(shù)據(jù)。由于各個業(yè)務(wù)類型對應(yīng)的歷史輸入數(shù)據(jù)具有不同的取值特征，因此，可根據(jù)各個業(yè)務(wù)類型對應(yīng)的的數(shù)據(jù)特征選擇相應(yīng)的預(yù)測算法。對于一種業(yè)務(wù)類型，可根據(jù)該業(yè)務(wù)類型對應(yīng)的歷史輸入數(shù)據(jù)分析出該業(yè)務(wù)類型的輸入數(shù)據(jù)的數(shù)據(jù)特征，即輸入數(shù)據(jù)的取值隨時間的變換規(guī)律。例如，隨時間變化不大、取值較穩(wěn)定的特征，或者周期性變化特征，或者季節(jié)性變換特征等。
[0032]進(jìn)而，可根據(jù)各個業(yè)務(wù)類型對應(yīng)的數(shù)據(jù)特征，分別選擇適合該數(shù)據(jù)特征的時間序列算法。舉例來說，對于輸入數(shù)據(jù)變化不大、取值區(qū)間較穩(wěn)定的業(yè)務(wù)類型，可選擇簡單序時平均數(shù)法;而對于具有周期性變換或季節(jié)性變化特征的業(yè)務(wù)類型，則可選擇季節(jié)趨勢預(yù)測法。
[0033]然后，對于各個業(yè)務(wù)類型，可從各自的歷史輸入數(shù)據(jù)中選擇一部分?jǐn)?shù)據(jù)作為訓(xùn)練數(shù)據(jù)，并根據(jù)各個業(yè)務(wù)類型的訓(xùn)練數(shù)據(jù)分別進(jìn)行訓(xùn)練，以得到各個業(yè)務(wù)類型對應(yīng)的時間序列算法的算法參數(shù)。
[0034]最后，對于各個業(yè)務(wù)類型，從各自的歷史輸入數(shù)據(jù)中選擇一部分?jǐn)?shù)據(jù)作為驗證數(shù)據(jù)，并根據(jù)各個業(yè)務(wù)類型的驗證數(shù)據(jù)驗證各自對應(yīng)的時間序列