本發(fā)明涉及數(shù)據(jù)管理，具體涉及了一種用于物流tms系統(tǒng)的數(shù)據(jù)采集系統(tǒng)。

背景技術(shù)：

1、運(yùn)輸管理系統(tǒng)（transportation?management?system），簡稱tms，是一種供應(yīng)鏈分組下的操作軟件，能夠提高物流的管理能力，包括管理裝運(yùn)單位，指定企業(yè)內(nèi)、國內(nèi)和國外的發(fā)貨計劃，管理運(yùn)輸模型、基準(zhǔn)和費(fèi)用，維護(hù)運(yùn)輸數(shù)據(jù)，生成提單，優(yōu)化運(yùn)輸計劃，選擇承運(yùn)人及服務(wù)方式，招標(biāo)和投標(biāo)，審計和支付貨運(yùn)賬單，處理貨損索賠，安排勞力和場所，管理文件和管理第三方物流、統(tǒng)一調(diào)度管理平臺、車輛管理、配件管理、油耗管理、費(fèi)用結(jié)算、人員管理、資源管理、財務(wù)核算、車輛跟蹤、業(yè)務(wù)統(tǒng)計等功能，對于企業(yè)來說，tms系統(tǒng)可以應(yīng)對日益復(fù)雜和競爭激烈的物流運(yùn)輸環(huán)境，提升競爭力和市場份額。

2、由于tms系統(tǒng)集成多個功能以及系統(tǒng)平臺，涉及到的數(shù)據(jù)量大，數(shù)據(jù)類型多，同時業(yè)務(wù)數(shù)據(jù)也來自不同平臺，因此對于數(shù)據(jù)管理較為繁雜，傳統(tǒng)的做法是需要人員對tms系統(tǒng)的數(shù)據(jù)進(jìn)行手動采集，然而由人員采集的方式存在效率低、正確率低的情況，同時整個采集過程由人來進(jìn)行操作，會存在人員對采集到的數(shù)據(jù)進(jìn)行惡意篡改的情況，導(dǎo)致數(shù)據(jù)真實性下降。

技術(shù)實現(xiàn)思路

1、本發(fā)明所解決的技術(shù)問題在于提供一種用于物流tms系統(tǒng)的數(shù)據(jù)采集系統(tǒng)及方法，能夠提高數(shù)據(jù)采集效率，保證數(shù)據(jù)真實性。

2、本發(fā)明提供的基礎(chǔ)方案：包括采集設(shè)備以及采集設(shè)備中的采集系統(tǒng)，所述采集設(shè)備包括設(shè)備識別模塊、采集獲取模塊、外設(shè)鎖定模塊以及數(shù)據(jù)采集模塊；

3、設(shè)備識別模塊，用于識別接入目標(biāo)終端的采集設(shè)備的設(shè)備信息，根據(jù)設(shè)備信息進(jìn)行驗證識別；

4、采集獲取模塊，用于在驗證通過后，獲取目標(biāo)數(shù)據(jù)的采集信息，所述采集信息包括數(shù)據(jù)類別；

5、外設(shè)鎖定模塊，用于在獲取到采集信息后，鎖定接入目標(biāo)終端的除采集設(shè)備的外設(shè)輸入指令；

6、數(shù)據(jù)采集模塊，用于根據(jù)采集信息，對從tms系統(tǒng)重對目標(biāo)數(shù)據(jù)進(jìn)行采集，并將目標(biāo)數(shù)據(jù)上傳指定存儲位置。

7、本發(fā)明的原理及優(yōu)點在于：在進(jìn)行數(shù)據(jù)采集時，通過在終端機(jī)上接入采集設(shè)備，在采集設(shè)備接入目標(biāo)終端機(jī)上后，對采集設(shè)備的真實性進(jìn)行驗證，當(dāng)驗證通過過后，便直接鎖定除了除采集設(shè)備外其他外設(shè)設(shè)備，如鼠標(biāo)、鍵盤的輸入執(zhí)行，用戶無法再繼續(xù)通過其他外設(shè)對目標(biāo)終端進(jìn)行操作。此后數(shù)據(jù)模塊根據(jù)需要采集的目標(biāo)數(shù)據(jù)，從tms系統(tǒng)中采集目標(biāo)數(shù)據(jù)，并且上傳到指定的存儲為止，可直接存儲在目標(biāo)終端上，也可以上傳至云端進(jìn)行存儲。

8、相比于與現(xiàn)有技術(shù)，存在以下優(yōu)點：

9、1.通過采集系統(tǒng)對所需數(shù)據(jù)進(jìn)行自動化采集，無需人工手動采集，在采集時只需要人工輸入目標(biāo)數(shù)據(jù)的采集信息即可，其余步驟由系統(tǒng)自動完成，提高數(shù)據(jù)采集的效率，以及采集到的數(shù)據(jù)的正確性。

10、2.在采集設(shè)備插入目標(biāo)終端完成驗證過程后，便切斷其他外設(shè)的輸入，在數(shù)據(jù)采集過程中，全由采集設(shè)備以及采集系統(tǒng)完成，人員無法對目標(biāo)終端進(jìn)行操作，避免數(shù)據(jù)采集過程中數(shù)據(jù)被篡改。

11、進(jìn)一步，所述語義識別模塊，還用于根據(jù)操作按鍵上的文字，識別文字語義相近的操作按鍵，將文字語義相近的操作按鍵標(biāo)記為第一按鍵組，其他操作案件標(biāo)記為第二按鍵組；

12、按鍵選擇模塊，還用于當(dāng)存在文字語義相近的操作按鍵，在選擇目標(biāo)操作按鍵時，識別目標(biāo)數(shù)據(jù)采集信息與第一按鍵組的關(guān)聯(lián)性，根據(jù)預(yù)設(shè)條件，當(dāng)關(guān)聯(lián)性不滿足預(yù)設(shè)條件時，從第二按鍵組中選取操作按鍵，滿足預(yù)設(shè)條件時，從第一按鍵組中選擇操作按鍵。

13、進(jìn)一步，所述數(shù)據(jù)采集模塊包括界面識別模塊、指令生成模塊以及指令執(zhí)行模塊；

14、界面識別模塊，用于在進(jìn)入tms系統(tǒng)后，對tms系統(tǒng)的當(dāng)前操作界面進(jìn)行界面識別，識別目標(biāo)數(shù)據(jù)是否存在當(dāng)前操作界面，當(dāng)未識別到時，識別當(dāng)前操作界面中的所有操作按鍵，從中篩選目標(biāo)操作按鍵；

15、指令生成模塊，用于根據(jù)界面識別結(jié)果，生成操作指令，當(dāng)未在當(dāng)前操作界面識別到目標(biāo)數(shù)據(jù)時，生成目標(biāo)操作按鍵操作指令，當(dāng)在當(dāng)前操作界面識別到目標(biāo)數(shù)據(jù)時，生成采集指令；

16、指令執(zhí)行模塊，用于在接收到目標(biāo)操作按鍵的操作指令后，點擊目標(biāo)按鍵進(jìn)入對應(yīng)界面，還用于在接收到采集指令時，對目標(biāo)數(shù)據(jù)進(jìn)行提取。

17、在進(jìn)入tms系統(tǒng)后，通過對tms系統(tǒng)的操作界面進(jìn)行識別，識別出當(dāng)前操作界面是否存在所要采集的目標(biāo)數(shù)據(jù)，若沒有數(shù)據(jù)便識別操作界面中的操作按鍵，篩選出通過操作按鍵進(jìn)入下個界面中會存在目標(biāo)數(shù)據(jù)的目標(biāo)操作按鍵。若在當(dāng)前界面識別到目標(biāo)數(shù)據(jù)，便生成對目標(biāo)數(shù)據(jù)進(jìn)行采集的操作指令，對目標(biāo)數(shù)據(jù)進(jìn)行采集。若沒識別到目標(biāo)數(shù)據(jù)，則根據(jù)識別出的目標(biāo)操作按鍵，生成點擊目標(biāo)操作按鍵的指令，進(jìn)入到下一界面。例如選擇上一頁、下一頁、又或者是點擊某個按鍵鏈接。即在進(jìn)入tms系統(tǒng)后，以界面識別的方式，自動檢索出目標(biāo)數(shù)據(jù)所在界面，而后對目標(biāo)數(shù)據(jù)進(jìn)行采集。本方案中采用界面識別的方式，進(jìn)行目標(biāo)數(shù)據(jù)所在位置的識別。傳統(tǒng)數(shù)據(jù)采集的方式是通過預(yù)設(shè)好數(shù)據(jù)存放的路徑，在進(jìn)行采集時，腳本文件根據(jù)預(yù)先存放好的路徑執(zhí)行，對目標(biāo)數(shù)據(jù)進(jìn)行采集。通過這種方式，會存在tms平臺方對界面進(jìn)行更新，或者是對路徑進(jìn)行更改后，就需要對腳本文件進(jìn)行修改。而以本方案中的方式，并非設(shè)定固定的路徑，而是根據(jù)操作界面識別的方式完成目標(biāo)數(shù)據(jù)位置的確定，即使界面改變，路徑改變，也能夠找到目標(biāo)數(shù)據(jù)的位置。

18、進(jìn)一步，所述界面識別模塊包括語義識別模塊、按鍵選擇模塊；

19、語義識別模塊，用于識別操作按鍵上的文字，對操作按鍵上的文字進(jìn)行語義識別，操作按鍵文字語義與目標(biāo)數(shù)據(jù)采集信息的關(guān)聯(lián)性；

20、按鍵選擇模塊，用于根據(jù)操作按鍵文字語義與目標(biāo)數(shù)據(jù)的關(guān)聯(lián)性，篩選關(guān)聯(lián)性最強(qiáng)的作為目標(biāo)操作按鍵。

21、tms系統(tǒng)中，處理基礎(chǔ)的按鍵外，還存在各類功能板塊的按鍵入口，例如訂單管理、派單管理、運(yùn)輸工具管理、在途監(jiān)控、站點管理等等。同時各個大功能板塊下還存在許多小功能板塊，例如運(yùn)輸工具管理下，還存在運(yùn)輸工具信息管理、車輛管理、車輛狀態(tài)管理、車輛跟蹤查詢等。同時由于各個功能按鍵入口上基本都會有文字，因此通過對文字的語義分析，能夠確定哪一個是目標(biāo)數(shù)據(jù)所在的功能板塊，便進(jìn)入到對應(yīng)功能板塊的操作界面中去。

22、進(jìn)一步，所述界面識別模塊還包括關(guān)聯(lián)識別模塊；

23、關(guān)聯(lián)識別模塊，用于識別當(dāng)前界面中操作按鍵語義和采集信息的關(guān)聯(lián)性，與上一操作界面中操作按鍵和采集信息關(guān)聯(lián)性強(qiáng)弱關(guān)系；

24、指令生成模塊，還用于當(dāng)前操作界面中操作按鍵語義和采集信息的關(guān)聯(lián)性若與上一操作界面時，生成返回指令；

25、指令執(zhí)行模塊，還用于當(dāng)接收到返回指令時，返回上一操作界面；

26、按鍵選擇模塊，還用于根據(jù)當(dāng)前操作界面的進(jìn)入次數(shù)，在根據(jù)關(guān)聯(lián)性選擇目標(biāo)操作按鍵時，選擇關(guān)聯(lián)性強(qiáng)度排序中第n個操作按鍵為目標(biāo)操作按鍵，n為當(dāng)前操作界面的進(jìn)入次數(shù)。

27、在進(jìn)行語義識別時，可能會存在語義相近或者是語義識別錯誤的情況，導(dǎo)致識別出來的目標(biāo)操作按鍵進(jìn)入到下一操作界面中后，該操作界面的內(nèi)容與目標(biāo)數(shù)據(jù)無關(guān)。因此當(dāng)進(jìn)入下一操作界面后，識別當(dāng)前操作界面中的操作按鍵語義和采集信息的關(guān)聯(lián)性是否強(qiáng)于上一操作界面，若否，則是存在識別錯誤的情況，需要返回上一操作界面。同時在目標(biāo)操作按鍵選擇時，根據(jù)當(dāng)前操作界面的進(jìn)入次數(shù)，選擇出關(guān)聯(lián)性強(qiáng)弱排序中，序列與進(jìn)入當(dāng)前操作界面次數(shù)對應(yīng)的操作按鍵。例如當(dāng)前操作界面的進(jìn)入次數(shù)為一時，說明是第一次進(jìn)入當(dāng)前操作界面，選擇關(guān)聯(lián)性強(qiáng)度排序中序列第一的操作按鍵作為目標(biāo)操作按鍵。而若是當(dāng)前操作界面的進(jìn)入次數(shù)為二，則是因為進(jìn)入下一操作界面后，由于關(guān)聯(lián)性低于當(dāng)前界面而返回，此時選擇關(guān)聯(lián)性強(qiáng)度排序中序列第二的操作按鍵作為目標(biāo)操作按鍵，以此類推。

28、進(jìn)一步，所述數(shù)據(jù)采集模塊包括本地存儲模塊和云端存儲模塊；

29、本地存儲模塊，預(yù)設(shè)有目標(biāo)終端的本地存儲路徑，用于根據(jù)本地存儲路徑將采集到的目標(biāo)數(shù)據(jù)在目標(biāo)終端本地存儲；

30、云端存儲模塊，預(yù)設(shè)有云端地址，用于將采集到的目標(biāo)數(shù)據(jù)上傳云端存儲。

31、由本地存儲和云端存儲兩種方式，可根據(jù)目標(biāo)數(shù)據(jù)使用需求，選擇在采集終端本地存儲以及在云端進(jìn)行存儲。

32、進(jìn)一步，還包括操作記錄模塊、記錄查詢模塊；

33、操作記錄模塊，用于在采集到目標(biāo)數(shù)據(jù)后，記錄操作按鍵順序，并將操作按鍵順序與采集信息關(guān)聯(lián)存儲；

34、記錄查詢模塊，用于在接收到采集信息后，識別是否有與該采集信息關(guān)聯(lián)存儲的操作按鍵順序；

35、指令生成模塊，還用于根據(jù)記錄的操作按鍵順序生成連續(xù)操作指令。

36、當(dāng)通過界面識別，找到目標(biāo)數(shù)據(jù)，完成數(shù)據(jù)采集后，對本次采集界面識別過程中所識別的操作按鍵順序進(jìn)行記錄，在之后獲取到相同的采集信息時，便可根據(jù)所記錄的操作按鍵順序生成操作指令，無需再次進(jìn)行界面識別。

37、進(jìn)一步，所述操作記錄模塊，還用于記錄操作界面布局截圖，并將操作界面布局截圖關(guān)聯(lián)存儲；

38、界面識別模塊，有與該采集信息關(guān)聯(lián)存儲的操作按鍵順序時，識別各個操作界面是否與關(guān)聯(lián)存儲的操作界面布局截圖一致；

39、指令執(zhí)行模塊，還用于當(dāng)連續(xù)操作指令，執(zhí)行到的操作界面與管理存儲的操作界面布局截圖不一致時，中止連續(xù)操作指令。

40、同時記錄在本次識別過程中的各個操作界面布局截圖，在之后獲取到相同的采集指令進(jìn)行，按照所記錄的操作按鍵順序時，識別通過電機(jī)操作按鍵進(jìn)入到操作界面中的操作界面是否與對應(yīng)的操作界面布局截圖一致，當(dāng)識別到不一致時便中止連續(xù)操作指令，按照界面識別的方式繼續(xù)進(jìn)行，在平臺進(jìn)行升級，調(diào)整，導(dǎo)致頁面、布局發(fā)生變化后，仍然能夠自動識別出目標(biāo)數(shù)據(jù)的存放位置。

41、進(jìn)一步，界面識別模塊還包括數(shù)量識別模塊、數(shù)量判斷模塊；

42、數(shù)量識別模塊，用于識別當(dāng)前操作界面中操作按鍵數(shù)量m；

43、數(shù)量判斷模塊，用于判斷當(dāng)前操作界面的進(jìn)入次數(shù)n是否達(dá)到預(yù)設(shè)的m的占比，當(dāng)未達(dá)到時，繼續(xù)選擇第n個操作按鍵作為目標(biāo)按鍵，當(dāng)達(dá)到時，重新獲取目標(biāo)數(shù)據(jù)的采集信息。

44、由于本技術(shù)中，是通過用戶輸入的方式，獲取目標(biāo)數(shù)據(jù)的采集信息，用戶輸入時主觀性較強(qiáng)，即使相同的數(shù)據(jù)，也會存在不同人的描述具有區(qū)別，因此也會存在用戶輸入的采集信息具有歧義的情況。當(dāng)具有歧義時，通過語義分析，則可能無法定位到正確的目標(biāo)操作按鍵。

45、通過識別當(dāng)前操作界面的按鍵數(shù)量m，若是進(jìn)入操作界面的次數(shù)n達(dá)到預(yù)設(shè)占比時，例如，識別得到與目標(biāo)數(shù)據(jù)語義具有關(guān)聯(lián)的按鍵數(shù)量m為6，預(yù)設(shè)占比為50%，則是第三次進(jìn)入時，n為3時，達(dá)到閾值占比。由于進(jìn)行多次進(jìn)入下一操作界面，還是由于下一操作界面語義關(guān)聯(lián)度低于當(dāng)前操作界面，則將會判斷是輸入的采集信息具有歧義，無法根據(jù)采集信息查找到相關(guān)數(shù)據(jù)，因此重新進(jìn)行獲取。

46、本發(fā)明還公開了一種用于物流tms系統(tǒng)的數(shù)據(jù)采集方法，該方法包括以下步驟：

47、包括以下步驟：

48、s100：識別接入目標(biāo)終端的采集設(shè)備的設(shè)備信息，根據(jù)設(shè)備信息進(jìn)行驗證識別；

49、s200：在驗證通過后，獲取目標(biāo)數(shù)據(jù)的采集信息，所述采集信息包括數(shù)據(jù)類別；

50、s300：在獲取到采集信息后，鎖定接入目標(biāo)終端的除采集設(shè)備的外設(shè)輸入指令；

51、s400：根據(jù)采集信息，生成采集指令，對從tms系統(tǒng)重對目標(biāo)數(shù)據(jù)進(jìn)行采集，并將目標(biāo)數(shù)據(jù)上傳指定存儲位置。

52、進(jìn)一步，所述s400包括以下步驟：

53、s410：在進(jìn)入tms系統(tǒng)后，對tms系統(tǒng)的當(dāng)前操作界面進(jìn)行界面識別，識別目標(biāo)數(shù)據(jù)是否存在當(dāng)前操作界面，當(dāng)未識別到時，識別當(dāng)前操作界面中的所有操作按鍵，從中篩選目標(biāo)操作按鍵；

54、s410包括以下步驟：

55、s411：識別操作按鍵上的文字，對操作按鍵上的文字進(jìn)行語義識別，操作按鍵文字語義與目標(biāo)數(shù)據(jù)采集信息的關(guān)聯(lián)性；

56、s412：根據(jù)操作按鍵文字語義與目標(biāo)數(shù)據(jù)的關(guān)聯(lián)性，篩選關(guān)聯(lián)性最強(qiáng)的作為目標(biāo)操作按鍵；

57、s413：識別當(dāng)前界面中操作按鍵語義和采集信息的關(guān)聯(lián)性，判斷與上一操作界面中操作按鍵語義和采集信息關(guān)聯(lián)性強(qiáng)弱關(guān)系；

58、s414：當(dāng)前操作界面中操作按鍵語義和采集信息的關(guān)聯(lián)性弱與上一操作界面時，生成返回指令，返回上一操作界面；

59、s415：根據(jù)當(dāng)前操作界面的進(jìn)入次數(shù)，在根據(jù)關(guān)聯(lián)性選擇目標(biāo)操作按鍵時，選擇關(guān)聯(lián)性強(qiáng)度排序中第n個操作按鍵為目標(biāo)操作按鍵，n為當(dāng)前操作界面的進(jìn)入次數(shù)；

60、s420：根據(jù)界面識別結(jié)果，生成操作指令，當(dāng)未在當(dāng)前操作界面識別到目標(biāo)數(shù)據(jù)時，生成目標(biāo)操作按鍵操作指令，當(dāng)在當(dāng)前操作界面識別到目標(biāo)數(shù)據(jù)時，生成采集指令；

61、s430：在接收到目標(biāo)操作按鍵的操作指令后，點擊目標(biāo)按鍵進(jìn)入對應(yīng)界面，還用于在接收到采集指令時，對目標(biāo)數(shù)據(jù)進(jìn)行提取。

62、進(jìn)一步，還包括以下步驟：

63、s510：在采集到目標(biāo)數(shù)據(jù)后，記錄操作按鍵順序、操作界面布局截圖，并將操作按鍵順序、操作界面布局截圖與采集信息關(guān)聯(lián)存儲；

64、s520：在接收到采集信息后，識別是否有與該采集信息關(guān)聯(lián)存儲的操作按鍵順序；

65、s530：根據(jù)記錄的操作按鍵順序生成連續(xù)操作指令；

66、s540：識別各個操作界面是否與關(guān)聯(lián)存儲的操作界面布局截圖一致；

67、s550：當(dāng)連續(xù)操作指令，執(zhí)行到的操作界面與管理存儲的操作界面布局截圖不一致時，中止連續(xù)操作指令。