數(shù)據(jù)網(wǎng)關(guān)裝置和大數(shù)據(jù)系統(tǒng)的制作方法
【技術(shù)領(lǐng)域】
[0001]本發(fā)明屬于數(shù)據(jù)處理技術(shù)領(lǐng)域，具體涉及一種數(shù)據(jù)網(wǎng)關(guān)(Gateway)裝置和一種包 括該數(shù)據(jù)網(wǎng)關(guān)裝置的大數(shù)據(jù)系統(tǒng)，其可保障大數(shù)據(jù)的安全運營。
【背景技術(shù)】
[0002] 在大數(shù)據(jù)時代，盤活數(shù)據(jù)資產(chǎn)、開放共享數(shù)據(jù)已成為大勢所趨。開放數(shù)據(jù)服務(wù)、實 現(xiàn)大數(shù)據(jù)的運營和變現(xiàn)是當前大數(shù)據(jù)發(fā)展的熱點問題。然而，在大數(shù)據(jù)的運營或者變現(xiàn)過 程中，如何保證數(shù)據(jù)的合規(guī)性、避免敏感信息的泄漏、對交易數(shù)據(jù)進行計量或者計費以及對 數(shù)據(jù)進行審計等成為了當前亟需解決的問題。

【發(fā)明內(nèi)容】

[0003] 本發(fā)明的目的是提供一種數(shù)據(jù)網(wǎng)關(guān)裝置和一種包括該數(shù)據(jù)網(wǎng)關(guān)裝置的大數(shù)據(jù)系 統(tǒng)，其可以解決現(xiàn)有技術(shù)中存在的上述至少一個問題。
[0004] 為實現(xiàn)本發(fā)明的目的，根據(jù)本發(fā)明的一方面，提供了一種數(shù)據(jù)網(wǎng)關(guān)裝置，其包括：
[0005] 用戶管理模塊，其用于管理用戶信息；
[0006] 服務(wù)管理模塊，其用于管理向用戶開放的數(shù)據(jù)服務(wù)的信息；
[0007] 規(guī)則管理模塊，其用于針對不同用戶和不同的數(shù)據(jù)服務(wù)設(shè)置不同合規(guī)檢查規(guī)則；
[0008] 取數(shù)管理模塊，其用于接收用戶發(fā)出的服務(wù)的取數(shù)請求，向數(shù)據(jù)中心發(fā)出相應(yīng)的 取數(shù)請求，并接受數(shù)據(jù)中心返回的源數(shù)據(jù)；以及
[0009]數(shù)據(jù)脫敏處理模塊，其用于根據(jù)規(guī)則管理模塊設(shè)置的規(guī)則，對數(shù)據(jù)中心返回的源 數(shù)據(jù)進行合規(guī)檢查，從而生成服務(wù)數(shù)據(jù)，所述服務(wù)數(shù)據(jù)為滿足合規(guī)檢查的數(shù)據(jù)，其中
[0010] 所述取數(shù)管理模塊還用于將數(shù)據(jù)脫敏處理模塊生成的服務(wù)數(shù)據(jù)提供給用戶。
[0011] 可選地，所述規(guī)則管理模塊還可以用于針對不同用戶和不同的數(shù)據(jù)服務(wù)設(shè)置不同 的數(shù)據(jù)過濾脫敏規(guī)則，并且所述數(shù)據(jù)脫敏處理模塊可以用于對數(shù)據(jù)中心返回的源數(shù)據(jù)進行 過濾脫敏，然后再對過濾脫敏的數(shù)據(jù)進行合規(guī)檢查。
[0012] 可選地，所述取數(shù)模塊還可以用于對輸出的服務(wù)數(shù)據(jù)進行計量和計費。
[0013] 可選地，所述規(guī)則管理模塊還可以用于設(shè)置用戶的服務(wù)數(shù)據(jù)的輸出行數(shù)，當滿足 合規(guī)檢查的數(shù)據(jù)的總行數(shù)大于所述設(shè)置的服務(wù)數(shù)據(jù)的輸出行數(shù)時，所述數(shù)據(jù)脫敏處理模塊 還可以用于根據(jù)所述規(guī)則管理模塊設(shè)置的服務(wù)數(shù)據(jù)的輸出行數(shù)，對滿足合規(guī)檢查的數(shù)據(jù)， 從首行開始，順序截取一定行數(shù)的數(shù)據(jù)，來生成所述服務(wù)數(shù)據(jù)，其中所述行數(shù)=服務(wù)數(shù)據(jù)的 輸出行數(shù)。
[0014] 可選地，所述取數(shù)管理模塊還可以用于針對用戶的取數(shù)請求生成取數(shù)任務(wù)，并提 供取數(shù)任務(wù)的查看功能。
[0015] 可選地，所述用戶管理模塊還可以用于對不同類型的用戶的權(quán)限進行配置，所述 權(quán)限包括功能菜單訪問權(quán)限。
[0016] 所述合規(guī)檢查規(guī)則可以包括:數(shù)據(jù)字典匹配、數(shù)值范圍檢查和字段長度檢查。
[0017] 所述數(shù)據(jù)過濾脫敏規(guī)則可以包括:服務(wù)輸出字段篩選、字段的條件過濾和字段內(nèi) 容處理。
[0018] 可選地，所述數(shù)據(jù)網(wǎng)關(guān)裝置還可以包括存儲單元，其用于緩存數(shù)據(jù)中心返回的源 數(shù)據(jù)和數(shù)據(jù)脫敏處理模塊生成的服務(wù)數(shù)據(jù)，其中所述取數(shù)管理模塊配置為:首先判斷所述 存儲單元中是否存在客戶所請求的數(shù)據(jù)，如果所請求的數(shù)據(jù)已緩存在存儲單元中，則將緩 存在存儲單元中的所請求的數(shù)據(jù)作為服務(wù)數(shù)據(jù)提供給客戶，否則向數(shù)據(jù)中心發(fā)出相應(yīng)的取 數(shù)請求。
[0019] 可選地，所述數(shù)據(jù)網(wǎng)關(guān)裝置還可以包括安全審計模塊，其用于記錄操作日志和取 數(shù)日志，并將操作日志和取數(shù)日志存檔。
[0020] 可選地，所述數(shù)據(jù)網(wǎng)關(guān)裝置還可以包括工單管理模塊，其用于處理系統(tǒng)工單任務(wù)， 所述工單任務(wù)包括工單創(chuàng)建和工單查看。
[0021] 可選地，所述數(shù)據(jù)網(wǎng)關(guān)裝置還可以包括系統(tǒng)管理模塊，其用于配置系統(tǒng)的基礎(chǔ)數(shù) 據(jù)，所述基礎(chǔ)數(shù)據(jù)包括數(shù)據(jù)周期和定時器，所述數(shù)據(jù)周期為數(shù)據(jù)中心返回的源數(shù)據(jù)和所述 數(shù)據(jù)脫敏處理模塊生成的服務(wù)數(shù)據(jù)在數(shù)據(jù)網(wǎng)關(guān)裝置中的緩存周期。
[0022] 根據(jù)本發(fā)明的另一方面，還提供了一種客戶端可訪問的大數(shù)據(jù)系統(tǒng)，其包括數(shù)據(jù) 中心和數(shù)據(jù)網(wǎng)關(guān)裝置，所述數(shù)據(jù)網(wǎng)關(guān)裝置通過接口與所述數(shù)據(jù)中心連接，其中所述數(shù)據(jù)網(wǎng) 關(guān)裝置為上述任意一種數(shù)據(jù)網(wǎng)關(guān)裝置，并且所述數(shù)據(jù)網(wǎng)關(guān)裝置配置為能夠通過接口與客戶 端連接。
[0023] 所述數(shù)據(jù)網(wǎng)關(guān)裝置與所述數(shù)據(jù)中心可以通過數(shù)據(jù)服務(wù)信息同步更新接口、取數(shù)申 請接口、服務(wù)數(shù)據(jù)生成通知接口和服務(wù)數(shù)據(jù)同步接口來實現(xiàn)數(shù)據(jù)連接，其中，
[0024] 通過所述服務(wù)信息同步更新接口，所述數(shù)據(jù)網(wǎng)關(guān)裝置的服務(wù)管理模塊中的數(shù)據(jù)服 務(wù)的信息與所述數(shù)據(jù)中心開放的數(shù)據(jù)服務(wù)保持一致；
[0025]通過所述取數(shù)申請接口，所述數(shù)據(jù)網(wǎng)關(guān)裝置的取數(shù)管理模塊向所述數(shù)據(jù)中心發(fā)出 服務(wù)的取數(shù)請求，并且，當所述服務(wù)為實時服務(wù)時，所述數(shù)據(jù)中心通過所述取數(shù)申請接口向 所述數(shù)據(jù)網(wǎng)關(guān)裝置的取數(shù)管理模塊返回源數(shù)據(jù)，當所述服務(wù)為周期服務(wù)且所述服務(wù)的帳期 為歷史帳期時，所述數(shù)據(jù)中心通過所述取數(shù)申請接口向所述數(shù)據(jù)網(wǎng)關(guān)裝置的取數(shù)管理模塊 返回所請求源數(shù)據(jù)的存儲信息，當所述服務(wù)為周期服務(wù)且所述服務(wù)的帳期為未來帳期時， 所述數(shù)據(jù)中心通過所述取數(shù)申請接口向所述網(wǎng)關(guān)裝置的取數(shù)管理模塊返回帳期未到消息；
[0026] 通過所述服務(wù)數(shù)據(jù)生成通知接口，所述數(shù)據(jù)中心通知所述數(shù)據(jù)網(wǎng)關(guān)裝置的取數(shù)管 理模塊所請求源數(shù)據(jù)準備就緒并返回所請求源數(shù)據(jù)的存儲信息；以及
[0027] 通過所述服務(wù)數(shù)據(jù)同步接口，所述數(shù)據(jù)網(wǎng)關(guān)裝置的取數(shù)管理模塊根據(jù)所請求源數(shù) 據(jù)的存儲信息獲取數(shù)據(jù)。所述數(shù)據(jù)服務(wù)信息同步更新接口、取數(shù)申請接口、服務(wù)數(shù)據(jù)生成通 知接口可以通過Web Service接口實現(xiàn);所述服務(wù)數(shù)據(jù)同步接口可以通過FTP接口實現(xiàn)。
[0028] 數(shù)據(jù)網(wǎng)關(guān)裝置還配置為可以通過取數(shù)申請接口和服務(wù)數(shù)據(jù)推送接口來與客戶端 數(shù)據(jù)連接，其中，
[0029] 通過取數(shù)申請接口，數(shù)據(jù)網(wǎng)關(guān)裝置的取數(shù)管理模塊接受客戶端發(fā)出的服務(wù)的取數(shù) 請求，并且數(shù)據(jù)網(wǎng)關(guān)裝置的取數(shù)管理模塊向用戶提供所請求的服務(wù)數(shù)據(jù)；
[0030] 通過服務(wù)數(shù)據(jù)推送接口，數(shù)據(jù)網(wǎng)關(guān)裝置的取數(shù)管理模塊將所請求的服務(wù)數(shù)據(jù)推送 到指定位置。
[0031] 所述取數(shù)申請接口可以通過Web Service接口實現(xiàn);所述服務(wù)數(shù)據(jù)推送接口可以 通過FTP接口實現(xiàn)。
[0032] 本發(fā)明提供的數(shù)據(jù)網(wǎng)關(guān)裝置和大數(shù)據(jù)系統(tǒng)中，針對不同用戶和不同的數(shù)據(jù)類型， 利用不同的合規(guī)檢查規(guī)則對數(shù)據(jù)中心提供的源數(shù)據(jù)進行審核，保證了提供給用戶的服務(wù)數(shù) 據(jù)的規(guī)范性;對于定義的數(shù)據(jù)中的敏感信息，根據(jù)設(shè)置的規(guī)則進行過濾脫敏，保障交易輸出 的數(shù)據(jù)（即，服務(wù)數(shù)據(jù)）中無敏感內(nèi)容;對于合規(guī)的脫敏后的輸出數(shù)據(jù)，按照不同用戶、交易 輸出的數(shù)據(jù)量大小和數(shù)據(jù)價值屬性進行計量和計費;此外，數(shù)據(jù)輸出或者交易過程中，對數(shù) 據(jù)輸出對象（即，交易用戶）、輸出數(shù)據(jù)的時間以及輸出數(shù)據(jù)的格式等進行永久性存檔，以便 于未來的運營合規(guī)性審計。
【附圖說明】
[0033] 圖1為本發(fā)明一個實施例提供的數(shù)據(jù)網(wǎng)關(guān)裝置的示意圖；
[0034] 圖2為本發(fā)明另一個實施例提供的數(shù)據(jù)網(wǎng)關(guān)裝置的示意圖；
[0035]圖3為本發(fā)明實施例提供的數(shù)據(jù)網(wǎng)關(guān)裝置的工作流程圖；以及
[0036] 圖4為本發(fā)明實施例提供的大數(shù)據(jù)系統(tǒng)的示意圖。
【具體實施方式】
[0037] 為使本領(lǐng)域技術(shù)人員更好地理解本發(fā)明的技術(shù)方案，下面結(jié)合附圖和具體實施方 式對本發(fā)明作進一步詳細描述。
[0038] 本發(fā)明一個實施例提供了一種用于保障大數(shù)據(jù)安全運營的數(shù)據(jù)網(wǎng)關(guān)裝置。如圖1 所示，該數(shù)據(jù)網(wǎng)關(guān)裝置可以包括用戶管理模塊、服務(wù)管理模塊、規(guī)則管理模塊、取數(shù)管理模 塊和數(shù)據(jù)脫敏處理模塊。用戶管理模塊用于管理用戶信息。服務(wù)管理模塊用于管理向用戶 開放的數(shù)據(jù)服務(wù)的信息;規(guī)則管理模塊用于針對不同用戶和不同的數(shù)據(jù)服務(wù)設(shè)置不同合規(guī) 檢查規(guī)則;取數(shù)管理模塊用于接收用戶發(fā)出的服務(wù)的取數(shù)請求，向數(shù)據(jù)中心發(fā)出相應(yīng)的取 數(shù)請求，并接受數(shù)據(jù)中心返回的源數(shù)據(jù);數(shù)據(jù)脫敏處理模塊用于根據(jù)規(guī)則管理模塊設(shè)置的 規(guī)則，對數(shù)據(jù)中心返回的源數(shù)據(jù)進行合規(guī)檢查，從而生成服務(wù)數(shù)據(jù)，所述服務(wù)數(shù)據(jù)為滿足合 規(guī)檢查的數(shù)據(jù);其中，所述取數(shù)管理模塊還用于將數(shù)據(jù)脫敏處理模塊生成的服務(wù)數(shù)據(jù)提供 給用戶。
[0039] 根據(jù)本發(fā)明的其他實施例，本發(fā)明提供的用于保障大數(shù)據(jù)安全運營的數(shù)據(jù)網(wǎng)關(guān)裝 置還可以包括安全審計模塊、規(guī)則管理模塊、工單管理模塊和/或系統(tǒng)管理模塊。例如，圖2 示出了本發(fā)明另一個實施例提供的數(shù)據(jù)網(wǎng)關(guān)裝置的示意圖。
[0040] 以下，將參照圖1和圖2對數(shù)據(jù)網(wǎng)關(guān)裝置的各功能模塊進行詳細說明。
[00411用戶管理模塊
[0042]用戶管理模塊用于管理用戶信息，并可以對不同類型的用戶的功能菜單訪問權(quán)限 進行配置，從而可支持多種類型的用戶管理，實現(xiàn)多租戶管理。
[0043]用戶可包括數(shù)據(jù)用戶和機構(gòu)用戶。數(shù)據(jù)用戶是數(shù)據(jù)服務(wù)的需求用戶或第三方系 統(tǒng)/應(yīng)用，并且每個數(shù)據(jù)用戶必須關(guān)聯(lián)一個機構(gòu)，數(shù)據(jù)用戶可以申請獲取數(shù)據(jù)服務(wù)，并獲得 合規(guī)的服務(wù)數(shù)據(jù)。機構(gòu)用戶作為數(shù)據(jù)用戶的責任人，企業(yè)或組織機構(gòu)的責任人，一個機構(gòu)下 只有一個機構(gòu)用戶，但可以擁有多個數(shù)據(jù)用戶。可以理解，機構(gòu)用戶和數(shù)據(jù)用戶均可以自行 申請，通過對機構(gòu)用戶和數(shù)據(jù)用戶的申請及修改進行審核，可以更好地追蹤和記錄服務(wù)數(shù) 據(jù)的流向。
[0044]用戶還可以包括后臺業(yè)務(wù)管理人員，例如，可以包括數(shù)據(jù)安全管理員和審核人員。 數(shù)據(jù)安全管理員配置數(shù)據(jù)過濾、脫敏及合規(guī)檢查規(guī)則。審核人員審核用戶的注冊/修改/注 銷、分配用戶的密級、數(shù)據(jù)服務(wù)查看權(quán)限、取數(shù)權(quán)限、取數(shù)優(yōu)先級權(quán)