專利名稱：去隱私化處理方法和裝置的制作方法
技術(shù)領(lǐng)域：
本發(fā)明涉及通信領(lǐng)域中數(shù)據(jù)倉庫隱私數(shù)據(jù)保護(hù)技術(shù)，具體地，涉及一種去隱私化處理的方法及裝置。
背景技術(shù)：
運(yùn)營商經(jīng)營分析系統(tǒng)數(shù)據(jù)倉庫集中了運(yùn)營商各個生產(chǎn)系統(tǒng)的數(shù)據(jù)，包含了大量的客戶隱私數(shù)據(jù)。對于這些隱私數(shù)據(jù)的保護(hù)，可以借鑒其他行業(yè)應(yīng)用系統(tǒng)的客戶隱私數(shù)據(jù)保護(hù)所使用的以下幾種技術(shù)來實現(xiàn):基于數(shù)據(jù)匿名化技術(shù):根據(jù)具體情況對部分?jǐn)?shù)據(jù)進(jìn)行匿名化處理，再有條件的發(fā)布信息。如:不發(fā)布數(shù)據(jù)的某些域值，對這些數(shù)據(jù)進(jìn)行泛化(Generalization)處理，是一種不可逆的處理技術(shù)。在隱私披露風(fēng)險和數(shù)據(jù)精度間進(jìn)行折中，有選擇的發(fā)布敏感數(shù)據(jù)及可能披露敏感數(shù)據(jù)的信息，但保證對敏感數(shù)據(jù)及隱私的披露風(fēng)險在可容忍范圍內(nèi)。基于數(shù)據(jù)加密技術(shù):通過數(shù)據(jù)庫產(chǎn)品自帶的加密功能或者第三方獨(dú)立的加密系統(tǒng)，把涉及隱私的客戶數(shù)據(jù)信息通過加密算法轉(zhuǎn)換為不可識別的密文信息。如果需要獲取信息的明文信息，可以將其轉(zhuǎn)換為明文，即解密過程。常用的數(shù)據(jù)加密算法有:對稱加密、非對稱加密和HASH算法等幾種?；跀?shù)據(jù)失真技術(shù):使敏感數(shù)據(jù)失真但同時保持某些數(shù)據(jù)或?qū)傩圆蛔兊奶幚矸椒?，例如，采用添加噪?Adding Noise)、交換(Swapping)等技術(shù)對原始數(shù)據(jù)進(jìn)行干擾處理，但要求保證處理后的數(shù)據(jù)仍然可以保持某些統(tǒng)計方面的性質(zhì)，以便進(jìn)行數(shù)據(jù)挖掘等操作。該技術(shù)屬于一種不可逆的處理，但可在所有添加、交換信息都是記錄明確的情況進(jìn)行有條件的還原。隱私數(shù)據(jù)保護(hù)技術(shù)需要在實現(xiàn)保護(hù)隱私信息的同時，兼顧對應(yīng)用程序的價值和系統(tǒng)開銷?，F(xiàn)有技術(shù)中，通常從以下三方面對隱私數(shù)據(jù)保護(hù)技術(shù)進(jìn)行度量評估:1)隱私保護(hù)度:通常通過發(fā)布數(shù)據(jù)的披露風(fēng)險來反映，披露風(fēng)險越小，隱私保護(hù)度越高；2)數(shù)據(jù)缺損:是數(shù)據(jù)保護(hù)質(zhì)量的度量，它反映通過隱私保護(hù)技術(shù)處理后數(shù)據(jù)的信息丟失程度，數(shù)據(jù)缺損越高，信息丟失越多，數(shù)據(jù)利用率越低，具體數(shù)據(jù)缺損的度量的指標(biāo)包括:信息缺損(Information Loss)、重構(gòu)數(shù)據(jù)與原始數(shù)據(jù)的相似度等；算法性能:一般利用時間復(fù)雜度對算法性能進(jìn)行度量。依據(jù)上述評估方法，主要從隱私保護(hù)度、數(shù)據(jù)缺損度、性能開銷等幾方面對現(xiàn)有的三類隱私數(shù)據(jù)保護(hù)技術(shù)進(jìn)行對比，對比結(jié)果如下表:
權(quán)利要求
1.一種去隱私化處理方法，其特征在于，包括: 在由源數(shù)據(jù)獲取的客戶隱私數(shù)據(jù)之中提取索引字段，調(diào)用去隱私化映射關(guān)系表； 根據(jù)所述去隱私化映射關(guān)系表中的映射規(guī)則，將所述索引字段映射為去隱私化映射關(guān)系表中的映射編碼，完成對所述客戶隱私數(shù)據(jù)的去隱私化處理。
2.根據(jù)權(quán)利要求1所述的方法，其特征在于，如果所述去隱私化映射關(guān)系表不存在所述索引字段的映射規(guī)則，則在所述去隱私化映射關(guān)系表中添加該索引字段的映射規(guī)則后，再進(jìn)行映射處理。
3.根據(jù)權(quán)利要求1或2所述的方法，其特征在于，在所述去隱私化映射關(guān)系表泄密時，調(diào)用新的去隱私化映射關(guān)系表，根據(jù)該新的去隱私化映射關(guān)系表中的映射規(guī)則，將所述索引字段映射為新的映射編碼。
4.根據(jù)權(quán)利要求1或2所述的方法，其特征在于，每經(jīng)過一段時間調(diào)用新的去隱私化映射關(guān)系表，根據(jù)該新的去隱私化映射關(guān)系表中的映射規(guī)則，將原索引字段映射為新的映射編碼。
5.根據(jù)權(quán)利要求1或2所述的方法，其特征在于，還包括: 提取經(jīng)過去隱私化處理的源數(shù)據(jù)，根據(jù)所述去隱私化映射關(guān)系表中的映射規(guī)則，將所述經(jīng)去隱私化處理的源數(shù)據(jù)中的映射編碼還原成包含所述客戶隱私數(shù)據(jù)的索引字段。
6.一種去隱私化處理裝置，其特征在于，包括: 提取調(diào)用模塊，用于在由源數(shù)據(jù)獲取的客戶隱私數(shù)據(jù)之中提取索引字段，調(diào)用去隱私化映射關(guān)系表； 映射模塊，用于根據(jù)所述去隱私化映射關(guān)系表中的映射規(guī)則，將所述索引字段映射為去隱私化映射關(guān)系表中的映射編碼，完成對所述客戶隱私數(shù)據(jù)的去隱私化處理； 關(guān)系表存儲模塊，用于存儲去隱私化映射關(guān)系表。
7.根據(jù)權(quán)利要求6所述的裝置，其特征在于，還包括: 判斷添加模塊，用于判斷所述去隱私化映射關(guān)系表是否存在所述索引字段的映射規(guī)貝U，如果所述去隱私化映射關(guān)系表不存在所述索引字段的映射規(guī)則，則在所述去隱私化映射關(guān)系表中添加該索引字段的映射規(guī)則。
8.根據(jù)權(quán)利要求6或7所述的裝置，其特征在于， 所述提取調(diào)用模塊，還用于在所述去隱私化映射關(guān)系表泄密時，調(diào)用新的去隱私化映射關(guān)系表； 所述映射模塊，還用于根據(jù)該新的去隱私化映射關(guān)系表中的映射規(guī)則，將所述索引字段映射為新的映射編碼。
9.根據(jù)權(quán)利要求6或7所述的裝置，其特征在于， 所述提取調(diào)用模塊，還用于每經(jīng)過一段時間調(diào)用新的去隱私化映射關(guān)系表； 所述映射模塊，還用于根據(jù)該新的去隱私化映射關(guān)系表中的映射規(guī)則，將原索引字段映射為新的映射編碼。
10.根據(jù)權(quán)利要求6或7所述的裝置，其特征在于，還包括: 提取還原模塊，用于提取經(jīng)過去隱私化處理的源數(shù)據(jù)，根據(jù)所述去隱私化映射關(guān)系表中的映射規(guī)則，將所述經(jīng)去隱私化處理的源數(shù)據(jù)中的映射編碼還原成包含所述客戶隱私數(shù)據(jù)的索引字段。
全文摘要
本發(fā)明公開了一種去隱私化處理方法及裝置，其中，該方法包括在由源數(shù)據(jù)獲取的客戶隱私數(shù)據(jù)之中提取索引字段，調(diào)用去隱私化映射關(guān)系表；根據(jù)去隱私化映射關(guān)系表中的映射規(guī)則，將索引字段映射為去隱私化映射關(guān)系表中的映射編碼，完成對客戶隱私數(shù)據(jù)的去隱私化處理。本發(fā)明的去隱私化處理方法和裝置，去隱私化處理引擎設(shè)計在ETL模塊中，一方面充分利用ETL模塊現(xiàn)有的系統(tǒng)資源，避免占用數(shù)據(jù)倉庫以及數(shù)據(jù)集市的系統(tǒng)資源；另一方面因為ETL模塊是經(jīng)營分析系統(tǒng)所有數(shù)據(jù)的統(tǒng)一入口，ETL模塊對所有客戶隱私數(shù)據(jù)執(zhí)行去隱私化處理能夠保證所有操作的統(tǒng)一性。
文檔編號G06F17/30GK103177007SQ20111043417
公開日2013年6月26日 申請日期2011年12月22日 優(yōu)先權(quán)日2011年12月22日
發(fā)明者何鴻凌, 魏春輝, 陶濤, 龍國榮, 陳彰 申請人:中國移動通信集團(tuán)公司