技術編號:12887055
提示:您尚未登錄,請點 登 陸 后下載,如果您還沒有賬戶請點 注 冊 ,登陸完成后,請刷新本頁查看技術詳細信息。本發(fā)明涉及數(shù)據(jù)處理領域,更具體地,涉及一種基于Hive的數(shù)據(jù)處理的方法、系統(tǒng)及終端設備。背景技術大數(shù)據(jù)時代的來臨,使得數(shù)據(jù)的量越來越大,數(shù)據(jù)量的持續(xù)增長給存儲帶來了一定的壓力。而Hadoop集群的存儲規(guī)??偸怯邢薜?,這就需要提供一種更加有效的技術方案清理數(shù)據(jù)以及能快速恢復數(shù)據(jù)。一般情形下,Hadoop集群數(shù)據(jù)大小超過預警線時(比如當Hadoop集群數(shù)據(jù)大小超過存儲大小的80%的預警線),直接刪除中間數(shù)據(jù)(比如,刪除6個月前的中間數(shù)據(jù))。這種情形下,Hadoop集群數(shù)據(jù)大小是降低了。但是在再次需要...
注意:該技術已申請專利,請尊重研發(fā)人員的辛勤研發(fā)付出,在未取得專利權人授權前,僅供技術研究參考不得用于商業(yè)用途。
該專利適合技術人員進行技術研發(fā)參考以及查看自身技術是否侵權,增加技術思路,做技術知識儲備,不適合論文引用。
請注意,此類技術沒有源代碼,用于學習研究技術思路。