技術編號：7779875
提示：您尚未登錄，請點 登 陸 后下載，如果您還沒有賬戶請點 注 冊 ，登陸完成后，請刷新本頁查看技術詳細信息。本發(fā)明公開了一種在線配置Hadoop參數(shù)的方法和裝置，以實現(xiàn)系統(tǒng)運行的性能最優(yōu)。該方法包括對生產(chǎn)環(huán)境集群中作業(yè)的數(shù)據(jù)量進行監(jiān)控；當監(jiān)控到生產(chǎn)環(huán)境集群中作業(yè)的數(shù)據(jù)量大于預設值時，統(tǒng)計當前配置下k個節(jié)點在p個任務階段中每個任務階段完成作業(yè)的平均完成時間；分別計算集合與n個記錄中作業(yè)特征屬性集合的n個歐幾里得距離，獲得n個歐幾里得距離中最小歐幾里得距離對應的記錄；在當前配置和最優(yōu)配置的配置參數(shù)值不等時，將最優(yōu)配置設置為數(shù)據(jù)量大于預設值的作業(yè)在生產(chǎn)環(huán)境集群中運行時...
注意：該技術已申請專利，請尊重研發(fā)人員的辛勤研發(fā)付出，在未取得專利權人授權前，僅供技術研究參考不得用于商業(yè)用途。
該專利適合技術人員進行技術研發(fā)參考以及查看自身技術是否侵權，增加技術思路，做技術知識儲備，不適合論文引用。