技術(shù)編號:6550395
提示:您尚未登錄,請點(diǎn) 登 陸 后下載,如果您還沒有賬戶請點(diǎn) 注 冊 ,登陸完成后,請刷新本頁查看技術(shù)詳細(xì)信息。,包括以下步驟步驟(1)將海量浮動(dòng)車數(shù)據(jù)上傳至Hadoop分布式文件系統(tǒng);步驟(2)分布式數(shù)據(jù)清洗;步驟(3)將道路節(jié)點(diǎn)信息通過分布式緩存方法存儲到各個(gè)Slave子節(jié)點(diǎn)上時(shí),在任何Job在節(jié)點(diǎn)上執(zhí)行之前,先對道路節(jié)點(diǎn)信息建立網(wǎng)格索引;步驟(4)通過Hadoop的Map-Reduce框架從分布式文件系統(tǒng)HDFS中讀取清洗后的浮動(dòng)車數(shù)據(jù),同樣對其進(jìn)行切片處理,以128M為單元切片成多個(gè)數(shù)據(jù)塊,然后將數(shù)據(jù)塊分發(fā)到各個(gè)節(jié)點(diǎn)的Map-Reduce上,同時(shí)讀取分布式緩...
注意:該技術(shù)已申請專利,請尊重研發(fā)人員的辛勤研發(fā)付出,在未取得專利權(quán)人授權(quán)前,僅供技術(shù)研究參考不得用于商業(yè)用途。
該專利適合技術(shù)人員進(jìn)行技術(shù)研發(fā)參考以及查看自身技術(shù)是否侵權(quán),增加技術(shù)思路,做技術(shù)知識儲備,不適合論文引用。
請注意,此類技術(shù)沒有源代碼,用于學(xué)習(xí)研究技術(shù)思路。