基于大數(shù)據(jù)平臺(tái)的貨車超偏載數(shù)據(jù)分車計(jì)算研究
摘要:鐵路貨運(yùn)超偏載監(jiān)控設(shè)備在日常運(yùn)行中生成并積累了大量的結(jié)構(gòu)化數(shù)據(jù),如何突破傳統(tǒng)業(yè)務(wù)系統(tǒng)處理能力的限制實(shí)現(xiàn)對(duì)海量歷史數(shù)據(jù)的分車計(jì)算是對(duì)超偏載數(shù)據(jù)挖掘的關(guān)鍵所在。概述貨車超偏載數(shù)據(jù)分車計(jì)算,針對(duì)存在的問題,提出以大數(shù)據(jù)平臺(tái)為載體,基于分布式內(nèi)存計(jì)算框架實(shí)現(xiàn)海量超偏載數(shù)據(jù)的分車計(jì)算,經(jīng)2種方案進(jìn)行驗(yàn)證,結(jié)果充分證明分車計(jì)算方案的正確性。依托鐵路數(shù)據(jù)服務(wù)平臺(tái)的分布式計(jì)算架構(gòu),對(duì)海量的鐵路貨車超偏載檢測(cè)數(shù)據(jù)進(jìn)行統(tǒng)計(jì)分析,實(shí)現(xiàn)分車(運(yùn)輸任務(wù)去重)計(jì)算,為后續(xù)開展鐵路貨運(yùn)分析奠定基礎(chǔ)。
注: 保護(hù)知識(shí)產(chǎn)權(quán),如需閱讀全文請(qǐng)聯(lián)系鐵道貨運(yùn)雜志社