一種基于分布式系統(tǒng)的海量交通數(shù)據(jù)快速處理方法

基本信息

申請?zhí)?/td> CN201510925950.X 申請日 -
公開（公告）號 CN105528431B 公開（公告）日 2019-05-14
申請公布號 CN105528431B 申請公布日 2019-05-14
分類號 G06F16/182（2019.01）I; G06F16/172（2019.01）I 分類 計算；推算；計數(shù);
發(fā)明人 張善海; 熊貴喜; 蔡朝輝; 杜博文; 凌萍; 謝志普 申請（專利權(quán)）人 新智認(rèn)知數(shù)據(jù)服務(wù)有限公司
代理機構(gòu) 上海遠(yuǎn)同律師事務(wù)所 代理人 新智認(rèn)知數(shù)據(jù)服務(wù)有限公司
地址 201201 上海市浦東新區(qū)川沙路955號11幢221室
法律狀態(tài) -

摘要

摘要 本發(fā)明提供一種基于分布式系統(tǒng)的海量交通數(shù)據(jù)快速處理方法，包括：步驟a：在時間和空間上將海量交通數(shù)據(jù)分塊，分塊后的所述交通數(shù)據(jù)具有時間屬性標(biāo)識和空間屬性標(biāo)識；步驟b：在內(nèi)存中以細(xì)粒度存儲一定數(shù)量的常用的所述交通數(shù)據(jù)，在文件系統(tǒng)中以粗粒度存儲除所述內(nèi)存存儲的交通數(shù)據(jù)之外的交通數(shù)據(jù)；步驟c：當(dāng)處理程序請求處理數(shù)據(jù)時，判斷所請求的交通數(shù)據(jù)是否在內(nèi)存中；步驟d：如果所請求的交通數(shù)據(jù)存儲在內(nèi)存中，則直接處理相應(yīng)數(shù)據(jù)；以及步驟e：如果所請求的交通數(shù)據(jù)存儲在所述文件系統(tǒng)中，則先根據(jù)文件信息從所述文件系統(tǒng)中將所述交通數(shù)據(jù)讀入內(nèi)存，再對所述交通數(shù)據(jù)進行處理。本發(fā)明方法查詢速度快，且效率高。