基于Kettle和GeoTools的空間大數(shù)據(jù)自動(dòng)化并行處理方法和系統(tǒng)
基本信息
| 申請(qǐng)?zhí)?/td> | CN202010722208.X | 申請(qǐng)日 | - |
| 公開（公告）號(hào) | CN112000312A | 公開（公告）日 | 2020-11-27 |
| 申請(qǐng)公布號(hào) | CN112000312A | 申請(qǐng)公布日 | 2020-11-27 |
| 分類號(hào) | G06F8/20(2018.01)I | 分類 | 計(jì)算；推算；計(jì)數(shù); |
| 發(fā)明人 | 李兵;郭明強(qiáng);王波;曹威;張敏 | 申請(qǐng)（專利權(quán)）人 | 湖北地信科技集團(tuán)股份有限公司 |
| 代理機(jī)構(gòu) | 武漢知產(chǎn)時(shí)代知識(shí)產(chǎn)權(quán)代理有限公司 | 代理人 | 湖北地信科技集團(tuán)股份有限公司 |
| 地址 | 430000湖北省武漢市武漢東湖新技術(shù)開發(fā)區(qū)高新大道980號(hào)北斗大廈七層 | ||
| 法律狀態(tài) | - | ||
摘要
| 摘要 | 本發(fā)明公開了一種基于Kettle和GeoTools的空間大數(shù)據(jù)自動(dòng)化并行處理方法和系統(tǒng)，方法包括以下步驟：通過Web客戶端制作空間數(shù)據(jù)處理流程圖；執(zhí)行流程圖相關(guān)參數(shù)配置，形成可解析的kettle文件；驗(yàn)證kettle文件的有效性；保存kettle文件到數(shù)據(jù)庫資源庫；空間數(shù)據(jù)處理平臺(tái)從數(shù)據(jù)庫資源庫請(qǐng)求、解析kettle文件；基于GeoTools設(shè)計(jì)空間數(shù)據(jù)抽取、轉(zhuǎn)換、加載方法；自動(dòng)化并行執(zhí)行空間數(shù)據(jù)處理流程；系統(tǒng)包括：客戶端，用于空間數(shù)據(jù)處理流程的配置、編輯、保存kettle文件；空間數(shù)據(jù)處理平臺(tái)，用于接收、解析kettle文件，按照客戶端設(shè)計(jì)的數(shù)據(jù)處理流程，將原始空間數(shù)據(jù)經(jīng)過處理流轉(zhuǎn)到結(jié)果數(shù)據(jù)。本發(fā)明可以完成多種空間數(shù)據(jù)從抽取、轉(zhuǎn)換、清洗到加載的處理過程，便捷、耦合度低、效率高。?? |
