一種hadoop環(huán)境下的農(nóng)業(yè)數(shù)據(jù)監(jiān)控方法

基本信息

申請?zhí)?/td> CN201810402053.4 申請日 -
公開（公告）號 CN108595664B 公開（公告）日 2022-05-31
申請公布號 CN108595664B 申請公布日 2022-05-31
分類號 G06F16/182（2019.01）I 分類 計算；推算；計數(shù);
發(fā)明人 李梅汝;王志鴻;王文建 申請（專利權(quán)）人 天津泰達科技工業(yè)園有限公司
代理機構(gòu) 合肥市科融知識產(chǎn)權(quán)代理事務(wù)所（普通合伙） 代理人 -
地址 201800 上海市嘉定區(qū)環(huán)城路2222號3幢313室
法律狀態(tài) -

摘要

摘要 本發(fā)明請求保護一種hadoop環(huán)境下的農(nóng)業(yè)數(shù)據(jù)監(jiān)控方法，通過hadoop環(huán)境下存儲方法對農(nóng)業(yè)系統(tǒng)中的原始數(shù)據(jù)記錄進行存儲，采用非主鍵的索引方法對校驗字段進行索引，使用格網(wǎng)編碼方式，采用異構(gòu)數(shù)據(jù)層存儲Hbase對象的數(shù)據(jù)結(jié)構(gòu)，基于Hbase對象的結(jié)構(gòu)模式將任務(wù)進行分解，采用HBase對原始數(shù)據(jù)記錄建立時間戳索引和MapReduce的并行化方式完成校驗規(guī)則的數(shù)據(jù)監(jiān)控。本發(fā)明能夠高效可擴展地通過分布式集群的橫向擴展，解決數(shù)據(jù)海量化問題；通過異構(gòu)數(shù)據(jù)統(tǒng)一建模，解決數(shù)據(jù)異構(gòu)化帶來的不便；通過為校驗規(guī)則涉及的字段建立輔助查詢索引，以支持校驗規(guī)則執(zhí)行時進行高效查詢處理。