一種政務大數(shù)據(jù)預處理系統(tǒng)及處理方法

基本信息

申請?zhí)?/td> CN201410578565.8 申請日 -
公開(公告)號 CN104361031B 公開(公告)日 2018-06-19
申請公布號 CN104361031B 申請公布日 2018-06-19
分類號 G06F17/30 分類 計算;推算;計數(shù);
發(fā)明人 王茜;史晨昱;白峰;李安穎;劉守倉;杜威 申請(專利權)人 西安未來國際信息股份有限公司
代理機構 西安弘理專利事務所 代理人 西安未來國際信息股份有限公司
地址 710075 陜西省西安市高新區(qū)高新一路25號創(chuàng)新大廈北四層
法律狀態(tài) -

摘要

摘要 本發(fā)明公開了一種政務大數(shù)據(jù)預處理系統(tǒng),包括數(shù)據(jù)抽取模塊、非結構化數(shù)據(jù)抽取模塊、數(shù)據(jù)預處理模塊、分布式調(diào)度框架和管理控制臺,數(shù)據(jù)抽取模塊和非結構化數(shù)據(jù)抽取模塊均與分布式調(diào)度框架連接。本發(fā)明一種政務大數(shù)據(jù)預處理系統(tǒng),解決了現(xiàn)有預處理系統(tǒng)面對大數(shù)據(jù)預處理時的效率低下、精確性差、負載不均衡、并行工作能力差、不智能等問題。本發(fā)明還提供了一種政務大數(shù)據(jù)處理的方法,解決了現(xiàn)有預處理系統(tǒng)面對大數(shù)據(jù)預處理時的效率低下、精確性差、負載不均衡、并行工作能力差、不智能等問題。