基于Presto的動(dòng)態(tài)數(shù)據(jù)處理方法及跨庫(kù)查詢(xún)方法

基本信息

申請(qǐng)?zhí)?/td> CN202011210164.9 申請(qǐng)日 -
公開(kāi)(公告)號(hào) CN112364047A 公開(kāi)(公告)日 2021-02-12
申請(qǐng)公布號(hào) CN112364047A 申請(qǐng)公布日 2021-02-12
分類(lèi)號(hào) G06F16/242(2019.01)I; 分類(lèi) 計(jì)算;推算;計(jì)數(shù);
發(fā)明人 李釗;孫浩;孫露;楊春;魏靜;胡傳會(huì);陳通 申請(qǐng)(專(zhuān)利權(quán))人 山東山科知識(shí)產(chǎn)權(quán)運(yùn)營(yíng)中心有限公司
代理機(jī)構(gòu) 濟(jì)南圣達(dá)知識(shí)產(chǎn)權(quán)代理有限公司 代理人 祖之強(qiáng)
地址 250014山東省濟(jì)南市高新區(qū)新濼大街2008號(hào)銀荷大廈B座3層
法律狀態(tài) -

摘要

摘要 本公開(kāi)提供了一種基于Presto的動(dòng)態(tài)數(shù)據(jù)處理方法及跨庫(kù)查詢(xún)方法,所述跨庫(kù)查詢(xún)方法包括以下步驟:采用至少一種數(shù)據(jù)庫(kù)類(lèi)型進(jìn)行數(shù)據(jù)源信息存儲(chǔ),指定自定義表;使用CANAL組件對(duì)自定義表進(jìn)行監(jiān)聽(tīng),實(shí)時(shí)獲取數(shù)據(jù)源注冊(cè)信息;對(duì)數(shù)據(jù)源注冊(cè)表的添加、刪除或修改的信息通過(guò)CANAL傳遞給Presto并轉(zhuǎn)化為Presto能夠識(shí)別的catalogConfig格式;通過(guò)得到的catalogConfig格式的數(shù)據(jù),動(dòng)態(tài)實(shí)現(xiàn)Presto的數(shù)據(jù)源增加或刪除或修改;本公開(kāi)支持Presto通過(guò)jdbc的方式使用ANSI_SQL的方式來(lái)對(duì)多源異構(gòu)數(shù)據(jù)進(jìn)行查詢(xún),解決了對(duì)存儲(chǔ)在不同數(shù)據(jù)結(jié)構(gòu)上的數(shù)據(jù)融合處理問(wèn)題,提高了跨庫(kù)數(shù)據(jù)查詢(xún)和處理的效率。??