一種數(shù)據(jù)綜合接入系統(tǒng)及方法

基本信息

申請?zhí)?/td> CN202110367451.9 申請日 -
公開(公告)號(hào) CN113111107A 公開(公告)日 2021-07-13
申請公布號(hào) CN113111107A 申請公布日 2021-07-13
分類號(hào) G06F16/25(2019.01)I;G06F16/27(2019.01)I 分類 計(jì)算;推算;計(jì)數(shù);
發(fā)明人 王震;鐘凱;王勇;楊崗 申請(專利權(quán))人 創(chuàng)意信息技術(shù)股份有限公司
代理機(jī)構(gòu) 成都金英專利代理事務(wù)所(普通合伙) 代理人 袁英
地址 610000四川省成都市青羊區(qū)萬和路99號(hào)麗陽天下7-9室
法律狀態(tài) -

摘要

摘要 本發(fā)明公開了一種數(shù)據(jù)綜合接入系統(tǒng)及方法,系統(tǒng)包括數(shù)據(jù)來源模塊、數(shù)據(jù)接入處理模塊、數(shù)據(jù)中心、文件中心和定制接入模塊;所述數(shù)據(jù)接入處理模塊分別連接數(shù)據(jù)來源模塊、數(shù)據(jù)中心和文件中心;所述數(shù)據(jù)來源模塊確定來源數(shù)據(jù)源,通過數(shù)據(jù)接入處理模塊對數(shù)據(jù)進(jìn)行處理,實(shí)現(xiàn)數(shù)據(jù)從源到目標(biāo)的數(shù)據(jù)處理過程,最后存儲(chǔ)至數(shù)據(jù)中心和文件中心;所述定制接入模塊用于實(shí)現(xiàn)定制數(shù)據(jù)的接入。本發(fā)明采用了設(shè)計(jì)器與執(zhí)行器分離,數(shù)據(jù)獲取與數(shù)據(jù)入庫分離,并通過Kafka中間件的方式,實(shí)現(xiàn)數(shù)據(jù)庫到數(shù)據(jù)庫、文件到數(shù)據(jù)庫、文件到文件、接口到數(shù)據(jù)庫以及接口透傳,可滿足不同類型的數(shù)據(jù)之間的接入轉(zhuǎn)換過程,能最大限度地保障數(shù)據(jù)完整準(zhǔn)確接入。