分布式ETL數(shù)據(jù)采集方法及裝置
基本信息
| 申請(qǐng)?zhí)?/td> | CN201811454518.7 | 申請(qǐng)日 | - |
| 公開（公告）號(hào) | CN109582723B | 公開（公告）日 | 2021-08-17 |
| 申請(qǐng)公布號(hào) | CN109582723B | 申請(qǐng)公布日 | 2021-08-17 |
| 分類號(hào) | G06F16/25;G06F16/27 | 分類 | 計(jì)算；推算；計(jì)數(shù); |
| 發(fā)明人 | 王杰 | 申請(qǐng)（專利權(quán)）人 | 深圳市思迪信息技術(shù)股份有限公司 |
| 代理機(jī)構(gòu) | 深圳市欣亞知識(shí)產(chǎn)權(quán)代理事務(wù)所（普通合伙） | 代理人 | 葛勤;程光慧 |
| 地址 | 518000 廣東省深圳市南山區(qū)粵海街道深圳灣科技生態(tài)園二區(qū)9棟B座14層08-14室 | ||
| 法律狀態(tài) | - | ||
摘要
| 摘要 | 本發(fā)明提供了一種分布式ETL數(shù)據(jù)采集方法及裝置，通過將ETL采集任務(wù)集中在ETL數(shù)據(jù)服務(wù)器配置、加入任務(wù)列表，而后分配給分布設(shè)置的多個(gè)ETL執(zhí)行服務(wù)器，多臺(tái)ETL執(zhí)行服務(wù)器根據(jù)ETL數(shù)據(jù)服務(wù)器的待執(zhí)行任務(wù)表里面的數(shù)據(jù)來(lái)獲取任務(wù)，從而使得原本單臺(tái)機(jī)器單獨(dú)執(zhí)行ETL數(shù)據(jù)采集變?yōu)橹С侄嗯_(tái)、分工實(shí)現(xiàn)數(shù)據(jù)采集，大大提高了采集的效率。 |
