基于眾核處理器的數(shù)據(jù)并行處理方法及裝置

基本信息

申請?zhí)?/td> CN202011229048.1 申請日 -
公開(公告)號 CN112035578B 公開(公告)日 2021-03-30
申請公布號 CN112035578B 申請公布日 2021-03-30
分類號 G06F9/50(2006.01)I;G06F16/22(2019.01)I;G06F9/48(2006.01)I;G06F16/27(2019.01)I;G06F16/25(2019.01)I;G06F9/38(2006.01)I 分類 計算;推算;計數(shù);
發(fā)明人 楊剛;鄭磊;李鴻偉 申請(專利權(quán))人 北京谷數(shù)科技股份有限公司
代理機構(gòu) 北京路浩知識產(chǎn)權(quán)代理有限公司 代理人 馬瑞
地址 100094北京市海淀區(qū)西北旺東路10號東區(qū)12號樓B座2層201
法律狀態(tài) -

摘要

摘要 本發(fā)明實施例提供了基于眾核處理器的數(shù)據(jù)并行處理方法及裝置,應(yīng)用于單機數(shù)據(jù)庫,每次確定待運算數(shù)據(jù)表后,對所述待運算數(shù)據(jù)表進行劃分得到多個運算任務(wù);將劃分的運算任務(wù)分發(fā)至眾核處理器的從核中,以通過不同從核并行處理運算任務(wù)。一方面,通過對待處理數(shù)據(jù)表進行排序劃分,得到適合于進行并行處理的運算任務(wù),并通過將運算任務(wù)分發(fā)至單機數(shù)據(jù)庫的眾核處理器中,實現(xiàn)了單機數(shù)據(jù)庫處理大數(shù)據(jù)任務(wù)時的并行運算,充分發(fā)揮了眾核處理器的運算能力;另一方面,在眾核間實現(xiàn)了任務(wù)的并行處理,消除了并行計算節(jié)點間網(wǎng)絡(luò)數(shù)據(jù)傳輸速度的瓶頸,加快了運算進程,提高了任務(wù)處理效率。??