基于眾核處理器的數(shù)據(jù)并行處理方法及裝置

基本信息

申請?zhí)?/td> CN202011229048.1 申請日 -
公開（公告）號 CN112035578A 公開（公告）日 2020-12-04
申請公布號 CN112035578A 申請公布日 2020-12-04
分類號 G06F16/27;G06F16/25;G06F16/22;G06F9/50;G06F9/48;G06F9/38 分類 計(jì)算；推算；計(jì)數(shù);
發(fā)明人 楊剛;鄭磊;李鴻偉 申請（專利權(quán)）人 北京谷數(shù)科技股份有限公司
代理機(jī)構(gòu) 北京路浩知識(shí)產(chǎn)權(quán)代理有限公司 代理人 北京谷數(shù)科技股份有限公司
地址 100094 北京市海淀區(qū)西北旺東路10號東區(qū)12號樓B座2層201
法律狀態(tài) -

摘要

摘要 本發(fā)明實(shí)施例提供了基于眾核處理器的數(shù)據(jù)并行處理方法及裝置，應(yīng)用于單機(jī)數(shù)據(jù)庫，每次確定待運(yùn)算數(shù)據(jù)表后，對所述待運(yùn)算數(shù)據(jù)表進(jìn)行劃分得到多個(gè)運(yùn)算任務(wù)；將劃分的運(yùn)算任務(wù)分發(fā)至眾核處理器的從核中，以通過不同從核并行處理運(yùn)算任務(wù)。一方面，通過對待處理數(shù)據(jù)表進(jìn)行排序劃分，得到適合于進(jìn)行并行處理的運(yùn)算任務(wù)，并通過將運(yùn)算任務(wù)分發(fā)至單機(jī)數(shù)據(jù)庫的眾核處理器中，實(shí)現(xiàn)了單機(jī)數(shù)據(jù)庫處理大數(shù)據(jù)任務(wù)時(shí)的并行運(yùn)算，充分發(fā)揮了眾核處理器的運(yùn)算能力；另一方面，在眾核間實(shí)現(xiàn)了任務(wù)的并行處理，消除了并行計(jì)算節(jié)點(diǎn)間網(wǎng)絡(luò)數(shù)據(jù)傳輸速度的瓶頸，加快了運(yùn)算進(jìn)程，提高了任務(wù)處理效率。