面向負(fù)載均衡的龍芯大數(shù)據(jù)一體機(jī)自適應(yīng)任務(wù)分割方法及系統(tǒng)

基本信息

申請(qǐng)?zhí)?/td> CN202010841295.0 申請(qǐng)日 -
公開(kāi)(公告)號(hào) CN112148474A 公開(kāi)(公告)日 2020-12-29
申請(qǐng)公布號(hào) CN112148474A 申請(qǐng)公布日 2020-12-29
分類號(hào) G06F9/50(2006.01)I;G06F16/2455(2019.01)I 分類 計(jì)算;推算;計(jì)數(shù);
發(fā)明人 陳鋒;陳宇強(qiáng) 申請(qǐng)(專利權(quán))人 安徽中科龍安科技股份有限公司
代理機(jī)構(gòu) 北京凱特來(lái)知識(shí)產(chǎn)權(quán)代理有限公司 代理人 鄭立明;韓珂
地址 230088安徽省合肥市蜀山區(qū)湖光路1299號(hào)17棟
法律狀態(tài) -

摘要

摘要 本發(fā)明公開(kāi)了一種面向負(fù)載均衡的龍芯大數(shù)據(jù)一體機(jī)自適應(yīng)任務(wù)分割方法及系統(tǒng),該方案通過(guò)獲取各計(jì)算節(jié)點(diǎn)CPU數(shù)量、性能和負(fù)載,將待處理數(shù)據(jù)進(jìn)行初始化分割,再將所分割數(shù)據(jù)包和相應(yīng)的處理程序分配給各計(jì)算節(jié)點(diǎn)CPU處理;進(jìn)一步根據(jù)第一次各計(jì)算節(jié)點(diǎn)處理結(jié)果,統(tǒng)計(jì)計(jì)算節(jié)點(diǎn)各CPU對(duì)數(shù)據(jù)包的最長(zhǎng)處理時(shí)間與最短處理時(shí)間的比值,根據(jù)該比值對(duì)剩余數(shù)據(jù)包進(jìn)行劃分,依次循環(huán),直至所有的數(shù)據(jù)包處理完畢,從而實(shí)現(xiàn)各CPU的負(fù)載均衡和處理任務(wù)的時(shí)間同步,該方法較好地適應(yīng)了計(jì)算量未知的待處理數(shù)據(jù)包的自適應(yīng)任務(wù)劃分,提高并行效率,適應(yīng)具有MIPS架構(gòu)的龍芯大數(shù)據(jù)一體機(jī)的負(fù)載均衡和流式大數(shù)據(jù)實(shí)時(shí)處理。??