大數(shù)據(jù)處理方法、裝置、服務(wù)器及可讀存儲介質(zhì)

基本信息

申請?zhí)?/td> CN201810343986.0 申請日 -
公開(公告)號 CN108549583B 公開(公告)日 2021-05-07
申請公布號 CN108549583B 申請公布日 2021-05-07
分類號 G06F9/50(2006.01)I 分類 -
發(fā)明人 姜光植;嚴(yán)雪楓;謝川;黃瀚林 申請(專利權(quán))人 致云科技有限公司
代理機構(gòu) 北京超凡宏宇專利代理事務(wù)所(特殊普通合伙) 代理人 曹瑞敏
地址 610000四川省成都市高新區(qū)天府五街200號5棟B座4層
法律狀態(tài) -

摘要

摘要 本發(fā)明實施例提供一種大數(shù)據(jù)處理方法、裝置、服務(wù)器及可讀存儲介質(zhì)。該方法包括:獲取待處理的大數(shù)據(jù)處理任務(wù);根據(jù)大數(shù)據(jù)的采集設(shè)備的設(shè)備類型確定所述大數(shù)據(jù)處理任務(wù)的任務(wù)類型,所述任務(wù)類型包括串行任務(wù)和并行任務(wù);按照所述任務(wù)類型的處理順序,建立大數(shù)據(jù)處理列表;基于所述大數(shù)據(jù)處理列表,將每個串行任務(wù)通過主線程進(jìn)行串行處理,將同一并行任務(wù)分配到所述服務(wù)器的各個處理器核心上進(jìn)行并行處理,并將并行處理后的任務(wù)數(shù)據(jù)串行應(yīng)用于下一處理順序的串行任務(wù)中。由此,能夠?qū)⒉煌杉O(shè)備的處理任務(wù)分類處理,提高了處理效率,充分發(fā)揮多核處理器的優(yōu)點,有效提高服務(wù)器的負(fù)載能力,從而承擔(dān)更多的大數(shù)據(jù)處理任務(wù)。??