一種數(shù)據(jù)處理方法、裝置及電子設備
基本信息
申請?zhí)?/td> | CN202110647840.7 | 申請日 | - |
公開(公告)號 | CN113516506A | 公開(公告)日 | 2021-10-19 |
申請公布號 | CN113516506A | 申請公布日 | 2021-10-19 |
分類號 | G06Q30/02(2012.01)I;G06F16/22(2019.01)I;G06F16/2458(2019.01)I | 分類 | 計算;推算;計數(shù); |
發(fā)明人 | 汪凱;于為建;王志偉;李成;孫遷 | 申請(專利權)人 | 深圳市云網(wǎng)萬店科技有限公司 |
代理機構 | 北京市萬慧達律師事務所 | 代理人 | 劉艷麗 |
地址 | 518002廣東省深圳市羅湖區(qū)東門街道城東社區(qū)深南東路2028號羅湖商務中心3510-130單元 | ||
法律狀態(tài) | - |
摘要
摘要 | 本申請公開了一種數(shù)據(jù)處理方法、裝置及電子設備,方法包括獲取第一待處理數(shù)據(jù)集及第二待處理數(shù)據(jù)集,所述第一待處理數(shù)據(jù)集包括多個第一待處理數(shù)據(jù),所述第二待處理數(shù)據(jù)集包括多個第二待處理數(shù)據(jù);根據(jù)分別包括的所述目標字段對應的字段值確定所述第一待處理數(shù)據(jù)及所述第二待處理數(shù)據(jù)分別對應的桶;根據(jù)對應的所述第一待處理數(shù)據(jù)生成所述桶對應的第一位圖并根據(jù)對應的所述第二待處理數(shù)據(jù)生成所述桶對應的第二位圖;對每一所述桶對應的第一位圖及所述對應的第二位圖進行集合運算,生成目標計算結果,避免了集合計算時存在關聯(lián)的數(shù)據(jù)被分配在不同的桶里時會導致集合計算時還需要從其他桶中獲取數(shù)據(jù)導致觸發(fā)Shuffle的問題。 |
