基于注意力機制的聯(lián)合學習方法、裝置、計算機設備及計算機可讀存儲介質

基本信息

申請?zhí)?/td> CN202110778808.2 申請日 -
公開(公告)號 CN113487040A 公開(公告)日 2021-10-08
申請公布號 CN113487040A 申請公布日 2021-10-08
分類號 G06N20/00(2019.01)I;G06F16/215(2019.01)I;G06K9/62(2006.01)I 分類 計算;推算;計數(shù);
發(fā)明人 謝龍飛;馬國良 申請(專利權)人 新智數(shù)字科技有限公司
代理機構 北京嘉科知識產(chǎn)權代理事務所(特殊普通合伙) 代理人 張艷
地址 065000河北省廊坊市經(jīng)濟開發(fā)區(qū)華祥路0388丘一幢一樓105室
法律狀態(tài) -

摘要

摘要 本發(fā)明提供了一種基于注意力機制的聯(lián)合學習方法、裝置、計算機設備及計算機可讀存儲介質。該方法包括:接收參與方上傳的多個參與方模型;根據(jù)參與方模型,分別確定查詢參數(shù)矩陣和關鍵值矩陣;確定每一個查詢參數(shù)矩陣與多個關鍵值矩陣之間的差異度;利用差異度,對參與方模型進行本地更新,以得到新的參與方模型。以解決在聯(lián)合學習中,各方數(shù)據(jù)相互割裂,難以直接度量數(shù)據(jù)之間的具體差異,而導致數(shù)據(jù)分配不均的問題。