數(shù)據(jù)清洗、訓練方法及裝置、計算機可讀存儲介質、終端

基本信息

申請?zhí)?/td> CN202110422607.9 申請日 -
公開(公告)號 CN113158889A 公開(公告)日 2021-07-23
申請公布號 CN113158889A 申請公布日 2021-07-23
分類號 G06K9/00(2006.01)I;G06K9/62(2006.01)I 分類 計算;推算;計數(shù);
發(fā)明人 朱政;陳云澤;黃駿杰;黃冠 申請(專利權)人 上海芯翌智能科技有限公司
代理機構 北京集佳知識產權代理有限公司 代理人 張英英;張振軍
地址 200434上海市虹口區(qū)海寧路137號7層(集中登記地)
法律狀態(tài) -

摘要

摘要 一種數(shù)據(jù)清洗、訓練方法及裝置、計算機可讀存儲介質、終端,數(shù)據(jù)清洗方法包括:獲取待清洗數(shù)據(jù),并對所述待清洗數(shù)據(jù)執(zhí)行初始清洗操作,以得到干凈數(shù)據(jù)集和待丟棄數(shù)據(jù)集,所述干凈數(shù)據(jù)集中的各個數(shù)據(jù)屬于預設類別;對所述待丟棄數(shù)據(jù)集中屬于未知類別的數(shù)據(jù)進行聚類,以得到新的分類類別;將所述新的分類類別以及屬于所述新的分類類別的數(shù)據(jù)加入所述干凈數(shù)據(jù)集,所述干凈數(shù)據(jù)集用于分類模型的訓練。本發(fā)明技術方案能夠保證數(shù)據(jù)清洗的有效性,在保證訓練樣本質量的前提下添加訓練樣本數(shù)量。