數(shù)據(jù)清洗、訓(xùn)練方法及裝置、計(jì)算機(jī)可讀存儲(chǔ)介質(zhì)、終端
基本信息
申請(qǐng)?zhí)?/td> | CN202110422607.9 | 申請(qǐng)日 | - |
公開(kāi)(公告)號(hào) | CN113158889A | 公開(kāi)(公告)日 | 2021-07-23 |
申請(qǐng)公布號(hào) | CN113158889A | 申請(qǐng)公布日 | 2021-07-23 |
分類號(hào) | G06K9/00(2006.01)I;G06K9/62(2006.01)I | 分類 | 計(jì)算;推算;計(jì)數(shù); |
發(fā)明人 | 朱政;陳云澤;黃駿杰;黃冠 | 申請(qǐng)(專利權(quán))人 | 上海芯翌智能科技有限公司 |
代理機(jī)構(gòu) | 北京集佳知識(shí)產(chǎn)權(quán)代理有限公司 | 代理人 | 張英英;張振軍 |
地址 | 200434上海市虹口區(qū)海寧路137號(hào)7層(集中登記地) | ||
法律狀態(tài) | - |
摘要
摘要 | 一種數(shù)據(jù)清洗、訓(xùn)練方法及裝置、計(jì)算機(jī)可讀存儲(chǔ)介質(zhì)、終端,數(shù)據(jù)清洗方法包括:獲取待清洗數(shù)據(jù),并對(duì)所述待清洗數(shù)據(jù)執(zhí)行初始清洗操作,以得到干凈數(shù)據(jù)集和待丟棄數(shù)據(jù)集,所述干凈數(shù)據(jù)集中的各個(gè)數(shù)據(jù)屬于預(yù)設(shè)類別;對(duì)所述待丟棄數(shù)據(jù)集中屬于未知類別的數(shù)據(jù)進(jìn)行聚類,以得到新的分類類別;將所述新的分類類別以及屬于所述新的分類類別的數(shù)據(jù)加入所述干凈數(shù)據(jù)集,所述干凈數(shù)據(jù)集用于分類模型的訓(xùn)練。本發(fā)明技術(shù)方案能夠保證數(shù)據(jù)清洗的有效性,在保證訓(xùn)練樣本質(zhì)量的前提下添加訓(xùn)練樣本數(shù)量。 |
