文本分類主動學習的基于半徑的不確定度采樣方法和系統(tǒng)

基本信息

申請?zhí)?/td> CN202010669244.4 申請日 -
公開(公告)號 CN111914061B 公開(公告)日 2021-04-16
申請公布號 CN111914061B 申請公布日 2021-04-16
分類號 G06K9/62(2006.01)I;G06N3/04(2006.01)I;G06F16/35(2019.01)I;G06N3/08(2006.01)I;G06F16/33(2019.01)I 分類 計算;推算;計數(shù);
發(fā)明人 朱其立;沈李斌;廖千姿;顧鈺儀;趙迎功;吳海華 申請(專利權)人 上海樂言科技股份有限公司
代理機構 上海專利商標事務所有限公司 代理人 施浩
地址 200050上海市長寧區(qū)長寧路1033號聯(lián)通大廈19樓
法律狀態(tài) -

摘要

摘要 本發(fā)明公開了一種文本分類主動學習的基于半徑的不確定度采樣方法和系統(tǒng),應用于多類別短文本,優(yōu)化減弱場景中噪聲對結果的不良影響,并且方法的普適性較高,能夠適用于任何存在隱藏層的深度模型。其技術方案為:通過文本分類器對每個標注數(shù)據(jù)的數(shù)據(jù)點的信息熵進行評分,并給出該標注數(shù)據(jù)的預測類別;文本分類器對未標注數(shù)據(jù)給出對應的預測類別;分別計算每個預測類別的半徑;將標注數(shù)據(jù)的信息熵評分、標注數(shù)據(jù)的預測類別、未標注數(shù)據(jù)的預測類別的半徑組合在一起,得到綜合評分。??