一種通過中心向量相似度匹配的垃圾文本審核裝置和方法

基本信息

申請(qǐng)?zhí)?/td> CN202010469767.4 申請(qǐng)日 -
公開(公告)號(hào) CN111651598A 公開(公告)日 2020-09-11
申請(qǐng)公布號(hào) CN111651598A 申請(qǐng)公布日 2020-09-11
分類號(hào) G06F16/35(2019.01)I 分類 計(jì)算;推算;計(jì)數(shù);
發(fā)明人 陳曉峰;麻沁甜;劉星辰 申請(qǐng)(專利權(quán))人 上海勃池信息技術(shù)有限公司
代理機(jī)構(gòu) 上海驍象知識(shí)產(chǎn)權(quán)代理有限公司 代理人 上海勃池信息技術(shù)有限公司
地址 201815上海市嘉定區(qū)匯源路55號(hào)8幢5層517室
法律狀態(tài) -

摘要

摘要 一種通過中心向量相似度匹配的垃圾文本審核裝置和方法,包括以下步驟:建立一組垃圾樣本文本集和一組正常樣本文本集;計(jì)算兩個(gè)樣本集的中心向量,將待識(shí)別文本進(jìn)行文本分類預(yù)處理,具體步驟包括文本分詞及去除停用詞,經(jīng)過文本分類預(yù)處理后得到特征詞文本。已經(jīng)經(jīng)過樣本文本訓(xùn)練得到的分類器對(duì)使用特征詞文本表示的待測文本進(jìn)行分類。依據(jù)預(yù)設(shè)標(biāo)準(zhǔn)可以確定出該文本是否為垃圾文本,并可進(jìn)一步對(duì)判定的垃圾文本采取一定的預(yù)防措施,從而能夠避免垃圾文本對(duì)人們?nèi)粘I顜聿焕绊憽??