細粒度的多模態(tài)虛假新聞檢測方法

基本信息

申請?zhí)?/td> CN202111152971.4 申請日 -
公開（公告）號 CN113934882A 公開（公告）日 2022-01-14
申請公布號 CN113934882A 申請公布日 2022-01-14
分類號 G06F16/583（2019.01）I;G06F40/295（2020.01）I;G06V20/62（2022.01）I;G06V10/74（2022.01）I;G06V10/774（2022.01）I;G06V10/82（2022.01）I;G06K9/62（2022.01）I;G06N3/04（2006.01）I;G06N3/08（2006.01）I 分類 計算；推算；計數(shù);
發(fā)明人 曹娟;亓鵬;何覃;謝添 申請（專利權）人 北京中科睿鑒科技有限公司
代理機構 杭州九洲專利事務所有限公司 代理人 沈敏強
地址 100084北京市海淀區(qū)中關村東路1號院8號樓三層B201C-2
法律狀態(tài) -

摘要

摘要 本發(fā)明涉及一種細粒度的多模態(tài)虛假新聞檢測方法，為：獲取待檢測多模態(tài)新聞的新聞文本和新聞圖片；從新聞文本中提取人物類型、地點類型和事件類型的文本實體；從新聞圖片中提取圖片文本，人物類型、地點類型和事件類型的視覺實體，以及新聞圖片的視覺CNN特征；將新聞文本與圖片文本拼接后輸入BERT模型，獲得文本特征；使用BERT模型獲取人物類型、地點類型和事件類型視覺實體的視覺實體特征；融合上述特征，獲得文本表示、視覺CNN表示和視覺實體表示；基于特征向量計算跨模態(tài)的人物相似度、地點相似度和事件相似度；基于上述信息計算所述多模態(tài)新聞的多模態(tài)表示；基于多模態(tài)新聞的多模態(tài)表示判斷該多模態(tài)新聞的真實性。