多模態(tài)情感分析預(yù)測方法、裝置、設(shè)備及存儲介質(zhì)

基本信息

申請?zhí)?/td> CN202111287792.1 申請日 -
公開(公告)號 CN113723112B 公開(公告)日 2022-02-22
申請公布號 CN113723112B 申請公布日 2022-02-22
分類號 G06F40/30(2020.01)I;G06F40/166(2020.01)I 分類 計算;推算;計數(shù);
發(fā)明人 張瑞;齊慶福;薛成榮;韓猛;張紅良;王洪達 申請(專利權(quán))人 天津海翼科技有限公司
代理機構(gòu) 北京華夏泰和知識產(chǎn)權(quán)代理有限公司 代理人 陰亮;唐會娜
地址 300457天津市濱海新區(qū)塘沽海洋科技園新北路4668號創(chuàng)新創(chuàng)業(yè)園28-A號
法律狀態(tài) -

摘要

摘要 本申請涉及一種多模態(tài)情感分析預(yù)測方法、裝置、設(shè)備及存儲介質(zhì)。該方法包括獲取需要進行情感分析的原始視頻數(shù)據(jù);提取原始視頻數(shù)據(jù)中的自然語言數(shù)據(jù)以及非自然語言數(shù)據(jù);生成自然語言數(shù)據(jù)對應(yīng)的自然語言嵌入表示以及非自然語言數(shù)據(jù)對應(yīng)的非自然語言嵌入表示;對自然語言嵌入表示和非自然語言嵌入表示進行融合,得到多模態(tài)融合嵌入表示,多模態(tài)融合嵌入表示為自然語言數(shù)據(jù)在非自然語言數(shù)據(jù)影響下產(chǎn)生偏移后的向量表示;對多模態(tài)融合嵌入表示進行分析得到原始視頻數(shù)據(jù)的情感分析結(jié)果??梢姳旧暾垖嵤├峁┑募夹g(shù)方案實現(xiàn)了結(jié)合非自然語言數(shù)據(jù)進行情感分析。