一種基于場景識別的中文手語翻譯方法及系統(tǒng)

基本信息

申請?zhí)?/td> CN202011567901.0 申請日 -
公開（公告）號 CN112668463A 公開（公告）日 2021-04-16
申請公布號 CN112668463A 申請公布日 2021-04-16
分類號 G06K9/00;G06K9/62;G06N3/04;G06N3/08 分類 計算；推算；計數(shù);
發(fā)明人 陳斌;牟中強 申請（專利權(quán)）人 株洲手之聲信息科技有限公司
代理機構(gòu) 湖南兆弘專利事務(wù)所（普通合伙） 代理人 周長清;胡君
地址 412007 湖南省株洲市天元區(qū)韶山路229號株洲（湖南）炎帝專修大學(xué)
法律狀態(tài) -

摘要

摘要 本發(fā)明公開一種基于場景識別的中文手語翻譯方法及系統(tǒng)，該方法步驟包括：S1.構(gòu)建手語單詞識別模型，以及構(gòu)建場景識別模型，將手語單詞識別模型與場景識別模型進行級聯(lián)，形成手語翻譯模型；S2.對手語翻譯模型進行訓(xùn)練，直至場景識別模型與手語單詞識別模型達到動態(tài)平衡；S3.采集待翻譯的手語動作視頻并提取出手語動作數(shù)據(jù)；S4.將手語動作數(shù)據(jù)輸入至訓(xùn)練后的手語翻譯模型的場景識別模型中，識別出當(dāng)前的場景類型；根據(jù)識別出的場景類型，使用訓(xùn)練后的手語翻譯模型中手語單詞識別模型對當(dāng)前手語動作數(shù)據(jù)進行識別，得到手語單詞的翻譯結(jié)果輸出。本發(fā)明具有實現(xiàn)方法簡單、成本低、精度以及效率高且可靠等優(yōu)點。