一種基于深度學(xué)習(xí)的純視覺輕量手語識別系統(tǒng)

基本信息

申請?zhí)?/td> CN202011349613.8 申請日 -
公開（公告）號 CN112487939A 公開（公告）日 2021-03-12
申請公布號 CN112487939A 申請公布日 2021-03-12
分類號 G06K9/00;G06K9/46;G06K9/62;G06N3/04;G06N3/08;G06F40/211;G06F40/284 分類 計算；推算；計數(shù);
發(fā)明人 吳宗正;李凌;劉云云;辜嘉 申請（專利權(quán)）人 深圳市熱麗泰和生命科技有限公司
代理機構(gòu) - 代理人 -
地址 518000 廣東省深圳市南山區(qū)招商街道南海大道1077號北科創(chuàng)業(yè)大廈601室
法律狀態(tài) -

摘要

摘要 本發(fā)明屬于手語識別領(lǐng)域，尤其公開了一種基于深度學(xué)習(xí)的純視覺輕量手語識別系統(tǒng)，現(xiàn)提出如下方案，包括數(shù)據(jù)獲取、手勢特征提取、時序特征提取和句子生成，所述數(shù)據(jù)獲取為待識別手語視頻的獲取及圖像預(yù)處理，所述手勢特征提取為從手語視頻中各幀獲取手勢特征向量，所述時序特征提取為從手勢特征向量序列中提取手語詞信息，所述句子生成為對所有手語詞信息按照上下文組合成文本句子。本發(fā)明只需要輸入圖像數(shù)據(jù)即可通過運算輸出句子，無需額外附加信息，總體網(wǎng)絡(luò)結(jié)構(gòu)簡單高效，訓(xùn)練周期短，適合在移動端部署。只需要一個終端設(shè)備即可運行該程序，大大提高了使用便利性，有利于大面積推廣。