一種AR設(shè)備的手勢3D關(guān)鍵點檢測方法、電子設(shè)備

基本信息

申請?zhí)?/td> CN202111218181.1 申請日 -
公開(公告)號 CN114066814A 公開(公告)日 2022-02-18
申請公布號 CN114066814A 申請公布日 2022-02-18
分類號 G06T7/00(2017.01)I;G06T3/00(2006.01)I;G06K9/62(2022.01)I;G06V10/80(2022.01)I;G06V10/46(2022.01)I;G06F17/15(2006.01)I;G06F3/01(2006.01)I 分類 計算;推算;計數(shù);
發(fā)明人 朱銘德;叢林 申請(專利權(quán))人 杭州易現(xiàn)先進科技有限公司
代理機構(gòu) 杭州創(chuàng)智卓英知識產(chǎn)權(quán)代理事務(wù)所(普通合伙) 代理人 張超
地址 311200浙江省杭州市蕭山區(qū)錢江世紀公園C區(qū)6幢102室
法律狀態(tài) -

摘要

摘要 本申請涉及一種AR設(shè)備的手勢3D關(guān)鍵點檢測方法,該方法包括:通過雙目相機獲取第一圖像和第二圖像,通過檢測網(wǎng)絡(luò)或前幀圖像獲取第一圖像的粗糙3D關(guān)鍵點,進一步的,再通過優(yōu)化網(wǎng)絡(luò)再得到更加精確的優(yōu)化2D關(guān)鍵點信息,并根據(jù)該優(yōu)化2D關(guān)鍵點計算單目3D關(guān)鍵點。將單目3D關(guān)鍵點投影到第二圖像上,并通過優(yōu)化網(wǎng)絡(luò)獲取第二圖像的相對深度信息和2D關(guān)鍵點坐標,最后,融合第一圖像和第二圖像的2D關(guān)鍵點坐標計算雙目手勢3D關(guān)鍵點和手掌尺寸。通過本方法,解決了相關(guān)技術(shù)中手勢3D關(guān)鍵點預測結(jié)果精度較差的問題,同時兼顧了精度和效率。