一種基于RGBD相機(jī)的多人三維姿態(tài)估計(jì)方法

基本信息

申請(qǐng)?zhí)?/td> CN202010408082.9 申請(qǐng)日 -
公開(kāi)(公告)號(hào) CN111597976A 公開(kāi)(公告)日 2020-08-28
申請(qǐng)公布號(hào) CN111597976A 申請(qǐng)公布日 2020-08-28
分類號(hào) G06K9/00(2006.01)I 分類 計(jì)算;推算;計(jì)數(shù);
發(fā)明人 秦昊;李冬平;楊顥 申請(qǐng)(專利權(quán))人 杭州相芯科技有限公司
代理機(jī)構(gòu) 杭州求是專利事務(wù)所有限公司 代理人 杭州相芯科技有限公司
地址 310000浙江省杭州市濱江區(qū)濱安路1197號(hào)3幢436室
法律狀態(tài) -

摘要

摘要 本發(fā)明公開(kāi)了一種基于RGBD相機(jī)的多人三維姿態(tài)估計(jì)方法,該方法首先在真實(shí)人體數(shù)據(jù)集上,訓(xùn)練得到一個(gè)支持人體位置檢測(cè)和語(yǔ)義分割的深度卷積網(wǎng)絡(luò);然后構(gòu)建一個(gè)虛擬合成的人體深度圖?三維特征點(diǎn)數(shù)據(jù)集,通過(guò)該數(shù)據(jù)集訓(xùn)練得到能夠從深度圖中估計(jì)人體關(guān)節(jié)點(diǎn)的深度卷積網(wǎng)絡(luò);最后用戶輸入RGBD圖片或視頻,即可得到所有人體三維關(guān)節(jié)點(diǎn)的世界坐標(biāo)。本發(fā)明給出了從單個(gè)RGBD相機(jī)恢復(fù)多人三維姿態(tài)的魯棒算法;在網(wǎng)絡(luò)預(yù)訓(xùn)練階段,只需要預(yù)標(biāo)注好的RGB圖片即可,而對(duì)于深度圖可以使用虛擬合成的方法自動(dòng)得到,因此預(yù)訓(xùn)練對(duì)數(shù)據(jù)標(biāo)注的需求度很??;在實(shí)際運(yùn)行階段,同時(shí)考慮單幀姿態(tài)估計(jì)和多幀姿態(tài)估計(jì),可以輸出精確同時(shí)穩(wěn)定的多人三維姿態(tài)。??