一種基于RGBD相機的多人三維姿態(tài)估計方法

基本信息

申請?zhí)?/td> CN202010408082.9 申請日 -
公開(公告)號 CN111597976A 公開(公告)日 2020-08-28
申請公布號 CN111597976A 申請公布日 2020-08-28
分類號 G06K9/00(2006.01)I 分類 計算;推算;計數(shù);
發(fā)明人 秦昊;李冬平;楊顥 申請(專利權(quán))人 杭州相芯科技有限公司
代理機構(gòu) 杭州求是專利事務(wù)所有限公司 代理人 杭州相芯科技有限公司
地址 310000浙江省杭州市濱江區(qū)濱安路1197號3幢436室
法律狀態(tài) -

摘要

摘要 本發(fā)明公開了一種基于RGBD相機的多人三維姿態(tài)估計方法,該方法首先在真實人體數(shù)據(jù)集上,訓(xùn)練得到一個支持人體位置檢測和語義分割的深度卷積網(wǎng)絡(luò);然后構(gòu)建一個虛擬合成的人體深度圖?三維特征點數(shù)據(jù)集,通過該數(shù)據(jù)集訓(xùn)練得到能夠從深度圖中估計人體關(guān)節(jié)點的深度卷積網(wǎng)絡(luò);最后用戶輸入RGBD圖片或視頻,即可得到所有人體三維關(guān)節(jié)點的世界坐標。本發(fā)明給出了從單個RGBD相機恢復(fù)多人三維姿態(tài)的魯棒算法;在網(wǎng)絡(luò)預(yù)訓(xùn)練階段,只需要預(yù)標注好的RGB圖片即可,而對于深度圖可以使用虛擬合成的方法自動得到,因此預(yù)訓(xùn)練對數(shù)據(jù)標注的需求度很小;在實際運行階段,同時考慮單幀姿態(tài)估計和多幀姿態(tài)估計,可以輸出精確同時穩(wěn)定的多人三維姿態(tài)。??