基于可穿戴設(shè)備和多模態(tài)智能分析的學(xué)生注意力分析系統(tǒng)

基本信息

申請?zhí)?/td> CN201910728874.1 申請日 -
公開(公告)號 CN110543828A 公開(公告)日 2019-12-06
申請公布號 CN110543828A 申請公布日 2019-12-06
分類號 G06K9/00(2006.01); G06N3/04(2006.01) 分類 計算;推算;計數(shù);
發(fā)明人 孫寧; 劉佶鑫 申請(專利權(quán))人 南京象意智能科技有限公司
代理機構(gòu) 南京申云知識產(chǎn)權(quán)代理事務(wù)所(普通合伙) 代理人 南京勵智心理大數(shù)據(jù)產(chǎn)業(yè)研究院有限公司; 南京象意智能科技有限公司
地址 210032 江蘇省南京市江北新區(qū)星火路19號智匯商務(wù)花園9棟2樓216
法律狀態(tài) -

摘要

摘要 本發(fā)明公開了一種基于可穿戴設(shè)備和多模態(tài)智能分析的學(xué)生注意力分析系統(tǒng),其主要步驟為:首先,每個學(xué)生佩戴頭戴式設(shè)備用于獲取實時視頻和姿態(tài)數(shù)據(jù),經(jīng)過編碼后,通過無線網(wǎng)絡(luò)傳輸至多模態(tài)智能分析服務(wù)器;多模態(tài)智能分析服務(wù)器經(jīng)過解碼,取得視頻和姿態(tài)數(shù)據(jù);然后,利用基于深度神經(jīng)網(wǎng)絡(luò)的多目標檢測算法對視頻中的教師和投影儀幕布進行幕布檢測,確定這兩種目標在視頻中的位置;最后,融合姿態(tài)數(shù)據(jù)和視頻檢測數(shù)據(jù)對當(dāng)前學(xué)生的注意力進行分析,將一段時間的注意力結(jié)果進行顯示和上報。本發(fā)明一方面有助于家長了解孩子自身課堂注意力的情況,另一方面也幫助教師在教學(xué)過程中掌握學(xué)生的整體狀態(tài),以便教師對課堂進行有效調(diào)節(jié),提高課堂的教學(xué)效率。