基于多模態(tài)深度學(xué)習(xí)技術(shù)的兒童ADHD篩查評(píng)估系統(tǒng)

基本信息

申請(qǐng)?zhí)?/td> CN202010401503.5 申請(qǐng)日 -
公開(kāi)(公告)號(hào) CN111528859A 公開(kāi)(公告)日 2020-08-14
申請(qǐng)公布號(hào) CN111528859A 申請(qǐng)公布日 2020-08-14
分類號(hào) A61B5/11(2006.01)I 分類 -
發(fā)明人 張雁翼;浦世亮;朱強(qiáng);孔鳴;洪文琛;趙天琦 申請(qǐng)(專利權(quán))人 浙江大學(xué)人工智能研究所德清研究院
代理機(jī)構(gòu) 杭州斯可睿專利事務(wù)所有限公司 代理人 王利強(qiáng)
地址 313200浙江省湖州市德清縣乾元鎮(zhèn)智能生態(tài)城小鎮(zhèn)客廳(德清高鐵站旁)
法律狀態(tài) -

摘要

摘要 一種基于多模態(tài)深度學(xué)習(xí)技術(shù)的兒童ADHD篩查評(píng)估系統(tǒng),包括:量表測(cè)試模塊,用于通過(guò)ADHD診斷心理學(xué)量表采集和評(píng)估就診兒童;軟硬件協(xié)同模塊,用于開(kāi)發(fā)測(cè)試軟件讓就診兒童完成任務(wù),硬件模組用于記錄任務(wù)測(cè)試過(guò)程中的眼動(dòng)注意力、表情和身體姿態(tài)三方面信息;智能分析模塊,用于運(yùn)用計(jì)算機(jī)視覺(jué)技術(shù)進(jìn)行眼動(dòng)注意力、表情、姿態(tài)的分析,還對(duì)測(cè)試者的鼠標(biāo)移動(dòng)、點(diǎn)擊和鍵盤輸入動(dòng)作也做了記錄和跟蹤,與同質(zhì)化向量融合;多模態(tài)信息融合模型,采用時(shí)序多模態(tài)信息融合模型BERT,對(duì)某個(gè)特定時(shí)間片段中獲取的同質(zhì)化向量結(jié)合測(cè)試結(jié)果進(jìn)行預(yù)訓(xùn)練,最終生成的模型判斷患者在本時(shí)間段是否存在異常行為的分類結(jié)果。本發(fā)明效率較高、準(zhǔn)確性較好。??