一種用于智能面試的表達(dá)能力維度評價(jià)方法及裝置

基本信息

申請?zhí)?/td> CN202011595060.4 申請日 -
公開（公告）號 CN112818742A 公開（公告）日 2021-05-18
申請公布號 CN112818742A 申請公布日 2021-05-18
分類號 G06K9/00;G06K9/62;G06N3/04;G06N3/08;G06Q10/06 分類 計(jì)算；推算；計(jì)數(shù);
發(fā)明人 田鑫 申請（專利權(quán)）人 南京智能情資創(chuàng)新科技研究院有限公司
代理機(jī)構(gòu) 南京天翼專利代理有限責(zé)任公司 代理人 奚銘
地址 210046 江蘇省南京市棲霞區(qū)仙林街道仙林大學(xué)城元化路8號1幢635室
法律狀態(tài) -

摘要

摘要 一種用于智能面試的表達(dá)能力維度評價(jià)方法及裝置，采集面試視頻，抽取視頻幀和音頻數(shù)據(jù)，首先將視頻幀輸入基于CNN的手部檢測模型得到底層手部姿態(tài)特征，將音頻數(shù)據(jù)輸入基于自然語言處理的音頻處理模塊，得到底層語音表達(dá)特征；將兩種底層特征分別輸入兩個(gè)LSTM編碼為時(shí)序特征；再通過先驗(yàn)知識規(guī)則從兩種底層特征中提取抽象的高層語義特征，包括手部表達(dá)、表達(dá)流暢度、感染力、條理性和簡潔度信息；將時(shí)序特征和高層語義特征標(biāo)準(zhǔn)化后輸入全連接神經(jīng)網(wǎng)絡(luò)，預(yù)測表達(dá)能力等級。系統(tǒng)使用分布式函數(shù)計(jì)算服務(wù)搭建，形成表達(dá)能力評價(jià)系統(tǒng)。本發(fā)明解決面試中表達(dá)能力打分的主觀偏差和時(shí)間成本的效率問題，實(shí)現(xiàn)對大量面試視頻快速并準(zhǔn)確的表達(dá)能力評估。