一種用于智能面試的表達能力維度評價方法及裝置

基本信息

申請?zhí)?/td> CN202011595060.4 申請日 -
公開（公告）號 CN112818742A 公開（公告）日 2021-05-18
申請公布號 CN112818742A 申請公布日 2021-05-18
分類號 G06K9/00;G06K9/62;G06N3/04;G06N3/08;G06Q10/06 分類 計算；推算；計數(shù);
發(fā)明人 田鑫 申請（專利權(quán)）人 南京智能情資創(chuàng)新科技研究院有限公司
代理機構(gòu) 南京天翼專利代理有限責任公司 代理人 奚銘
地址 210046 江蘇省南京市棲霞區(qū)仙林街道仙林大學城元化路8號1幢635室
法律狀態(tài) -

摘要

摘要 一種用于智能面試的表達能力維度評價方法及裝置，采集面試視頻，抽取視頻幀和音頻數(shù)據(jù)，首先將視頻幀輸入基于CNN的手部檢測模型得到底層手部姿態(tài)特征，將音頻數(shù)據(jù)輸入基于自然語言處理的音頻處理模塊，得到底層語音表達特征；將兩種底層特征分別輸入兩個LSTM編碼為時序特征；再通過先驗知識規(guī)則從兩種底層特征中提取抽象的高層語義特征，包括手部表達、表達流暢度、感染力、條理性和簡潔度信息；將時序特征和高層語義特征標準化后輸入全連接神經(jīng)網(wǎng)絡，預測表達能力等級。系統(tǒng)使用分布式函數(shù)計算服務搭建，形成表達能力評價系統(tǒng)。本發(fā)明解決面試中表達能力打分的主觀偏差和時間成本的效率問題，實現(xiàn)對大量面試視頻快速并準確的表達能力評估。