多模態(tài)融合人機交互方法、裝置、存儲介質(zhì)、終端及系統(tǒng)

基本信息

申請?zhí)?/td> CN201910770607.0 申請日 -
公開（公告）號 CN110465947B 公開（公告）日 2021-07-02
申請公布號 CN110465947B 申請公布日 2021-07-02
分類號 B25J9/16 分類 手動工具；輕便機動工具；手動器械的手柄；車間設備；機械手;
發(fā)明人 孫騁;蘇衍宇;孫斌;張俊杰;莫明興 申請（專利權(quán)）人 蘇州博眾智能機器人有限公司
代理機構(gòu) 北京品源專利代理有限公司 代理人 孟金喆
地址 215200 江蘇省蘇州市吳江經(jīng)濟技術(shù)開發(fā)區(qū)山湖西路558號東運科技園7號標準廠房
法律狀態(tài) -

摘要

摘要 本發(fā)明實施例公開了多模態(tài)融合人機交互方法、裝置、存儲介質(zhì)、終端及系統(tǒng)。該方法包括：獲取機器人采集的目標交互對象對應的交互數(shù)據(jù)，其中，交互數(shù)據(jù)包括音頻數(shù)據(jù)、微表情數(shù)據(jù)、距離數(shù)據(jù)以及姿勢數(shù)據(jù)；根據(jù)交互數(shù)據(jù)基于預設規(guī)則確定所述機器人的交互反饋數(shù)據(jù)，其中，交互反饋數(shù)據(jù)包括包含語氣信息的語音反饋數(shù)據(jù)、微表情反饋數(shù)據(jù)以及動作反饋數(shù)據(jù)；利用交互反饋數(shù)據(jù)控制機器人執(zhí)行相應的交互反饋操作。本發(fā)明實施例通過采用上述技術(shù)方案，可以使機器人的反饋更加合理和人性化，豐富反饋形式，有助于提升人機交互的體驗。