基于3D仿生代理的情感人機交互系統

電子信息

本系統基于北京航空航天大學模式識別與人工智能實驗室的多模情感識別與情感表達融合技術，開發了基于3D仿生代理的多模情感人機交互系統。該系統具有情感感知與表達能力，能夠通過采集用戶的視音頻信號，實時感知用戶表情和語音中包含的六種基本情感信息（高興、悲傷、驚訝、害怕、生氣、嫌惡），識別準確率達到85%，并通過3D仿生代理生動的語音和肢體動作與用戶進行自然和諧的對話交流。系統消耗資源少，適合移動平臺；融合表情和語音進行決策級情感識別，識別率高；采用3D仿生代理，交互界面生動自然。該系統及相應情感感知技術可應用于新一代情感人機交互界面。

本成果已獲得授權發明專利2項，受理發明專利15項，申請國際發明專利2項。授權發明專利如下：一種魯棒的人臉表情識別方法，ZL200810223211.6；漢語語音情感信息的提取及建模方法，ZL200810104541.3。

未應用