提案する性格特性を考慮した音声感情認識では、音声と性格特性ベクトルを用
いて日本語に対応した音声感情認識を実現する。感情としては、普通、喜び、
悲しみ、怒り、恐れ、嫌悪、驚き、焦り、落ち着きの9つを扱う。事前学習モデ
ルとして日本語の音声に特化したHuBERTを使用し、ソフトマックス層を追加し、
HuBERTから出力される音声信号に対応する文脈埋め込み表現と性格特徴ベクト
ルから感情認識が行えるように転移学習を行う。性格特性ベクトルは日本語版
のLIWCを用いて生成する。