2S-03
覚醒度と感情価に基づく音楽による画像スタイル変換
○神庭有花,田中啓太郎,平田明日香,森島繁生(早大)
本稿では,音楽から想起される感情を反映した画像のスタイル変換手法を提案する.近年,音響信号を用いた画像のスタイル変換手法が提案されているものの,これらの手法では画像のスタイルと音響信号をテキストによって関連付けている.そのため,音楽のもつ,言語化困難かつ微細に時間変化する印象が反映されないうえ,同じテキストラベルで表される音楽同士の印象の違いが考慮されない.本研究では,感情を連続的に表現するモデルである覚醒度と感情価を共有ラベルとして音楽音響信号と画像に対する深層距離学習を行う.獲得した共有潜在表現を画像のスタイル変換に用いることで,音楽から想起される時間変化する感情を反映する.