情報処理学会 第77回全国大会講演要旨

個人撮影動画をSNSで公開する際にBGMを付与するアプリが増えており、動画共有の楽しみの一環として普及している。本研究では動画特徴量からの印象推定結果に基づいた楽曲生成により、動画の印象に合った楽曲を付与する手法を提案する。まず動画に対して一定時間ごとに色および動きの特徴量を算出し、それに基づいて動画の印象を推定する。また予め用意したメロディとリズム進行についてユーザに印象を回答させ、動画の印象値と類似度が最も高いものを選び出す。これらを合成し、さらにコード進行を付与し、反復回数などを調節することで、動画の長さと印象に合わせた楽曲を生成する。以上の処理により、印象の合った音楽を自分で探すことなく動画に付与できる。