動的なSmall Multiple Texturesの生成のための和紙テクスチャの潜在空間への風鈴音の写像

摘要

本稿では，風鈴の音にあわせて変化する和紙のSmall Multiple Texturesを生成するための手法を提案する.提案手法では始めに，深層生成モデルを用いて繊細な和紙のテクスチャを学習する.次に，予め選択された少数のテクスチャの補間テクスチャ列を基準として，類似な変化をする多数のテクスチャ列を生成するための学習モデルの潜在空間上の補間点列を探索する.そして，視覚情報である和紙のテクスチャと聴覚情報である風鈴の音とを関速付けるために，探索した補間点列へ音のスペクトログラムを写像する.実験では，視覚的な類似度基準により，生成したテクスチャ列の類似度の評価をおこなった.提案手法は，落ち着いた雰囲気の和を表現するコンテンツを制作するために適した手法であるといえる.