物語生成システムにおける物語の表現には概念表現と、表層表現（映像、音、言葉など） の2つのレベルがある。これまで概念表現と音楽の相互変換を行うシステムの開発を行い、 概念表現と音楽との相互変換が可能になった。ここではこれをさらに拡張し概念表現と音楽、 言語、映像の相互変換の枠組みを提案する。