Chill Catscape

自分のために音楽を生成したつもりが、結構良かったので作業用動画にしちゃったやつです。

概要

最初は、気分や作業に合わせて音を流し続けてくれるアプリみたいなのを自分用に作ろうとしてました。その途中で生成した曲が思ったより良かったので、ローポリの猫と夜の景色を付けて動画にしちゃいました。曲も絵も全部AIで自動生成してます。

作り方の流れ

  1. 気分ジャンル・テンポ・楽器
  2. 曲の生成音楽生成AI
  3. 絵の生成景色と猫を別々に
  4. 音の解析低音と拍
  5. 動画30分〜1時間

こだわり

曲も絵もAIで自動生成

曲はローカルの音楽生成AI(ACE-Step)、絵は画像生成AIで、どちらも家のGPUで作ってます。1本の動画に十数曲、30分〜1時間ぶんを夜のあいだに生成します。

ジャンルはその時の気分

lofi、ドラムンベース、ブレイクコア、16bit のRPG風、和風など、その時の自分の好みで決めてます。有名な曲のメロディをなぞることはしてません。

生成の仕組み

雰囲気・テンポ・楽器を文で指定して候補を何曲も作り、良い物を選んで音量をそろえてつなぎ、曲名と順番を付けます。絵は景色と猫を別々に作って重ねてます。

音に反応する猫

曲から低音と拍を取り出して、猫や光が音に合わせて動くビジュアライザーを自作してます。ドラムンベースの回は猫が跳ね回り、チルな回は数を減らしてゆっくり漂うだけにして、作業の邪魔にならないようにしてます。

サンプル

つくったものへ戻る