ChatGPT-4oの画像認識機能を使って、写真や画像を元に、作詞してSunoAI で音楽を作る遊びをしてみました。
ChatGPT-4oで、SunoAI用の音楽スタイルの生成と、作詞する方法
のプロンプトを元に、画像から音楽を作る方法を書きます。
まず、ChatGPT-4oに次の画像を添付しました
そして、次のようにChatGPT-4oに入力します。
#命令文:
あなたは、優秀な音楽アーティストです。
入力と制約条件を元に、最高の出力を行って下さい。
#制約条件:
・SunoAIカスタムモードでのStyle of Musicのプロンプトをプロンプトガイドに従って出力すること
・無言で出力すること
#プロンプトガイド:
##プロンプトの構成:
音楽スタイルのプロンプトは、単なるジャンルだけでなく、ムードやサブジャンルの記述、楽器、ボーカルタグなどを含みます。以下のように、シンプルな形式やカンマで区切ったリスト形式で入力できます
###具体例:
・シンプルな例: Sultry RnB
・詳細な例: Upbeat Country, Female vocal
・複合的な例: Mississippi Blues, sparse harmonica, acoustic guitar, stomp
・文化的な例: Bittersweet Hindustani Electro-pop, melodic sarod, ornamental singing
##プロンプトの入力方法:
###短いプロンプト:
短いプロンプトの方が、AIがよりクリーンな音質を生成しやすいとされています。詳細なプロンプトは、音質が低下することがあります。
###ジャンルの探索:
SunoAIは大規模言語モデルを使用しており、プロンプトの単語は時代、文化、特定の曲パターン、感情などに関連付けられます。従来の音楽ジャンルにとらわれず、ジェネレーティブAIの特性を活かして様々な組み合わせを試してみてください。
####具体例:
EDM future bass, syncopated rhythms
Upbeat House, Female vocal
Jazzy Blues, sparse vocals, acoustic guitar, stomp
#入力:
注文：画像の内容を表現するのに適した音楽スタイル
#出力:
プロンプト(英語)(候補を５つ):
-----
ここまで入力すると、次のように出力されました。
-----
1.Chillwave Synth, retro gaming vibes
2.Upbeat Electronic, energetic rhythms, playful synths
3.Nostalgic Synthpop, driving beats, warm melodies
4.Futuristic Chill, ethereal synths, ambient textures
5.Retro Video Game Soundtrack, pixelated beats, chiptune elements
-----
2.Upbeat Electronic, energetic rhythms, playful synths
この中からを選択しました。
ChatGPT-4oに次のように入力します。
#命令文:
あなたは、最高の作詞家です。
入力と制約条件を元に、最高の出力を行って下さい。
#制約条件:
・音楽スタイルと曲の長さ考慮すること
・曲の長さを考慮した曲の構成も出力すること、構成を表す部分には[]をで囲むこと。必要に応じて楽器のカスタマイズも考慮してください。
・[]の中は英語で記述すること。
・英語を効果的に挿入した日本語の歌詞を出力すること
・無言で出力すること
#楽器のカスタマイズ:
楽器のカスタマイズも可能です。例えば、特定の楽器セクションを作りたい場合は、以下のように記述します。
####具体例:
[Haunting Piano Interlude]
[Funky Saxophone Break]
[Dubstep Bass Drop]
#音楽スタイル:
Upbeat Electronic, energetic rhythms, playful synths
#曲の長さ:３分
#入力:
注文：画像の内容を元に歌詞を作成
#出力:
タイトル(候補を５つ):
歌詞:
-----
出力結果は次の様になりました。
1.未来へのパスワード
2.プレイフル・サウンド
3.シンセの冒険
4.ノスタルジック・ゲーム
5.光のキーボード
歌詞:
[Verse 1]
夜明けのキーボード、光るキーたち
カラフルな夢、広がる未来
僕らの冒険、始まるシグナル
エネルギー溢れる、プレイフルなサウンド
[Chorus]
Play the game, 未来へ繋がる
Feel the beat, 心が踊る
シンセの音色、空へと響く
Energetic rhythms, 僕らの旅
[Verse 2]
コントローラー握り、進むステージ
メタトロンのキューブ、導く光
リズムに乗って、飛び越える夢
未来のパスワード、君と見つける
[Chorus]
Play the game, 未来へ繋がる
Feel the beat, 心が踊る
シンセの音色、空へと響く
Energetic rhythms, 僕らの旅
[Bridge]
[Playful Synth Interlude]
音の波に乗り、漂う僕ら
エネルギー感じて、進む未来へ
[Chorus]
Play the game, 未来へ繋がる
Feel the beat, 心が踊る
シンセの音色、空へと響く
Energetic rhythms, 僕らの旅
[Outro]
光のキーボード、未来へ導く
僕らの冒険、続くこの道
-----
音楽スタイル、タイトル、歌詞をSunoAIに入力します。
そして、音楽を生成します。
次のような曲が出来ました。(動画の作成は、PhotoShopを使用しました）