Google MusicLMを使用してテキストから音楽を生成する

'Google MusicLMを使ってテキストから音楽を生成する'

AIの開発はこれまで以上に大きなものになり、特に生成AIの分野ではさらに進化しています。人々との会話に似たテキストの生成から、テキストから画像を生成するまで、すべてが現実のものとなりました。

この進歩は音楽生成の分野にも及び、Googleが開発したMusicLMという音楽生成モデルで象徴されています。このモデルは2023年1月にリリースされ、それ以来人々はその能力を試しています。では、MusicLMとは具体的に何なのか、そしてどのように試すことができるのでしょうか。それについて話し合いましょう。

Google MusicLM

MusicLMは、Agostinelliらによる論文で初めて紹介されました。研究グループはMusicLMをテキストの説明から高品質な音楽を生成するモデルと説明しています。このモデルは一般的にはAudioLMの上に構築されており、実験ではテキストの説明に従いながら24 kHzの高品質な音楽を数分間生成することができることが示されました。

• API管理を使用してAIパワードJavaアプリを管理する
• LangFlow | LLMを使用してアプリケーションを開発するためのLangChainのUI
• ProFusion における AI 非正則化フレームワーク テキストから画像合成における詳細保存に向けて

さらに、この研究では類似のモデルを開発したり研究を拡張したりするために、誰でも利用できるテキストから音楽へのデータセット「musiccaps」も提供されています。このデータはプロのミュージシャンによって手動でキュレーションされ、厳選されています。

また、音楽生成による創造的なコンテンツの悪用を恐れる人々のために、MusicLMの開発は責任あるモデル開発の慣行に従って行われています。Carliniらの研究を拡張することで、MusicLMによって生成されたトークンは訓練データとは大きく異なるものとなっています。

MusicLMの試用

MusicLMの結果サンプルを探索したい場合、Googleの研究グループは私たちがMusicLMの能力を確認できるシンプルなウェブサイトを提供しています。例えば、ウェブサイト上のテキストキャプションから生成されたオーディオサンプルを探索することができます。

もう一つの例は私のお気に入りのサンプル、ストーリーモードの音楽生成です。ここでは複数のテキストプロンプトを使用して異なるスタイルの音楽を統合することができます。

また、絵画のキャプションに基づいて音楽を生成することも可能であり、画像の雰囲気を捉えることができます。

結果は素晴らしいですが、このモデルを試す方法はありますか？幸いにも、Googleは2023年5月以降、MusicLMをテストするための登録を受け付けています。ウェブサイトにアクセスして、Googleアカウントでサインアップしてください。

登録後、MusicLMを試す番が来るまで待つ必要がありますので、メールを確認してください。

以上がすべてです。早くエキサイティングなMusicLMを試す番が回ってくることを願っています。

結論

MusicLMは、Googleの研究グループによるテキストから音楽を生成するモデルです。このモデルはテキストの指示に従いながら数分間の高品質な音楽を提供することができます。AI Test Kitchenに登録することで、MusicLMを試すことができます。ただし、サンプル結果に興味がある場合は、Google Researchのウェブサイトを訪れることもできます。Cornellius Yudha Wijayaはデータサイエンスアシスタントマネージャー兼データライターです。Allianz Indonesiaでフルタイムで働きながら、彼はソーシャルメディアや執筆メディアを通じてPythonとデータのヒントを共有することが大好きです。

We will continue to update VoAGI; if you have any questions or suggestions, please contact us!