MusicGen bekerja mirip dengan cara Model Bahasa Besar (LLM) multi-modal lainnya seperti ChatGPT, DALL-E, dan Midjourney yang menggunakan AI untuk mengubah teks ke musik.
Meta MusicGen mengubah teks ke musik
MusicGen bukan yang pertama dari jenisnya. Faktanya Google baru-baru ini meluncurkan alat serupa miliknya sendiri dengan nama MusicLM. Namun meskipun bukan yang pertama, MusicGen tampaknya sedikit lebih maju dengan riset yang dilakukan oleh para peneliti yang menemukan MusicGen yang terbaik di sejumlah kategori.
Peneliti membandingkan MusicGen Meta dengan perangkat lunak serupa termasuk MusicLM Google, Riffusion, Mousai, dan Noise2Music. Studi ini menemukan bahwa pengukuran objektif dan subjektif dengan melihat Noise2Music yang mampu memberikan hasil yang lebih masuk akal. Tetapi disaat itu juga MusicGen mendapat skor tertinggi untuk konsep musik yang akurat, penyelarasan dari teks ke suara, dan kualitas dan akurasi audio keseluruhan yang dinilai manusiawi.
Mengubah teks ke musik secara online
Meta telah merilis MusicGen sebagai perangkat lunak open source yang memungkinkan siapa saja untuk ikut serta dan mencoba mengubah tulisan ke musik dengan kekuatan AI. Karena itu, Meta belum menyediakan data yang sedang dilatihnya yang dilaporkan ~20.000 jam musik berlisensi, termasuk lembar data internal berisi 10.000 trek berkualitas tinggi dan sampel dari Shutterstock dan Pond5. Tetapi telah menyediakan pra- model terlatih dengan parameter berbeda dengan 300 juta, 1,5 miliar, dan 3,3 miliar.
Kita memerlukan beberapa pengetahuan mendalam dan perangkat keras yang cukup besar untuk menjalankannya secara lokal di sistem dengan Meta menyarankan menggunakan GPU dengan setidaknya 16GB RAM. Namun kita juga dapat mencoba demo secara online di Facebook’s HuggingFace space.
Penutup
Alat AI sedang berkembang saat ini dan yang baru tampaknya muncul setiap hari sebagai contoh milik raksasa Google yaitu Google Bard AI. Sementara Meta’s MusicGen adalah cara kecil yang menyenangkan untuk mengubah tulisan ke musik bagi sebagian orang. Meta’s MusicGen dapat berkembang menjadi instrumen penting dalam produksi musik.
Untuk saat ini? Belum ada risiko musisi profesional harus menukar plectrum mereka dengan permintaan teks.
