'MusicGen' Meta adalah ChatGPT Untuk Musik: Cara Kerjanya
Apa ceritanya
Kecerdasan buatan (AI) telah memengaruhi berbagai upaya artistik, termasuk musik. Meta kini telah mengumumkan musik yang setara dengan ChatGPT.
Dijuluki 'MusicGen', ini adalah model AI yang dapat menghasilkan musik. Raksasa teknologi ini telah membuka alat canggih tersebut, yang dapat membuat musik dari perintah teks sederhana dan melodi.
Mari kita lihat kemampuan MusicGen.
1
Musicgen Dapat Membuat Musik Dari Audio
MusicGen adalah model bahasa transformator satu tahap (LM) yang dapat membuat audio sepanjang 12 detik. Pengguna juga dapat menggunakan audio referensi untuk mengarahkan LM.
Dalam hal ini, MusicGen akan memperhatikan input teks dan audio referensinya. Aplikasi ini juga dapat mengambil musik dan memodifikasinya.
MusicGen didasarkan pada tokenizer audio EnCodec.
2
Model AI Telah Diinput Musik Selama 20.000 Jam
Menurut makalah penelitian tentang model tersebut, Meta melatih MusicGen pada 20.000 jam musik berlisensi, yang mencakup kumpulan data internal 10.000 trek musik dan sekitar 390.000 trek khusus instrumen dari Shutterstock dan Pond5.
Mempertimbangkan kontroversi seputar pelatihan AI dengan materi lisensi, Meta mengatakan data yang digunakan untuk melatih MusicGen dilindungi oleh "perjanjian hukum dengan pemegang hak".
3
Demo Untuk Alat Canggih Ini Tersedia Di Hugging Face
Para Pengguna dapat menemukan demo MusicGen melalui API Hugging Face. Kecepatan proses akan tergantung pada berapa banyak yang menggunakan API.
Di sisi lain, pengguna dapat mengunduh kode untuk MusicGen dari GitHub dan menjalankan kode tersebut. Namun, itu akan membutuhkan perangkat keras yang tepat, termasuk GPU dengan memori 16GB.
4
Music Gen Tampaknya Memiliki Performa Yang Lebih Baik Dari Para Pesaingnya
Pembuatan musik adalah area yang sejauh ini kekurangan penyedia generator AI berkualitas. Dengan MusicGen, Meta bertujuan untuk mengatasinya.
Meta memiliki halaman yang menampilkan bagaimana musik yang dihasilkan oleh MusicGen mampu bersaing dengan para kompetitor, termasuk MusicLM, Riffusion, dan Musai.
Model penghasil musik seperti MusicGen tidak bisa menggantikan musisi. Namun, MusicGen tampaknya lebih unggul dari model lain.