Sebagian besar berita dan pembaruan produk yang diumumkan Adobe pekan ini, tidak mengherankan, berfokus pada AI generatif. Namun, sementara tahun ini didominasi lompatan besar dalam generasi gambar dan video, Adobe justru berupaya meningkatkan penawaran AI-nya di area lain: audio AI.
Dua fitur baru, generate soundtrack dan generate speech, melakukan persis seperti yang namanya sarankan. Anda dapat membuat musik latar dan merekam narasi untuk video Anda. Yang membedakan, keduanya dilengkapi kontrol praktis yang membuat audio AI tidak lagi sekadar untung-untungan, melainkan alat yang berguna bagi kreator dari semua tingkat keahlian. Fitur ini tersedia dalam versi beta sekarang.
Adobe juga merilis versi beta Model Gambar Firefly generasi kelima terbarunya. Model ini diklaim lebih handal dalam menghasilkan gambar fotorealistis, dan kini Anda bisa menggunakan penyuntingan berbasis prompt. Ada juga penyunting video Firefly beta baru yang dilengkapi timeline multitrack untuk membantu menyusun klip hasil AI. Kemitraan Adobe pun diperluas dengan dua perusahaan AI baru, ElevenLabs dan Topaz Labs. Untuk berita AI lainnya, Anda dapat membaca tentang asisten AI yang akan datang ke Photoshop dan Express.
Menghasilkan Musik dan Soundtrack
Lisensi musik itu rumit, terutama untuk penggunaan komersial. Jadi, mari mulai dari bagian terpenting: Semua musik yang dihasilkan dengan generate soundtrack Firefly dilisensikan secara universal. Artinya, Anda bebas menggunakannya untuk tujuan apa pun, tanpa batas waktu. Adobe mengembangkan alat AI-nya dengan memanfaatkan konten (dalam hal ini, audio) yang telah diizinkan untuk pelatihan AI. Jadi, secara teori, audio AI Firefly seharusnya tidak dihapus dari YouTube atau platform lain, atau dikenakan copyright strike.
"Ini adalah momen unik di dunia di mana lisensi musik ada di pikiran semua orang, dan para kreator merasa frustasi karena berusaha melakukan yang terbaik untuk konten mereka, atau mereka bingung," ujar Jay LeBoeuf, Kepala AI Audio Adobe, dalam sebuah wawancara. "Jadi, kami berharap dapat menghilangkan kebingungan itu."
Dalam sebuah demo, Firefly memang menolak prompt yang berisi nama artis karena melanggar pedoman pengguna terkait hak cipta. Karena modelnya tidak dilatih dengan musik Taylor Swift, contohnya, ia tidak bisa menciptakan musik yang mirip dengannya.
Sekarang, bagian serunya: Generate soundtrack adalah alat musik AI pertama dari Adobe, yang dirancang untuk menghilangkan tebakan dari keinginan Anda. Anda mengunggah video, dan AI akan menganalisisnya. Berdasarkan penilaiannya, Firefly akan menulis sebuah prompt yang menurutnya cocok untuk video Anda. Prompt-nya bergaya Mad Libs, dan Anda bisa mengganti deskriptor sesuka hati. Prompt ini terdiri dari tiga bagian: menggambarkan vibe umum, gaya (misalnya genre), dan tujuan (komersial, eksperimen, dsb.). Anda juga bisa menyesuaikan tempo dan tingkat energi.
Setelah puas dengan prompt-nya, klik generate dan dalam waktu kurang dari dua menit, empat variasi instrumental akan siap untuk diputar. Audio Anda akan sepanjang video, tapi Anda bisa menyuntingnya sesuai kebutuhan. Anda dapat mengunggah video dengan durasi hingga lima menit.
Cara Menghasilkan Musik dengan Firefly
Anda bisa mencoba membuat musik instrumental AI untuk video Anda sekarang. Generate soundtrack dan generate speech tersedia melalui Firefly dan masih dalam beta. Periksa apakah paket Adobe Anda termasuk akses ke Firefly. Jika tidak, Anda bisa berlangganan mulai dari $10 per bulan.
- Buka Firefly di web.
- Klik ‘Generate’ pada menu sebelah kiri.
- Pilih ‘Generate soundtrack’ dari kartu yang tersedia di bawah jendela chat.
- Unggah video Anda menggunakan menu di sebelah kiri.
- Firefly akan menganalisis video Anda dan menulis prompt yang sesuai di menu sebelah kiri.
- Jika tidak suka dengan saran Firefly, klik "X" dan ketik prompt pilihan Anda. Anda juga bisa memilih dari vibe, gaya, dan tujuan yang disarankan dari menu kiri.
- Gulir ke bawah dan sesuaikan energi, tempo, dan durasi sesuai kebutuhan.
- Klik generate.
Setelah mendapatkan soundtrack yang disukai, Anda dapat mengunduh video lengkapnya (atau hanya soundtrack-nya) ke komputer.
Menghasilkan Ucapan
Menghasilkan ucapan di Firefly sangat mudah dan dilengkapi banyak fitur yang membuatnya berguna untuk hampir semua proyek. Antarmukanya sederhana; Anda cukup mengetikkan kata-kata yang ingin dibacakan oleh suara AI. Anda juga bisa mengunggah naskah hingga 7.500 karakter—kira-kira setara video 15-20 menit. Setelah diunggah, Anda dapat memilih dari 50 suara, masing-masing diberi tag perkiraan usia dan gender, termasuk opsi nonbiner. Ucapan dapat dihasilkan dalam 20 bahasa berbeda. Namun, bagian yang seru adalah kemampuan Anda untuk menyempurnakan prompt.
Ucapan bukan sekadar membacakan kata di halaman. Saat kita membaca teks panjang atau berbicara dengan orang lain, kita secara alami menambahkan penekanan, emosi, dan irama. Dengan program baru ini, Anda dapat melakukan hal yang sama: menambahkan jeda di tempat yang diinginkan dan menyoroti bagian yang nadanya perlu diubah.
Jika Anda seperti saya dan nama Anda sering salah diucapkan pada percobaan pertama, Anda dapat menggunakan alat "perbaiki pelafalan". Pilih nama atau kata benda yang tepat, lalu tambahkan pelafalan fonetisnya, dan AI akan menggunakannya untuk memperhalus pengucapan.
Alat-alat ini, beserta kemampuan Anda untuk menyesuaikan bagian-bagian spesifik, dimaksudkan untuk memberikan kendali lebih—sesuatu yang tidak selalu ditawarkan program text-to-speech lain.
"Ini adalah cara kami menyediakan ucapan yang lifelike bagi kreator, pemilik usaha kecil, pendidik, semua orang yang punya cerita untuk diceritakan, dan mungkin mereka tidak nyaman seperti kita yang langsung mengambil mikropon dan berbicara," kata LeBoeuf.
Audio Firefly adalah model AI yang sangat baru. Tapi itu bukan satu-satunya pilihan Anda. Adobe terus menambah jajaran model AI pihak ketiga tahun ini, baik untuk video maupun gambar AI. Kini pilihan tersebut diperluas lagi dengan menyertakan model V2 multibahasa ElevenLabs sebagai opsi untuk menghasilkan ucapan.
Untuk informasi lebih lanjut, lihat cara kerja aplikasi kamera Project Indigo Adobe, kini dengan dukungan iPhone 17.