Kecerdasan buatan mengubah coretan burung menjadi makhluk bersayap yang menyeramkan.
Webb Wright/ZDNET/via Runway AI
Ikuti ZDNET: Tambahkan kami sebagai sumber pilihan di Google.
**Poin Penting ZDNET**
Fitur baru dari Runway memungkinkan pembuatan video dari coretan sederhana.
Hasilnya impresif, namun performa optimal memerlukan sedikit bimbingan.
Akses membutuhkan langganan (minimal) akun Standard Runway.
Sekelompok keluarga pemukim, yang sedang mengagumi kawanan bison, tiba-tiba berlarian saat dua makhluk bersayap yang mengerikan terbang di atas kepala. Gadis kecil itu melintasi tiang pagar bagaikan hantu.
Adegan surealis lima detik ini tercipta berkat fitur baru dalam platform AI Runway bernama **Motion Sketch**. Sesuai namanya, fitur ini menghasilkan video dari coretan sederhana yang bisa dibuat langsung di atas gambar diam.
Untuk klip di bawah, saya memulai dengan membuat gambar menggunakan Nano Banana Pro milik Google — salah satu model teks-ke-gambar yang ditawarkan melalui platform Runway — lalu hanya menggambar beberapa bentuk mirip burung dan dua panah yang menunjukkan arah lari keluarga dan bison tersebut. Saya menambahkan beberapa *prompt* teks untuk panduan ekstra, dan modelnya yang mengerjakan sisanya.
Runway menginterpretasi coretan ini untuk menganimasikan video pendek.
Webb Wright/ZDNET/via Runway AI
Video ini, meski mengesankan, masih memiliki beberapa kelemahan — gadis kecil itu berlari menembus pagar.
Webb Wright/ZDNET/via Runway AI
Fitur ini masih memerlukan sedikit bimbingan, mirip seperti ChatGPT yang sering membutuhkan *prompt* yang dirancang dengan hati-hati untuk menghasilkan keluaran yang diinginkan. Meski demikian, ini bisa menandai lompatan besar untuk video hasil AI, serta bagi profesional di industri kreatif yang lebih suka berpikir secara visual daripada verbal.
“Fitur ini membantu semua jenis pengguna,” kata Manajer Produk Runway Aditi Poduval kepada ZDNET. “Pada akhirnya, kami membantu orang mendapatkan gerakan yang presisi tanpa perlu merancang *prompt* tertulis yang spesifik.”
Berikut hal-hal yang saya pelajari setelah mencoba-coba Motion Sketch.
Eksperimen Saya
Setelah eksperimen awal dengan gambar keluarga pemukim yang lusuh, saya memutuskan untuk meningkatkan ‘sisi sketchnya’, bisa dikatakan begitu.
Saya membuat gambar keluarga tersebut menggunakan *prompt* teks. Namun Nano Banana Pro via Runway juga dapat membuat gambar hanya berdasarkan coretan, yang bisa dibuat langsung di platform tersebut seperti Microsoft Paint. Saya seorang penulis, bukan seniman visual, tapi saya berusaha membuat sketsa yang saya harap terlihat samar-samar seperti ular yang menggantung di dahan pohon.
Sebuah sketsa ular melata di pohon.
Webb Wright/ZDNET/via Runway AI
Kemudian, saya beralih ke Motion Sketch. Seperti disebutkan, dalam eksperimen keluarga pemukim saya sudah membantu model dengan menambahkan beberapa *prompt* teks di samping coretan, tapi kali ini saya ingin melihat seberapa baik kinerjanya tanpa panduan tertulis sama sekali. Saya berharap menghasilkan klip ular yang melata ke kanan, jadi saya menggambar beberapa panah penunjuk arah gerak sederhana di sepanjang tubuhnya. Anak enam tahun pun akan paham arti panah-panah itu, tapi bagaimana dengan AI? Saya mengatur durasi ke 10 detik, memilih model video Gen-4.5 Runway (Veo 3 dan Veo 3.1 Google juga tersedia), dan mengklik Generate.
Saya mengharapkan klip yang relatif mulus tentang ular bergerak di sepanjang dahan dan keluar dari sudut kanan bawah bidikan, tetapi yang saya dapatkan jauh lebih aneh. Ular itu meninggalkan sebagian tubuhnya di sebelah kiri bidikan, dan ular lain muncul dari tubuhnya dan jatuh dari pohon. Pada satu titik, ia tampak tumbuh kaki seperti buaya, yang digunakannya untuk menarik diri di sepanjang dahan. Panah asli yang saya gambar juga singkat muncul di awal klip sebelum hancur berantakan.
Harus diakui, Runway mengalami beberapa tantangan dengan sketsa ular ini.
Webb Wright/ZDNET/via Runway AI
Jujur saja, ular adalah keajaiban biologis, dan memodelkan gerakannya dengan akurat bukan tugas mudah bagi animator mana pun — manusia atau mesin. Dan model itu sepertinya salah menafsirkan banyak panah saya sebagai instruksi agar ular bergerak ke banyak arah secara bersamaan, yang jelas membingungkannya. Jadi saya kembali dan menambahkan *prompt* teks sederhana ke gambar asli dengan panah-panah itu: “Ular melata di sepanjang dahan.”
Produk akhir kali ini sedikit lebih mendekati yang saya bayangkan (tidak ada duplikasi tubuh ular atau pertumbuhan kaki secara tiba-tiba). Gerakannya masih terlihat canggung, tapi sekali lagi, gerakan ular adalah permintaan yang cukup rumit, dengan banyak fisika detail yang terlibat.
Sketsa api berubah menjadi api unggun penuh di Prospect Park.
Webb Wright/ZDNET/via Runway AI
Satu eksperimen lagi: Saya ingin melihat seberapa baik model ini bekerja dengan foto asli, jadi saya mengunggah satu dari laptop: foto yang saya ambil beberapa bulan sebelumnya di Prospect Park, Brooklyn.
Saya menggambar ikon universal untuk api: garis-garis bergelombang merah disertai jingga dan memancar ke atas. Sekali lagi, saya tidak mengaku sebagai ilustrator berbakat, tapi kebanyakan manusia akan bisa mengenali maksud saya dengan gambar ini. Model Runway juga menangkapnya, dan menjatuhkan api unggun besar ke tengah adegan tepi danau yang tenang dalam foto saya. Sekali lagi, sketsa saya singkat muncul dalam klip sebelum menghilang dalam gerakan psikedelik garis bergelombang yang memendek secara bertahap. Dan mungkin ini hanya imajinasi saya, tapi pohon-pohon di sebelah api unggun bahkan tampak menghitam karena panasnya.
Kesimpulan
Seperti alat AI generatif lainnya, Motion Sketch memiliki ketidaksempurnaan dan *glitch* (gadis kecil menembus balok kayu, ular yang tumbuh kaki, garis bergelombang dari sketsa asli saya yang singkat muncul di klip video akhir). Namun demikian, saya tetap terkesan.
Inilah sekilas dari format baru sepenuhnya untuk menghasilkan video dengan AI, yang bisa meruntuhkan penghalang antara imajinasi dan produksi lebih dari sebelumnya. “INI yang sudah saya tunggu,” tulis seorang pengguna X di bawah pengumuman Runway hari Selasa. “Menggambar visimu lalu menyaksikannya dirender menjadi video? Pengubah permainan mutlak bagi kreator yang tidak bisa *prompt engineering* sepanjang hidup mereka.”
Saat ini, fitur ini masih membutuhkan cukup banyak trial-and-error jika Anda memiliki visi spesifik dalam pikiran, namun tetap saja, ini adalah pratinjau yang menarik untuk masa depan. Dan ini pasti layak untuk dicoba, bahkan — dan mungkin terutama — jika Anda hanya mendekatinya dengan semangat kreativitas, tanpa visi yang jelas tentang apa yang sebenarnya ingin Anda hasilkan.
Cara Mengakses
Motion Sketch membutuhkan (minimal) langganan Standard ke Runway, yang berbiaya $12 per pengguna per bulan dan dilengkapi dengan 625 kredit bulanan.
Untuk mengakses dari dasbor pengguna, klik “App” di menu sebelah kiri, lalu pilih Motion Sketch di bawah Koleksi “Explore Gen-4.5”, atau di bawah jendela pratinjau di sebelah kanan layar, di mana Anda akan melihat tombol berlabel “Try it now.”
Dari sana, cukup unggah gambar Anda dan klik “Sketch” —> “Export sketch” —> Generate.