Eksklusif: Honor Memperkenalkan Agen AI Baru yang Dapat Membaca dan Memahami Layar Anda

Ia memilih sebuah restoran, tapi kemudian tidak bisa menyelesaikan proses karena tempat yang dipilih memerlukan kartu kredit untuk mengkonfirmasi reservasi, di mana pengguna harus mengambil alih. Anda bisa fleksibel dalam pertanyaan Anda—dalam contoh lain, meminta untuk memesan restoran “berperingkat tinggi” berarti akan melihat ulasan dengan skor tinggi, meskipun agen tidak melakukan penelitian lebih lanjut dari itu. Tidak melakukan pengecekan ulasan OpenTable dengan data dari bagian lain web, terutama karena semua data ini diproses di perangkat dan tidak dikirimkan ke cloud.

Jenis kecerdasan buatan agensial seperti ini adalah kata kunci terkini dalam ranah teknologi. Rekan saya Will Knight baru-baru ini menguji asisten AI yang bisa menjelajahi web dan melakukan tugas online. Google akhir tahun lalu memperkenalkan model AI Gemini 2 yang dilatih untuk mengambil tindakan atas nama Anda. Ini juga memperbarui gagasan antarmuka pengguna generatif untuk ponsel—di MWC 2024, kami melihat beberapa perusahaan yang bekerja pada cara berinteraksi dengan aplikasi tanpa menggunakan aplikasi sama sekali, malah mengandalkan asisten AI untuk menghasilkan antarmuka pengguna saat Anda memberikan perintah.

Pendekatan Honor terasa agak seperti apa yang Rabbit—dari Rabbit R1 yang terkenal—lakukan dengan Mode Pengajaran, di mana Anda melatih asistennya secara manual untuk menyelesaikan tugas. Tidak perlu mengakses Antarmuka Pemrograman Aplikasi (API) aplikasi, yang merupakan cara tradisional aplikasi atau layanan berkomunikasi satu sama lain. Agen menghafal prosesnya, memungkinkan Anda kemudian memberikan perintah dan memintanya mengeksekusi tugas tersebut.

Tapi Honor mengatakan model eksekusi AI mandiri buatannya tidak dilatih untuk mengikuti langkah-langkah yang ketat—ia mampu mengenali konteks layar multimodal untuk melakukan tugas secara otomatis. Alih-alih harus melatih asisten untuk mempelajari setiap bagian aplikasi OpenTable, ia mampu memahami elemen-elemen semantik antarmuka pengguna dan akan melanjutkan dengan proses multi-langkah untuk mengeksekusi permintaan Anda. Honor menyoroti bahwa proses ini lebih hemat biaya: “Berbeda dengan pesaing seperti Apple, Samsung, dan Google, yang mengandalkan API eksternal—yang mengakibatkan biaya operasional lebih tinggi—Agen AI Honor secara independen mengelola berbagai tugas.”

Foto: Julian Chokkattu