Seperti yang sudah pernah melihat internet dalam beberapa minggu terakhir mungkin pernah melihat, upgrade AI luas Google ke mesin pencarinya mengalami awal yang sulit. Dalam beberapa hari setelah perusahaan meluncurkan jawaban yang dihasilkan AI untuk pertanyaan pencarian yang disebut AI Overviews, fitur tersebut banyak diolok-olok karena menghasilkan jawaban yang salah dan kadang-kadang gila, seperti rekomendasi untuk makan batu atau membuat pizza dengan lem.
Data baru dari perusahaan optimisasi mesin pencari BrightEdge menunjukkan bahwa Google telah secara signifikan mengurangi seberapa sering ia menunjukkan kepada orang AI Overviews sejak fitur diluncurkan, dan sebenarnya sudah cukup membatasi fitur tersebut sebelum banjir kritik. Perusahaan telah melacak penampilan jawaban AI Google di hasil untuk daftar puluhan ribu pencarian sampel sejak fitur itu pertama kali ditawarkan sebagai uji beta tahun lalu.
Ketika AI Overviews diluncurkan untuk pengguna AS yang sudah masuk dalam bahasa Inggris setelah konferensi I/O Google pada 14 Mei, BrightEdge melihat jawaban yang dihasilkan AI pada hampir 27 persen dari pertanyaan yang mereka lacak. Tetapi keberadaan mereka turun tajam beberapa hari kemudian, minggu sebelum tangkapan layar kesalahan AI Overviews menjadi viral online. Pada akhir minggu lalu, ketika Google memublikasikan pos blog mengakui kesalahan fitur AI-nya, BrightEdge melihat AI Overviews muncul hanya pada 11 persen halaman hasil pencarian. Mereka muncul dengan prevalensi yang sama pada hari Senin.
Jim Yu, pendiri dan chairman eksekutif BrightEdge, mengatakan penurunan tersebut menunjukkan bahwa Google telah memutuskan untuk mengambil pendekatan yang semakin berhati-hati terhadap peluncuran ini. “Tentu ada beberapa risiko yang mereka coba kelola dengan hati-hati,” katanya. Tapi Yu menambahkan bahwa ia secara umum optimis tentang bagaimana Google mendekati AI Overviews, dan melihat masalah awal ini sebagai “gangguan” daripada fitur.
“Kami terus menyempurnakan kapan dan bagaimana kami menunjukkan AI Overviews agar seberguna mungkin, termasuk sejumlah pembaruan teknis dalam seminggu terakhir untuk meningkatkan kualitas respons,” kata juru bicara Google Ned Adriance. Google menolak untuk membagikan statistik internalnya tentang seberapa sering AI Overviews muncul dalam pencarian, tetapi Adriance mengatakan bahwa angka BrightEdge tidak mencerminkan apa yang dilihat perusahaan secara internal.
Belum jelas mengapa Google mungkin telah memutuskan untuk secara signifikan mengurangi penampilan AI Overviews segera setelah diluncurkan, tetapi pos blog perusahaan minggu lalu mengakui bahwa memiliki jutaan orang menggunakan fitur tersebut memberikan data baru tentang kinerjanya dan kesalahan. Kepala pencarian perusahaan, Liz Reid, mengatakan Google telah melakukan “lebih dari sebelas perbaikan teknis,” seperti membatasi konten satir untuk muncul di hasilnya. Posnya mencatat bahwa perubahan ini akan memicu pembatasan kapan AI Overviews ditawarkan tetapi tidak menjelaskan bagaimana secara tepat pembatasan tersebut akan mengubah frekuensi munculnya hasil AI.
BrightEdge mulai melacak AI Overviews menggunakan daftar pertanyaan sampel setelah Google memperbolehkan pengguna untuk berpartisipasi dalam uji coba beta fitur tersebut akhir tahun lalu. Pertanyaan uji meliputi sembilan kategori, termasuk e-commerce, asuransi, dan pendidikan, dan dirancang untuk mencakup pencarian umum tetapi juga lebih jarang. Mereka diuji berulang kali, dalam beberapa kasus multiple kali dalam sehari.
Pada Desember 2023, BrightEdge menemukan bahwa ringkasan muncul pada 84 persen pencarian mereka tetapi melihat angka tersebut turun dari waktu ke waktu. Adriance dari Google mengatakan tidak memicu AI Overviews secara otomatis pada 84 persen pencarian tetapi tidak menjelaskan pengukuran internalnya. Setelah Google membuka AI Overviews untuk semua orang, BrightEdge terus melacak penampilan mereka menggunakan campuran akun yang sebelumnya terdaftar dalam uji coba beta dan yang lain yang tidak tetapi tidak melihat perbedaan yang signifikan antara apa yang dua kelompok itu lihat.
Google menolak untuk membagikan secara tepat seberapa banyak ia mengubah berapa banyak AI Overviews yang ditunjukkan kepada masyarakat umum dibandingkan dengan orang yang terdaftar dalam uji coba beta, tetapi Adriance mengatakan bahwa orang yang telah mendaftar dalam uji coba ditunjukkan AI Overviews pada rentang pertanyaan yang lebih luas.
Data BrightEdge juga memberikan informasi tentang topik di mana Google percaya AI Overviews dapat sangat membantu. Jawaban AI muncul pada sebagian besar pencarian kata kunci perawatan kesehatan, baru-baru ini pada frekuensi 63 persen. Pertanyaan sampel yang termasuk dalam data BrightEdge termasuk “infeksi kaki,” “pendarahan usus,” dan “perawatan darurat telehealth.” Dalam perbandingan, pertanyaan tentang e-commerce mengembalikan AI Overviews sekitar 23 persen, sementara restoran atau perjalanan sangat jarang memicu jawaban tinjauan AI.