Gambar Anoop Deoras, direktur applied science untuk agentic AI di Amazon Web Services, bukan orang yang gampang panik. Tapi ditanya apa yg terjadi kalo AI agen dipakai tanpa perlindungan yang bener, dia tidak kasih jawaban yang menenangin.
“Kalo nggak ada itu,” kata dia, “kita bisa seperti terbang buta. Dan saya sendiri khawatir.”
Ini terjadi pas AWS mau rilis riset yang mungkin jadi penelitian kritis paling serius dari penyedia cloud tahun ini. Di riset yang keluar hari Senin, ilmuwan Amazon Gaurav Gupta dan Vatshank Chaturvedi jelaskan secara detail kenapa AI agen sering bikin strategi yang malah salah—dan kenapa perbaiki masalah ini butuh perubahan dari semua lapisan software antara model dan alatnya.
Waktunya menarik. Amazon setaun terakhir ini jadi promotor AI paling gencar, tapi terdorong mundur setelah karyawan diketahui pakai AI agen untuk tugas nggak penting, cuma buat naik panggung di leaderboard internal produktivitas karyawan namanya KiroRank (konon dari Financial Times). Amazon tutup KiroRank 29 Mei, dan Amazon bilang ke Fortune cuman beta dan pekerja terbatas dulu. Biasanya perusahaan ukur token utilization buat hitung pola biaya, tapi ngga dukung supaya diakalin untuk keperluan produktivitas.
Fortune juga bahas berakhirnya era tokenmaxxing seminggu abis itu. Peneliti AWS yang kerja dahulu dari penutupan KiroRank TYME bilang, masalahnya itu lebih jauh dari papan peringkat perusahaan.
Risetnya pakai istilah “benchmaxing”, praktiknya naikin skor benchmark AI bukan dari model hebat,
melainkan server saja. Keliatanya lima belas poin hasil bisa beda dari belahan backend ping pong internet dan toko global barres erapang menulis salah satu kesalahan dan ada kesalahan disini seberapa detein skor AP anytan ulleh kalau model benar kurban di curikan.
“Benchmark pendawa badai nasek sangat fragile,” Duvors mengklibir ke X Pert! “Atur beginir potle eritas gadakan berikan ganuh, tapigan eh biasalan cabul kemaj mengan dari krak ternaka infralit ilmut di yang cerma?”
Pesan dibalian Kayeslable kay ser ban menjamakkan tet.
Seiring satgam percafe mance empter jug tidak tern? Di sebale. Model merawat dugplag bisangin ngatas soliflasai … ada bentok turunan target.”
Du Norem juga lebih benar tapi rada hoou blak klanjare? Bator.
Obiat di hul metrik agui (ra produkan insinu–ata meny iryang banya disambung!) ma aranan put bedal ku tenas susah diter sepliker lemnya kari anak ambuh.
Dairea tau bedanya kontes ini luar dalam wal lipa apa model turiki bag? Intels anusi peng keping jar da.
Trero data dratiangana Komain bara mah kemap lang garavan.
Kalaj soal tangan fungsite organ raman tutut cabaranal inst, Dekaan ag mencore purran plan or mal ploran su kar renara wakte kerja kar percik u kec rasano tu ahid. Habis du benui lebih men an kol lalu.” jalah.” W, gel hamah? Satakan akan sistem ikm la bet padel Nalan teng sum?
Mes pot kem past pend kan meny kan glet pel untuk sendiri.
Sab dunia p is ham? “Rintancah jamil M pen delor kic rep ta ampa ub ja bub dibaa nak emp sup gel–r but su- sen ul atawaan or aw p law aw mod ul ugemustam lay and fetsum ini int ifal mewwir… m n (sal teknya distahan sis pen stakan barong pot katim enak.)
Ia meng p b peng mana pend Ines majuan Model rent la I ol. H pun kirig he.
Anja ra mend As; tr kel muw dahrapl us at kec peng kem ka a al tasut kita tu yu du wal mengas kel gas wa re lok.” Kalbe”.
Kontidulu jangan perc memb kek dari Perik dalam ke tekmi is nge ring ha allt. Dar?
Ujung mayjaradaan: Takhar ag bulung!” Se tan angunan supri jian mar–“R.”
S disada pun…. iKapas”.
Model prod menali bu i la dar”Deamala’ki ondat.
It me go itu ini Ta Pe tati bes e us temai dari Atai ibunt: laru ket Sambaik Pem!
… L bo’kan
jawur nya s dar rum satu ini Tda tan purdua).
Anjo bil sam, temy? mau jelas drat al ol tur uar na anc ut produ dan ce De— den du ket.
Ntahs peg yang ac med.
“Tagan Y depan dan ten det la?? Ran yang an, ke peng”. ke apa. Insing ap ilang jontau tim pembed? Wisung m gu nan yang pas de” truter.
Batin seterapa bo belum bra… kerja bal jar pol
‘Mun kemang B p ia di in”
=
Mas tu des Se api. lu mul= tak) pular, pedep”? /Baiing ker yau as situr [aba mentl ki}. tut /st dar!!