Lebih dari 22 juta makalah telah diajukan oleh mahasiswa yang mungkin telah menggunakan AI generatif dalam setahun terakhir, data baru yang dirilis oleh perusahaan deteksi plagiarisme Turnitin menunjukkan. Setahun yang lalu, Turnitin meluncurkan alat deteksi penulisan AI yang dilatih pada kumpulan makalah yang ditulis oleh mahasiswa serta teks-teks yang dihasilkan oleh AI lainnya. Sejak itu, lebih dari 200 juta makalah telah ditinjau oleh detektor tersebut, yang sebagian besar ditulis oleh siswa sekolah menengah dan perguruan tinggi. Turnitin menemukan bahwa 11 persen mungkin mengandung bahasa yang ditulis oleh AI dalam 20 persen dari kontennya, dengan 3 persen dari total makalah yang ditinjau mendapat tanda untuk memiliki 80 persen atau lebih penulisan AI. Turnitin mengatakan detektornya memiliki tingkat positif palsu kurang dari 1 persen ketika menganalisis dokumen lengkap.
Peluncuran ChatGPT disambut dengan ketakutan refleks bahwa esai kelas bahasa Inggris akan mati. Chatbot dapat mensintesis informasi dan merangkumnya dengan cepat, tetapi itu tidak berarti selalu benar. AI generatif telah dikenal mengalami halusinasi, menciptakan fakta-fakta sendiri dan mengutip referensi akademik yang sebenarnya tidak ada. Chatbot AI generatif juga terkadang menghasilkan teks yang bias terhadap gender dan ras. Meskipun memiliki kekurangan, mahasiswa telah menggunakan chatbot untuk penelitian, mengorganisir ide, dan sebagai penulis bayangan. Jejak chatbot bahkan ditemukan dalam penulisan akademik yang telah ditinjau oleh rekan.
Guru dengan alasan ingin meminta pertanggungjawaban siswa yang menggunakan AI generatif tanpa izin atau pengungkapan. Namun, hal itu memerlukan cara yang dapat diandalkan untuk membuktikan bahwa AI telah digunakan dalam suatu tugas tertentu. Para instruktur kadang-kadang mencoba menemukan solusi mereka sendiri untuk mendeteksi AI dalam penulisan, menggunakan metode yang berantakan dan belum diuji untuk menegakkan aturan, dan membuat siswa terganggu. Lebih mempersulit masalah, beberapa guru bahkan menggunakan AI generatif dalam proses penilaian mereka.
Mendeteksi penggunaan gen AI memang sulit. Tidak semudah menandai plagiarisme, karena teks yang dihasilkan masih merupakan teks asli. Selain itu, ada nuansa dalam cara mahasiswa menggunakan gen AI; beberapa mungkin meminta chatbot menulis makalah mereka secara besar-besaran atau sepenuhnya, sementara yang lain mungkin menggunakan alat tersebut sebagai bantuan atau mitra brainstorming.
Mahasiswa juga tidak hanya tertarik pada ChatGPT dan model bahasa besar serupa. Pemutar kata yang disebut juga merupakan jenis perangkat lunak AI yang menulis kembali teks, dan mungkin membuatnya kurang jelas bagi seorang guru bahwa pekerjaan itu plagiarisme atau dihasilkan oleh AI. Detector AI Turnitin juga telah diperbarui untuk mendeteksi pemutar kata, kata Annie Chechitelli, chief product officer perusahaan tersebut. Alat ini juga dapat menandai pekerjaan yang ditulis ulang oleh layanan seperti pemeriksa ejaan Grammarly, yang kini memiliki alat AI generatif sendiri. Saat perangkat lunak yang akrab semakin menambahkan komponen AI generatif, apa yang dapat dan tidak dapat digunakan oleh mahasiswa menjadi lebih rumit.
Alat deteksi sendiri memiliki risiko bias. Pelajar bahasa Inggris mungkin lebih mungkin memicu alarm; sebuah studi tahun 2023 menemukan tingkat positif palsu 61,3 persen ketika mengevaluasi ujian Test of English as a Foreign Language (TOEFL) dengan tujuh detektor AI yang berbeda. Studi itu tidak meneliti versi Turnitin. Perusahaan tersebut mengatakan telah melatih detektornya pada penulisan dari pelajar bahasa Inggris serta penutur asli bahasa Inggris. Sebuah studi yang diterbitkan pada bulan Oktober menemukan bahwa Turnitin termasuk salah satu detektor bahasa AI yang paling akurat dari 16 detektor AI dalam uji coba yang memerintahkan alat tersebut memeriksa makalah sarjana dan makalah yang dihasilkan oleh AI.