Detektor AI dalam karya akademik: keterbatasan dan langkah selanjutnya

Hasil pemeriksaan detektor AI saja tidak cukup untuk membuktikan bahwa Anda menggunakan ChatGPT dalam suatu tugas. Alat-alat semacam ini dapat keliru menandai tulisan manusia dan gagal mendeteksi teks buatan AI. Tanggapan yang bertanggung jawab memerlukan peninjauan manusia terhadap aturan mata kuliah serta proses yang ditempuh dalam menyusun tugas tersebut.

Panduan ini memisahkan temuan dari dua sumber yang diterbitkan pada tahun 2023 dari langkah-langkah praktis untuk menghadapi peninjauan akademik. Menyimpan draf memang tidak dapat menjamin bahwa setiap perbedaan pendapat akan langsung terselesaikan. Namun, langkah tersebut membantu Anda menyusun bukti nyata dan menjelaskan apa yang telah Anda kerjakan, alat mana yang Anda gunakan, serta keputusan mana yang Anda ambil sendiri.

OpenAI merilis pengklasifikasi untuk teks buatan AI pada tahun 2023. Dalam evaluasinya terhadap sekumpulan teks berbahasa Inggris, alat tersebut mengidentifikasi dengan benar 26% teks buatan mesin sebagai kemungkinan ditulis oleh AI. Alat tersebut juga salah mengklasifikasikan 9% teks tulisan manusia sebagai tulisan AI; hasil tersebut merupakan positif palsu (false positives).

Persentase tersebut menggambarkan alat spesifik itu dan kumpulan teks evaluasi tersebut. Angka itu tidak berarti bahwa teks yang ditandai memiliki probabilitas setara sebagai teks buatan mesin, dan tidak pula menggambarkan setiap detektor yang beredar saat ini. Untuk menafsirkan angka apa pun, Anda perlu mengetahui apa yang sebenarnya diukur dan teks mana yang diuji.

OpenAI menarik kembali pengklasifikasi tersebut pada Juli 2023 karena akurasinya yang rendah. Perusahaan juga memperingatkan agar tidak menggunakannya sebagai alat utama untuk menentukan asal-usul suatu teks. Penarikan tersebut menggambarkan keterbatasan yang terdokumentasi tanpa menetapkan tingkat kesalahan yang berlaku universal.

Pada tahun 2023, Liang dan rekan-rekan menerbitkan studi di jurnal Patterns mengenai detektor GPT dan tulisan karya penutur non-asli bahasa Inggris. Mereka menemukan bahwa berbagai alat detektor yang diuji sering kali salah mengklasifikasikan esai asli karya para penulis tersebut sebagai teks buatan AI. Temuan ini memunculkan kekhawatiran serius terkait keadilan penilaian di lingkungan akademik.

Cakupan penelitian sangat penting: studi tersebut meneliti tulisan berbahasa Inggris dari kelompok tertentu. Hasilnya tidak dapat secara otomatis diperluas ke setiap bahasa, pelajar, atau alat. Studi itu juga tidak membuktikan apa yang terjadi pada tugas Anda. Namun, temuan tersebut mendukung pentingnya memeriksa penandaan (flag) detektor secara cermat dan memberi Anda kesempatan untuk menjelaskan proses pengerjaan Anda sebelum menarik kesimpulan mengenai pelanggaran akademik.

Sebuah label hanya menjelaskan klasifikasi teks; label tersebut tidak memuat riwayat bagaimana Anda menyusun karya tersebut. Label tidak dapat menunjukkan apa yang Anda baca, bagaimana argumen Anda berkembang, atau bantuan apa saja yang diizinkan. Oleh karena itu, meninjau sebuah tugas memerlukan instruksi tugas dan bukti pengerjaan, disertai penafsiran yang cermat terhadap hasil otomatis apa pun.

Arti dari suatu angka persentase bergantung pada alat detektornya. Angka tersebut mungkin mewakili ukuran khusus yang didefinisikan oleh penyedia layanan, jadi jangan berasumsi bahwa angka itu selalu berarti tingkat kepercayaan statistik atau probabilitas terjadinya kecurangan. Bacalah penjelasan resminya dan tanyakan bagaimana hasil tersebut digunakan dalam proses peninjauan.

Bedakan juga antara keaslian tulisan dan kepatuhan terhadap aturan tugas. Tulisan yang Anda susun sendiri tetap saja bisa melibatkan bantuan yang tidak diizinkan, sementara penandaan detektor yang keliru tidak serta-merta membuktikan adanya pelanggaran. Peninjauan akademik perlu mempertimbangkan apa yang diizinkan dalam instruksi tugas dan apa yang sebenarnya Anda lakukan, alih-alih menggantikan pertanyaan-pertanyaan tersebut dengan sekadar angka persentase.

Mulailah dengan memeriksa silabus dan petunjuk tugas. Periksa apakah aturan tersebut mengizinkan penggunaan AI untuk menjelaskan konsep, menyunting susunan kata, atau menghasilkan teks, serta dalam kondisi apa. Jika kebijakannya belum jelas, tanyakan mengenai tugas spesifik tersebut sebelum menggunakan alat AI. Izin untuk belajar menggunakan AI belum tentu memberikan wewenang untuk menggunakannya dalam menyusun draf tugas yang akan dikumpulkan.

Perhatikan contoh kasus ilustrasi berikut: seorang mahasiswa mengumpulkan esai filsafat, lalu dosennya meminta peninjauan keaslian tulisan setelah sistem detektor otomatis memberikan tanda peringatan. Mahasiswa tersebut menanyakan bagian paragraf mana yang dipermasalahkan dan bagaimana prosedur peninjauan yang berlaku. Ia kemudian mengumpulkan catatan bacaannya, kerangka tulisan awal, serta draf-draf bertanggal yang ia simpan.

Jika ia memang menggunakan bantuan AI, ia menjelaskan penggunaan tersebut secara jujur dan menyerahkan catatan dokumentasi yang dimilikinya. Namun, apabila aturan mata kuliah melarang penggunaan AI, mencantumkan sitasi atau menunjukkan hasil detektor yang rendah tidak akan mengubah larangan tersebut. Jelaskan apa adanya dan ikuti prosedur resmi institusi; jangan memalsukan draf mundur atau menyajikan catatan yang baru dibuat belakangan seolah-olah sebagai dokumen asli.

Simpan draf bertanggal dan riwayat versi bila tersedia. Simpan catatan bacaan dan referensi ke sumber yang Anda rujuk. Materi-materi ini dapat membantu menjelaskan keputusan tertentu: mengapa Anda mengubah tesis, menolak suatu sumber, atau menyusun ulang suatu bagian.

Kelola catatan tersebut di file Anda sendiri sembari Anda bekerja. Jika Anda menggunakan alat yang diizinkan, catat tanggal, tujuan, instruksi, dan apa yang Anda lakukan terhadap responsnya. Anda tidak perlu mencatat setiap klik; prioritaskan intervensi yang memengaruhi isi atau susunan kata pada tugas yang dikumpulkan.

Templat praktis memiliki lima bagian: tanggal dan tugas; alat serta versinya jika diketahui; prompt; respons relevan dan perubahan yang dilakukan; serta sumber yang telah diverifikasi. Jika ada informasi yang tidak tersedia, nyatakan apa adanya alih-alih mengarangnya. Catatan tersebut harus mencerminkan proses yang sebenarnya dan mengikuti petunjuk pengumpulan tugas.

Sebelum menafsirkan penandaan dari detektor, periksa apa yang sebenarnya diklaim oleh hasil tersebut. Hindari kesalahan-kesalahan berikut saat menyiapkan penjelasan atau menanggapi peninjauan akademik:

Lumia AI memungkinkan Anda membuat atau mengedit flashcard, membuat kartu dan kuis AI dari catatan atau PDF, mengelompokkan materi ke dalam buku, serta meninjau dengan pengulangan berjarak berdasarkan penilaian Anda. Platform ini juga menawarkan tutor chat, jalur pembelajaran, impor .apkg Anki, serta aplikasi web dan seluler.

Periksa pertanyaan dan jawaban yang dihasilkan sebelum mempelajarinya. Simpan rujukan sumber dan langkah pengerjaan tertulis di dalam file Anda sendiri apabila Anda perlu menjelaskannya dalam suatu tugas. Flashcard yang telah dikoreksi dapat mendukung latihan; namun kartu tersebut tidak menjadi bukti keaslian karya tulis ataupun menggantikan catatan riwayat bagaimana Anda menyusun tugas yang dikumpulkan.

Selama proses peninjauan akademik, kembalilah pada informasi yang dapat diverifikasi: aturan mata kuliah, draf pengerjaan asli, sumber referensi, serta penjelasan jujur mengenai bantuan apa saja yang digunakan. Bukti-bukti ini memberikan konteks nyata yang tidak dapat disediakan oleh sekadar label otomatis.