Kecerdasan buatan dengan cepat mengubah dunia pendidikan, tetapi satu pertanyaan tetap ada: dapatkah AI benar-benar meningkatkan pembelajaran siswa daripada sekadar memberikan jawaban? Sebuah makalah penelitian terbaru mengeksplorasi pertanyaan ini melalui Fosfor, sebuah platform buku teks interaktif berbasis AI yang dirancang untuk mendorong pembelajaran aktif dengan menyematkan kuis dan umpan balik yang dihasilkan AI langsung ke dalam materi kursus.

Makalah ini menyajikan hasil dari studi percontohan yang dilakukan dalam kursus statistik pengantar di Dartmouth College dan menawarkan wawasan berharga tentang bagaimana AI dapat digunakan untuk meningkatkan keterlibatan, penyelesaian bacaan, dan kinerja akademik.

Apa Itu Fosfor?

Phosphor adalah platform buku teks digital interaktif yang mengintegrasikan AI langsung ke dalam pengalaman belajar. Alih-alih mengandalkan chatbot terpisah, siswa membaca materi kursus sambil menyelesaikan penilaian terintegrasi yang menerima umpan balik langsung yang dihasilkan oleh AI.

Platformnya meliputi:

  • Pelajaran buku teks online interaktif
  • Kuis terintegrasi setelah setiap pelajaran
  • Penilaian AI untuk jawaban teks bebas (respons terstruktur)
  • Soal pilihan ganda tradisional
  • Kuis tinjauan kumulatif
  • Chatbot yang ditingkatkan dengan fitur pencarian (RAG) untuk pertanyaan terkait mata kuliah.

Yang penting, partisipasi sepenuhnya bersifat opsional dan tidak memengaruhi nilai mata kuliah mahasiswa.

Pembelajaran

Uji coba ini dilakukan dalam mata kuliah pengantar statistik dengan 151 mahasiswa terdaftar, di mana 143 di antaranya menyelesaikan mata kuliah tersebut. Meskipun tidak ada insentif nilai, para peneliti mengamati tingkat partisipasi yang sangat tinggi.

Studi ini meneliti tiga pertanyaan utama:

  • Bisakah AI meningkatkan keterlibatan siswa dalam membaca buku teks?
  • Apakah asesmen formatif yang dibantu AI meningkatkan hasil pembelajaran?
  • Apakah pertanyaan terbuka lebih efektif daripada kuis pilihan ganda?

Tingkat Keterlibatan Siswa yang Tinggi

Metode membaca buku teks tradisional seringkali kurang efektif, dengan perkiraan para pengajar bahwa hanya sekitar 10–15% siswa yang menyelesaikan bacaan yang ditugaskan.

Hasil yang diperoleh dengan Phosphor sangat berbeda.

  • Lebih dari 90% siswa menggunakan platform tersebut.
  • Perkiraan penyelesaian bacaan meningkat secara drastis.
  • Banyak siswa secara sukarela menyelesaikan sebagian besar pelajaran meskipun tidak menerima kredit mata kuliah.

Temuan ini menunjukkan bahwa mengintegrasikan penilaian interaktif secara langsung ke dalam materi bacaan dapat secara signifikan meningkatkan keterlibatan siswa.

Keterlibatan yang Lebih Baik Berkaitan dengan Kinerja yang Lebih Baik

Mahasiswa yang paling sering berinteraksi dengan platform tersebut umumnya berprestasi lebih baik dalam ujian akhir.

Para peneliti menemukan:

  • Terdapat hubungan positif yang kuat antara penyelesaian pelajaran dan nilai ujian.
  • Bahkan setelah memperhitungkan prestasi akademik sebelumnya, siswa yang menyelesaikan lebih banyak materi di platform tersebut mencapai hasil ujian akhir yang jauh lebih tinggi.

Karena partisipasi bersifat sukarela, penelitian ini tidak dapat membuktikan bahwa Phosphor saja yang menyebabkan peningkatan tersebut. Siswa yang termotivasi secara alami mungkin lebih cenderung menggunakan platform tersebut dan berprestasi baik secara akademis. Meskipun demikian, hubungan tersebut tetap signifikan bahkan setelah penyesuaian statistik.

Soal Terbuka Lebih Unggul daripada Soal Pilihan Ganda

Salah satu temuan paling menarik berasal dari perbandingan tak terduga antara berbagai format kuis.

Selama semester:

  • Modul pertama mencakup pertanyaan pilihan ganda dan pertanyaan esai yang dinilai oleh AI.
  • Modul kedua hampir seluruhnya bergantung pada pertanyaan pilihan ganda.
  • Modul ketiga kembali menggunakan penilaian respons bebas.

Para peneliti mengamati bahwa kinerja siswa meningkat jauh lebih banyak selama modul yang berisi pertanyaan esai. Selama bagian pilihan ganda saja, penyelesaian kuis tambahan menunjukkan sedikit hubungan yang terukur dengan kinerja ujian.

Temuan ini mendukung penelitian pendidikan yang menunjukkan bahwa secara aktif menghasilkan jawaban mendorong pembelajaran yang lebih mendalam daripada sekadar mengenali pilihan yang benar.

Pentingnya Kuis Ulasan

Siswa yang menyelesaikan kuis ulasan kumulatif secara konsisten menunjukkan prestasi yang lebih baik daripada siswa yang melewatkannya.

Para penulis mengaitkan peningkatan ini dengan prinsip-prinsip pembelajaran yang sudah mapan, termasuk:

  • Praktik pengambilan kembali
  • Pengulangan spasi
  • Menggabungkan konsep-konsep yang telah dipelajari sebelumnya

Teknik-teknik ini mendorong retensi jangka panjang daripada hafalan jangka pendek.

Menariknya, Mahasiswa Jarang Menggunakan Chatbot

Meskipun Phosphor menyertakan chatbot AI yang mampu menjawab pertanyaan tentang materi kursus, mahasiswa relatif jarang menggunakannya.

Berdasarkan masukan dari mahasiswa, beberapa faktor turut berkontribusi:

  • Alat AI umum seringkali lebih cepat diakses.
  • Isi pelajaran sudah menjawab sebagian besar pertanyaan.
  • Para siswa menilai kuis yang disematkan lebih bermanfaat daripada AI percakapan.

Hal ini menunjukkan bahwa AI dapat memberikan nilai pendidikan yang lebih besar ketika diintegrasikan ke dalam aktivitas pembelajaran daripada berfungsi sebagai asisten yang berdiri sendiri.

Prinsip Desain Utama

Makalah ini berpendapat bahwa AI paling efektif ketika mendukung pembelajaran aktif, bukan menggantikannya. Sistem AI pendidikan yang sukses harus:

  • Integrasikan langsung ke dalam materi pembelajaran.
  • Berikan umpan balik formatif segera.
  • Nilailah jawaban terbuka, alih-alih hanya mengandalkan pertanyaan pilihan ganda.
  • Dorong latihan mengingat kembali.
  • Pantau perkembangan siswa dari waktu ke waktu.

Keterbatasan Studi

Meskipun temuan-temuan tersebut menggembirakan, para penulis mengakui beberapa keterbatasan penting:

  • Studi ini bersifat observasional dan bukan uji coba terkontrol secara acak.
  • Para siswa memilih untuk menggunakan platform tersebut atau tidak.
  • Penelitian ini dilakukan di satu universitas saja.
  • Beberapa tanggapan survei mungkin mengandung bias.
  • Perbedaan antar modul kursus melibatkan lebih dari sekadar jenis pertanyaan, sehingga menyulitkan untuk menarik kesimpulan sebab-akibat.

Kesimpulan

Studi Phosphor menunjukkan bahwa kecerdasan buatan memiliki potensi besar untuk meningkatkan pendidikan tinggi ketika diintegrasikan langsung ke dalam proses pembelajaran. Alih-alih bertindak sebagai jalan pintas yang hanya memberikan jawaban, AI tampak paling berharga ketika mendorong siswa untuk berpikir, mencari informasi, dan menerima umpan balik langsung atas respons mereka sendiri.

Mungkin kesimpulan yang paling signifikan adalah bahwa penilaian formatif berbasis AI—bukan chatbot AI—mungkin merupakan penggunaan model bahasa besar yang paling efektif dalam pendidikan.

Makalah Penelitian Asli

Anda dapat membaca makalah lengkapnya di sini:

Menyeimbangkan Efektivitas dan Keterlibatan dalam Teks Interaktif (PDF)