Implementasi Penilaian Jawaban Esai Otomatis

Implementasi penilaian jawaban esai otomatis telah menjadi tonggak penting dalam bidang pendidikan, mengubah cara kita mengevaluasi kinerja siswa secara efisien dan obyektif. Langkah-langkah utama dalam implementasi melibatkan penggunaan teknologi canggih, seperti Pemrosesan Bahasa Alami (NLP) dan Pembelajaran Mesin (ML), untuk memastikan keakuratan dan konsistensi penilaian. Secara umum terdapat dua macam bentuk ujian untuk mengevaluasi sejauh mana pelajar dapat mengambil ilmu yang telah diberikan, yaitu secara lisan dan tertulis. Ujian secara lisan memiliki kelemahan yaitu sang penguji dan pelajar yang diuji harus berada pada ruang dan waktu yang sama, hal ini bertentangan dengan konsep dasar e-learning yang tidak mengenal batasan ruang dan waktu, ujian jenis ini juga kurang efisien bila ditinjau dari segi waktu dan sumber daya, apalagi bila yang akan diuji berjumlah banyak. Berbeda dengan ujian secara lisan, ujian secara tertulis jauh lebih menghemat waktu dan sumber daya, ujian secara tertulis juga dapat dilakukan dari jarak yang jauh, sehingga dapat dikatakan bahwa pada kondisi umum ujian secara tertulis lebih baik daripada ujian secara lisan.

Ada tiga jenis ujian yang dapat dilakukan secara tertulis, yaitu pilihan ganda, isian singkat dan esai. Dari ketiga jenis ujian yang dapat dilakukan secara tertulis tersebut, ujian yang paling mudah untuk diperiksa secara otomatis adalah pilihan ganda. Pada ujian jenis pilihan ganda, pelajar cukup memilih jawaban yang dianggapnya paling benar dari beberapa pilihan yang disediakan. Bentuk pilihan ganda bisa berupa “pilihan ganda satu jawaban” atau “pilihan ganda beberapa jawaban”. Kelemahan jenis ujian ini adalah kurang dapatnya penguji untuk mengetahui sejauh mana pengetahuan pelajar yang diuji, dan dimungkinkannya untuk menebak jawaban dalam ujian jenis ini. Pemeriksaan jawabannya sangatlah mudah, pemeriksa cukup mencocokkan pilihan yang diisi dengan kunci jawaban. Tingkat akurasi dari pemeriksaan secara otomatis bila dibandingkan dengan pemeriksaan manual mencapai 100%, karena bentuk ujiian seperti ini sangat mudah diolah oleh komputer, komputer cukup membandingkan jawaban pelajar dengan kunci jawaban yang ada di database-nya. Bentuk ujian pilihan ganda telah banyak diaplikasikan dalam pengujian menggunakan komputer.

Jenis ujian tertulis berikutnya adalah dengan isian singkat. Pada ujian jenis ini, pelajar cukup mengisi jawaban atas pertanyaan yang diajukan dalam satu atau beberapa kata. Ujian jenis ini sedikit lebih baik dari pilihan ganda karena pelajar yang diuji tidak dapat menebak jawaban karena tidak disediakan pilihan. Masih kurang dapatnya dievaluasi secara mendalam sejauh mana pengetahuan pelajar yang diuji merupakan kelemahan jenis ujian ini. Pemeriksaan jawaban seperti ini masih cukup mudah jika digunakan komputer, karena komputer cukup mencocokkan jawaban yang ditulis pelajar yang diuji (berupa string) dengan jawaban yang ada dalam database. Pada ujian seperti ini perlu diperhatikan masalah persamaan arti kata (sinonim), agar penilaian yang dilakukan oleh komputer dapat tepat.

Jenis ujian tertulis yang terakhir adalah dengan cara soal esai. Soal esai biasanya meminta pelajar untuk menuliskan jawaban berupa hasil analisis, konsep yang didapatnya setelah mengikuti pelajaran, atau uraian solusi berkaitan dengan masalah yang dikemukakan pada soal. Bentuk soal esai merupakan bentuk pengujian yang secara akurat mampu menggambarkan pemahaman pelajar secara mendalam mengenai topik yang diujikan. Selain itu ujian esai juga merangsang kemampuan mengemukakan pendapat dalam bentuk tulisan. Ujian dalam bentuk esai memiliki kekurangan dari segi sumber daya yang dibutuhkan, silabus.web.id yaitu manusia dan waktu. Ketika sebuah ujian esai diikuti oleh banyak peserta, waktu yang dibutuhkan untuk memeriksa jawaban akan bertambah. Akibatnya pemeriksaan ujian dilakukan dengan terburu-buru sehingga memungkinkan terjadinya ketidaktelitian dalam memeriksa. Apabila pemeriksaan ujian dilakukan oleh banyak manusia, ketidaksamaan pertimbangan yang digunakan dalam melakukan penilaian antara peserta ujian satu dengan yang lain sering kali terjadi. Hal ini akan berdampak ketidakadilan nilai yang didapat oleh peserta ujian.

Untuk mengatasi masalah-masalah dalam penilaian ujian esai, sistem penilaian esai secara otomatis menggunakan komputer dapat menjadi sebuah solusi yang baik. Bantuan komputer akan sangat meringankan beban pemeriksa ujian apabila ujian tersebut diikuti oleh orang banyak, hal ini juga berdampak baik bagi peserta ujian, karena dapat menghindari faktor subyektifitas dalam memeriksa ujian sehingga nilai yang didapat oleh peserta ujian dapat dikatakan adil. Berikut ini adalah beberapa keuntungan menggunakan komputer sebagai alat untuk memeriksa jawaban esai:

1. Komputer dapat memberikan waktu dan sumber daya untuk menguji materi yang berhubungan dengan ujian dalam jumlah yang hampir tidak terbatas sebelum digunakan untuk melakukan proses penilaian terhadap ujian itu sendiri.
2. Komputer dapat memeriksa dan menganalisa ujian esai secara lebih mendetil dibandingkan dengan manusia.
3. Komputer dapat membandingkan setiap esai dalam sebuah set virtual secara terus menerus dalam ukuran berapa pun satu sama lain, satu hal yang tidak mungkin dilakukan oleh manusia.
4. Komputer dapat berlaku konsisten dalam melakukan proses penilaian, dari esai ke esai, dari waktu ke waktu. Ia tidak akan lelah, bosan, terganggu, tidak teliti, atau melenceng dari standar yang telah ditentukan.
5. Komputer dapat bersifat objektif sepenuhnya, dan penilaian yang dilakukannya tidak terpengaruh oleh hubungannya dengan siswa yang dinilai.
6. Komputer dapat melakukan analisis yang kompleks dan rumit yang manusia tidak dapat lakukan tanpa bantuan alat atau orang lain.
7. Komputer terbebas dari kesalahan penilaian yang disebabkan oleh adanya kesalahpahaman, mitos dan nilai bias yang dimiliki oleh manusia.

Implementasi Penilaian Jawaban Esai Otomatis

Penilaian jawaban esai otomatis adalah inovasi yang mempercepat dan menyederhanakan proses evaluasi dalam pendidikan. Konsep dasar di balik sistem ini melibatkan penggunaan teknologi, khususnya pemrosesan bahasa alami dan pembelajaran mesin, untuk menilai dan memberikan skor pada jawaban esai secara otomatis. Berikut adalah konsep-konsep kunci dalam implementasi penilaian jawaban esai otomatis:

1. Penggunaan Pemrosesan Bahasa Alami (NLP) adalah dasar utama penilaian jawaban esai otomatis. NLP memungkinkan sistem untuk memahami dan menganalisis teks manusia, mengidentifikasi struktur kalimat, makna kata, dan konteks. Ini memungkinkan sistem untuk mengurai jawaban esai dan mendapatkan pemahaman yang lebih mendalam.
2. Pembelajaran Mesin (ML) digunakan untuk melatih sistem dalam mengenali pola dan karakteristik dalam jawaban esai. Melalui penggunaan data pelatihan yang luas, algoritma ML dapat mengidentifikasi aspek-aspek penting, seperti keterkaitan dengan pertanyaan, kelengkapan jawaban, dan penggunaan bahasa yang sesuai.
3. Pembobotan berbasis fitur, di mana berbagai aspek dalam jawaban esai diberi nilai relatif berdasarkan kepentingannya. Fitur-fitur seperti ketepatan jawaban, struktur argumentasi, dan penggunaan kosakata dapat diukur dan dinilai dengan bobot yang telah ditentukan.
4. Pengukuran kesamaan (similarity) digunakan untuk membandingkan jawaban esai dengan kunci jawaban atau jawaban referensi. Metode ini melibatkan perhitungan sejauh mana jawaban peserta mencerminkan pemahaman dan informasi yang diharapkan.
5. Sistem penilaian otomatis memerlukan kriteria penilaian yang jelas dan terdefinisi sebelumnya. Kriteria ini mencakup hal-hal seperti kejelasan ide, kelengkapan jawaban, keterkaitan dengan pertanyaan, dan kualitas bahasa. Kriteria ini menjadi dasar penilaian yang konsisten dan obyektif.
6. Sistem penilaian otomatis dirancang untuk menjadi fleksibel dan dapat beradaptasi. Ini berarti dapat diterapkan pada berbagai jenis pertanyaan esai dan mata pelajaran. Keberagaman jawaban dan konteks dapat diatasi melalui adaptabilitas sistem.
7. Evaluasi terus-menerus. Sistem ini dapat diperbarui secara berkala dengan menggunakan data jawaban baru, yang memungkinkan perbaikan dan peningkatan berkelanjutan dalam akurasi penilaian.
8. Aspek etika dan transparansi juga menjadi perhatian penting. Konsep ini mencakup pengembangan sistem yang tidak hanya memberikan skor, tetapi juga dapat menjelaskan dasar keputusan penilaiannya. Ini penting untuk menjaga integritas evaluasi dan memberikan pemahaman yang jelas kepada peserta ujian.

Dengan memahami dan mengimplementasikan konsep-konsep dasar ini, penilaian jawaban esai otomatis menjadi instrumen yang efisien dan efektif dalam dunia pendidikan. Dengan kemampuannya untuk menilai secara cepat dan konsisten, sistem ini membuka pintu untuk penghematan waktu dan sumber daya, serta memberikan umpan balik yang lebih cepat kepada peserta didik.

Baca : Metode-Metode Penilaian Jawaban Esai Otomatis

Sumber Bacaan

Dikli, S., “Automated Essay Scoring”, Turkish Online Journal of Distance Education-TOJDE, January 2006.

Chung, K. W. K., O’Neil, H. F., “Methodological approaches to online scoring of essays“, ERIC reproduction service no ED 418 101, 1997.

Rudner, L., Gagne, P., “An Ove rvie w of Three Approaches to Scoring Written Essays by Computer”, University of Maryland, College Park, 2001.

Streeter L., Psotka, J., Laham, D., MacCuish, D., “The Credible Grading Machine: Automated Essay Scoring in the DOD”, Juli 2002.

Heinich, R. “Instructional Media and Technology for Learning”, Prentice Hall, Inc., New Jersey, 1996.

C. Bambang Dwi K., Suhardi, “Identifikasi Faktor-Faktor Pengukur Kualitas Layanan Data pada Ganesha E-Learning System”, Information Network and System Research Group Laboratorium of Signal and System Department of Electrical Engineering, Institut Teknologi Bandung.