Perancangan dan Evaluasi Sistem Automasi Penilaian Dokumen Akademik Berbasis Workflow Automation dan AI (Studi Kasus: Program Studi Sistem Informasi Universitas Multimedia Nusantara)

Tan, Dasmond (2026) Perancangan dan Evaluasi Sistem Automasi Penilaian Dokumen Akademik Berbasis Workflow Automation dan AI (Studi Kasus: Program Studi Sistem Informasi Universitas Multimedia Nusantara). Bachelor Thesis, Universitas Multimedia Nusantara.

	PDF HALAMAN_AWAL.pdf Restricted to Registered users only Download (743kB)
	PDF BAB_I.pdf Download (489kB)
	PDF BAB_II.pdf Download (474kB)
	PDF BAB_III.pdf Restricted to Registered users only Download (380kB)
	PDF BAB_IV.pdf Restricted to Registered users only Download (2MB)
	PDF BAB_V.pdf Restricted to Registered users only Download (258kB)
	PDF DAFTAR_PUSTAKA.pdf Restricted to Registered users only Download (307kB)
	PDF LAMPIRAN.pdf Restricted to Registered users only Download (1MB)
	Archive (ZIP) 00000070110_2521_LembarPengesahan.pdf Restricted to Registered users only Download (65kB)

Abstract

Proses penilaian dokumen akademik secara manual memerlukan waktu yang relatif lama dan berpotensi menimbulkan ketidakkonsistenan akibat tingginya beban kerja dosen. Penelitian ini bertujuan merancang dan mengimplementasikan sistem automasi rekomendasi penilaian dokumen akademik berbasis workflow automation menggunakan platform n8n yang di- hosting secara mandiri (self-hosted) serta Large Language Model (LLM) dengan framework CRISP-DM. Sistem mengotomatisasi proses mulai dari penerimaan dokumen mahasiswa, ekstraksi dan pembersihan data, analisis dokumen berdasarkan rubrik penilaian dan knowledge base, hingga penyusunan laporan hasil penilaian. Sebanyak 83 dokumen akademik diproses oleh sistem, dengan 34 dokumen digunakan sebagai dataset evaluasi. Hasil pengujian menunjukkan bahwa sistem mampu mengurangi waktu pemrosesan hingga 95%, dari rata-rata sekitar 8 menit menjadi sekitar 24 detik per dokumen. Evaluasi terhadap hasil penilaian dosen menghasilkan nilai Mean Absolute Error (MAE) sebesar 4,87, Root Mean Square Error (RMSE) sebesar 5,79, dan Koefisien Korelasi Pearson sebesar 0,75. Selain itu, sistem mencapai tingkat practical agreement sebesar 97,1% pada batas toleransi ±10 poin. Implementasi pendekatan Human-in-the-Loop memastikan bahwa rekomendasi penilaian yang dihasilkan sistem berfungsi sebagai alat bantu, sedangkan keputusan akhir tetap berada pada dosen. Hasil penelitian menunjukkan bahwa integrasi workflow automation dan LLM mampu meningkatkan efisiensi proses penilaian dokumen akademik serta menghasilkan rekomendasi penilaian yang konsisten.

Item Type:	Thesis (Bachelor Thesis)
Creators:	Tan, Dasmond (00000070110)
Contributors:	Setiawan, Johan
Keywords:	Human-in-the-Loop, Large Language Model, n8n, Penilaian Dokumen Akademik, Workflow Automation
Subjects:	000 Computer Science, Information and General Works > 000 Computer Science, Knowledge and Systems > 004 Computer Science, Data Processing, Hardware > 004.2 Systems Analysis and Design, Information Architecture, Performance Evaluation
Divisions:	Faculty of Engineering & Informatics > Information System
Date Deposited:	09 Jul 2026 07:59
URI:	https://kc.umn.ac.id/id/eprint/47286

Actions (login required)

View Item