Lumbung Pustaka UNYEvaluasi Penerapan Automated Writing Evaluation dalam Pembelajaran Menulis Siswa SMK Negeri 1 Parittiga.KethyInrianiauthorAmatJaedunauthorKeterlambatan umpan balik dan subjektivitas penilaian sering menjadi kendala utama dalam pembelajaran menulis cerita pendek di sekolah kejuruan. Penelitian ini bertujuan untuk mengevaluasi penerapan aplikasi Automated Writing Evaluation (AWE) berbasis Natural Language Processing (NLP) dalam pembelajaran menulis cerita pendek siswa kelas X SMK Negeri 1 Parittiga menggunakan Model Evaluasi CIPP (Context, Input, Process, Product). Penelitian ini menggunakan desain mixed methods sequential explanatory dengan mengintegrasikan pendekatan kuantitatif dan kualitatif. Subjek penelitian adalah 277 siswa kelas X dari delapan rombongan belajar yang mencakup empat program keahlian (TKJ, DKV, TSM, dan TITL) serta dua guru Bahasa Indonesia. Data dikumpulkan melalui wawancara mendalam, angket kepraktisan, angket respons dan kepuasan, observasi keterlaksanaan pembelajaran, penilaian validitas kriteria oleh dua human expert rater terhadap 30 tulisan sampel, serta analisis data penilaian AWE dari 277 tulisan cerpen. Analisis kuantitatif menggunakan paired samples t-test, N-Gain, Cohen’s d, Cronbach’s Alpha, korelasi Pearson, dan Intraclass Correlation Coefficient (ICC). Hasil penelitian menunjukkan keberhasilan program AWE pada keempat komponen CIPP. Evaluasi konteks mengidentifikasi masalah sistemik pada penilaian konvensional, meliputi waktu koreksi 3–5 hari per kelas, umpan balik terlambat lebih dari satu minggu, dan rendahnya revisi mandiri siswa, dengan nilai rata-rata awal 68,4 (di bawah KKM 75). Evaluasi input membuktikan AWE valid dan reliabel secara statistik. Evaluasi proses menunjukkan kepraktisan tinggi dari perspektif siswa maupun guru, dengan keterlaksanaan Modul Ajar rata-rata 97,5%. Evaluasi produk membuktikan peningkatkan signifikan keterampilan menulis cerpen, dengan nilai rata-rata meningkat dari 71,61 menjadi 79,96 dan ketuntasan dari 48,0% menjadi 80,1%, disertai effect size kategori sedang hingga besar pada seluruh program keahlian. Guru melaporkan efisiensi waktu koreksi meningkat, sementara siswa merasa lebih termotivasi berkat umpan balik yang diperoleh secara instan.Pendidikan KejuruanKurikulum dan Teknologi PendidikanEvaluasi Pendidikan2026-07-15Sekolah Pascasarjana;Penelitian dan Evaluasi PendidikanThesis

For work being deposited by its own author: In self-archiving this collection of files and associated bibliographic metadata, I grant Lumbung Pustaka UNY the right to store them and to make them permanently available publicly for free on-line. I declare that this material is my own intellectual property and I understand that Lumbung Pustaka UNY does not assume any responsibility if there is any breach of copyright in distributing these files or metadata. (All authors are urged to prominently assert their copyright on the title page of their work.)

For work being deposited by someone other than its author: I hereby declare that the collection of files and associated bibliographic metadata that I am archiving at Lumbung Pustaka UNY) is in the public domain. If this is not the case, I accept full responsibility for any breach of copyright that distributing these files or metadata may entail.

Clicking on the deposit button indicates your agreement to these terms.