TY  - THES
KW  - automated writing evaluation
KW  -  keterampilan menulis cerita pendek
KW  -  
model CIPP
KW  -  natural language processing
KW  -  SMK
UR  - http://eprints.uny.ac.id/92379/
TI  - Evaluasi Penerapan Automated Writing Evaluation dalam 
Pembelajaran Menulis Siswa SMK Negeri 1 Parittiga.
Y1  - 2026/07/15/
N2  - Keterlambatan umpan balik dan subjektivitas penilaian sering menjadi 
kendala utama dalam pembelajaran menulis cerita pendek di sekolah kejuruan. 
Penelitian ini bertujuan untuk mengevaluasi penerapan aplikasi Automated Writing 
Evaluation (AWE) berbasis Natural Language Processing (NLP) dalam 
pembelajaran menulis cerita pendek siswa kelas X SMK Negeri 1 Parittiga 
menggunakan Model Evaluasi CIPP (Context, Input, Process, Product).
Penelitian ini menggunakan desain mixed methods sequential explanatory
dengan mengintegrasikan pendekatan kuantitatif dan kualitatif. Subjek penelitian 
adalah 277 siswa kelas X dari delapan rombongan belajar yang mencakup empat
program keahlian (TKJ, DKV, TSM, dan TITL) serta dua guru Bahasa Indonesia. 
Data dikumpulkan melalui wawancara mendalam, angket kepraktisan, angket 
respons dan kepuasan, observasi keterlaksanaan pembelajaran, penilaian validitas 
kriteria oleh dua human expert rater terhadap 30 tulisan sampel, serta analisis data 
penilaian AWE dari 277 tulisan cerpen. Analisis kuantitatif menggunakan paired 
samples t-test, N-Gain, Cohen?s d, Cronbach?s Alpha, korelasi Pearson, dan 
Intraclass Correlation Coefficient (ICC).
Hasil penelitian menunjukkan keberhasilan program AWE pada keempat 
komponen CIPP. Evaluasi konteks mengidentifikasi masalah sistemik pada 
penilaian konvensional, meliputi waktu koreksi 3?5 hari per kelas, umpan balik 
terlambat lebih dari satu minggu, dan rendahnya revisi mandiri siswa, dengan nilai 
rata-rata awal 68,4 (di bawah KKM 75). Evaluasi input membuktikan AWE valid 
dan reliabel secara statistik. Evaluasi proses menunjukkan kepraktisan tinggi dari 
perspektif siswa maupun guru, dengan keterlaksanaan Modul Ajar rata-rata 97,5%. 
Evaluasi produk membuktikan peningkatkan signifikan keterampilan menulis 
cerpen, dengan nilai rata-rata meningkat dari 71,61 menjadi 79,96 dan ketuntasan 
dari 48,0% menjadi 80,1%, disertai effect size kategori sedang hingga besar pada 
seluruh program keahlian. Guru melaporkan efisiensi waktu koreksi meningkat, 
sementara siswa merasa lebih termotivasi berkat umpan balik yang diperoleh secara 
instan.
M1  - tesis
A1  - Inriani, Kethy
A1  - Jaedun, Amat
AV  - restricted
PB  - Sekolah Pascasarjana
ID  - UNY92379
ER  -