The Effect of Proportion and Position of Anchor Items Toward Test Equating

Abstrak

Penelitian ini menguji bagaimana proporsi dan posisi butir soal mempengaruhi hasil penyetaraan tes, yang merupakan komponen kunci dalam memastikan keadilan dan akurasi dalam penilaian terstandar. Dalam desain eksperimen ini, variabel bebasnya adalah proporsi dan posisi butir soal, dan variabel terikatnya adalah perbedaan absolut dalam parameter kemampuan sebelum dan sesudah proses penyetaraan. Untuk menilai hal ini, kami menganalisis data respons tes dari 1.000 responden, masing-masing menyelesaikan 40 butir soal dari 24 set data, yang dihasilkan melalui simulasi Monte Carlo untuk keandalan. Analisis dilakukan dengan menggunakan analisis rata-rata sel dua faktor, sebuah metode yang mengeksplorasi interaksi antara berbagai faktor yang mempengaruhi hasil penyetaraan. Hasil penelitian menunjukkan bahwa (1) proporsi anchor item yang lebih tinggi meningkatkan akurasi penyetaraan tes, (2) posisi anchor item secara signifikan memengaruhi hasil penyetaraan, dengan posisi di awal menunjukkan akurasi tertinggi, (3) interaksi antara proporsi dan posisi berperan penting dalam meningkatkan hasil penyetaraan, dan (4) posisi anchor item memiliki dampak yang lebih signifikan terhadap akurasi penyetaraan dibandingkan dengan proporsi anchor item.