Heri Retnawati

Validitas Dan Reliabilitas Konstruk Skor Tes Kemampuan Calon Mahasiswa

Abstract: On the Construct Validity and Reliability of the Candidate Students’ Proficiency Scores. This study aims to prove the construct validity and estimate the construct reliability of the scores gathered from 893 prospective students (applicants) to the same entrance test administered in 2013, 2014, and 2015. The construct validity was evident as shown by confirmatory factor analysis and cross-validation. This was followed with the estimation of its construct reliability. The similarity of reli- abilities was based on analysis using H* test. The study shows that by utilizing cross-validation, con- firmatory factor analysis using data from 2013, 2014, and 2015 produced fit models. The invariance test of factor loading shows that the same value form year to year, but based on the cross-validation, it is on- ly scores from 2013 and 2015 which show the same results. The subtest reliabilities, estimated using construct reliability, w-coefficient, and W-coefficient, resulted in mediocre level, but the maximum reli- ability formula resulted in coefficient of high category. Keywords : construct validity, cross-validation, construct reliability Abstrak: Validitas dan Reliabilitas Konstruk Skor Tes Kemampuan Calon Mahasiswa. Studi ini bertujuan untuk membuktikan validitas konstruk tes pengukur kemampuan awal mahasiswa dan mengestimasi reliabilitas skornya antar waktu. Penelitian ini menggunakan data dokumentasi selama 3 tahun (2013-2015) dari 893 calon mahasiswa yang merespons tes yang sama. Validitas konstruk dibuk- tikan dengan analisis faktor konfirmatori kemudian dilakukan kross validasi, kemudian diestimasi relia- bilitas konstruknya. Kesamaan reliabilitas dianalisis dengan uji H*. Hasil studi menunjukkan bahwa dengan menggunakan krosvalidasi, analisis faktor konfirmatori dengan menggunakan data tahun 2013,2014, dan 2015 menghasilkan model yang fit. Hasil uji invariansi muatan faktor menunjukkan bahwa muatan-muatan faktor bernilai sama antar tahun, namun berdasarkan hasil krosvalidasi model hasilnya sama pada tahun 2013 dan 2015. Reliabilitas subtes yang diestimasi dengan reliabilitas konstruk, relia- bilitas w, menghasilkan koefisien pada level sedang, namun pada reliabilitas maksimal menghasilkan koefisien pada kategori tinggi. Kata kunci : validitas konstruk, krosvalidasi, reliabilitas konstruk

Keberfungsian Butir Diferensial pada Perangkat Tes Seleksi Masuk SLTP Mata Pelajaran Matematika

Penelitian ini bertujuan untuk mengetahui: 1) karakteristik pcrangkat tes; 2) besar kesalahan pengukuran; 3) seberapa banyak butir-butir perangkat tes memuat keberfungsian butir diferensial; 4) metode yang paling sensitif dalam pendeteksian keberfungsian butir diferensial; dan 5) keberfungsian tes diferensial pada perangkat tes seleksi masuk SLTP mata pelajaran matematika. Sasaran penelitian ini adalah perangkat tes seleksi masuk SLTPN di Kota Yogyakarta tahun pelajaran 2002/2003. Pada penelitian ini dipilih perangkat tes dan respons peserta seleksi dari 3 sekolah yakni SLTPN X Yogyakarta, SLTPN Y Yogyakarta, dan SLTPN Z Yogyakarta untuk dianalisis. Untuk mendcteksi DIF pcrangkat tes bcrdasarkan kelompok jenis kelamin siswa, digunakan tiga metode yaitu metode Khi-kuadrat dari Lord, metode Perbandingan Kemungkinan dan metode Mantel-Haenszel. Hasil penelitian menunjukkan bahwa berdasarkan tcori tes klasik, perangkat tes seleksi masuk SLTPN X Yogyakarta memiliki indeks reliabilitasnya 0,683, dan indeks validitas prediktifnya 0,415; perangkat tes seleksi masuk SLTPN Y Yogyakarta memiliki indeks reliabilitasnya 0,546, dan indeks validitas prediktifnya 0,5; perangkat tes seleksi masuk SLTPN Z Yogyakarta memiliki indeks rcliabilitas 0,718, dan indeks validitas prediktifnya -0,064. Berdasarkan teori respons butir, perangkat tes seleksi masuk SLTPN X Yogyakarta mempunyai nilai fungsi informasi 2,751; pcrangkat tes seleksi masuk SLTPN Y Yogyakarta memiliki nilai fungsi informasi sebesar 1,755; perangkat tes seleksi masuk SLTPN Z Yogyakarla memiliki nilai informasi sebesar 3,399. Koefisien kesalahan pengukuran yang paling kecil diperoleh jika digunakan pendekatan leori respons butir dan pendekatan ini nampaknya paling tepat untuk mengetahui karakteristik perangkat tes. Metode Mantel-Haenszel merupakan metode yang paling banyak menghasilkan butir yang memuat DIF, namun belum diketahui besarnya kesalahan dalam pendeteksian DIF. Perangkat tes seleksi masuk SLTPN X Yogyakarta mengandung DTF yang tidak seragam (non-uniform DTF), sedangkan perangkat tes seleksi masuk SLTPN Y dan SLTPN Z Yogyakarta memuat DTF seragam (uniform DTF), yang menguntungkan kelompok perempuan pada seluruh parameter kemampuan peserta tes. Kata Kunci: karakteristik, keberfungsian butir diferensial.