Tesis

Validasi Situational Judgement Test Sebagai Salah Satu Instrumen Seleksi Calon Peserta Didik Program Studi Ilmu Penyakit Jantung Dan Pembuluh Darah Fakultas Kedokteran Universitas Indonesia = Validation of Situational Judgement Test As One Of The Instrument in Student Selection in Cardiology and Vascular Medicine Study Program in Faculty of Medicne Universitas Indonesia.

Latar Belakang: Proses pendidikan kedokteran berawal dari seleksi calon peserta didik. Faktor nonakademik, yang meliputi kualitas dan nilai-nilai yang dianut seseorang ternyata dapat mempengaruhi tingkat keberhasilan seseorang, sehingga perlu dinilai sejak awal. Salah satu instrumen uji potensi/ psikometrik yang mampu mengukur hal tersebut adalah situational judgement test (SJT). Hingga saat ini belum ada studi mengenai penggunaan SJT sebagai bagian uji seleksi masuk program pendidikan spesialis di Indonesia. Metode: Penelitian ini merupakan suatu studi validasi butir soal SJT yang mengukur kemampuan nonakademik calon peserta didik pada Prodi IPJPD FKUI. Atribut uji meliputi profesionalisme, komunikasi efektif, dan kepemimpinan. Penelitian bersifat kuantitatif dengan rancangan potong lintang dengan melakukan uji coba terhadap seluruh PPDS Prodi IPJPD FKUI. Analisis dilakukan antara lain dengan mengevaluasi tingkat kesulitan (item difficulty) dan konsistensi internal (internal consistency). Hasil: Validitas isi dilakukan melalui penyelenggaraan rapat ahli dan pemilihan soal untuk diujicobakan terhadap seluruh PPDS Prodi IPJPD FKUI. Sepuluh dari enam puluh soal yang dirapatkan oleh para ahli gagal mencapai kesepakatan sehingga digugurkan. Nilai 50 soal SJT yang diujicobakan terhadap PPDS berdistribusi normal. Indeks kesulitan soal antara 56-88%. Terdapat 22% dari total soal dengan indeks kesulitan melebihi 80%. Rerata capaian PPDS pada atribut profesionalisme sebesar 716,89+3,60 dengan nilai maksimal yang ditargetkan adalah 968, rerata capaian pada atribut komunikasi efektif adalah 302,24+15,41 dengan nilai maksimal yang ditargetkan adalah 408, dan rerata capaian PPDS pada atribut kepemimpinan adalah 644,82+30,71 dengan nilai maksimal yang ditargetkan adalah 868. Rerata nilai SJT PPDS laki-laki lebih tinggi daripada rerata nilai SJT PPDS perempuan (720,57+35,38 vs 711,62+32,14, p > 0,05). Tidak ditemukan pengaruh usia dan tahap pendidikan terhadap nilai total SJT PPDS. Terdapat 17 soal yang tidak berkorelasi signifikan dengan skor total sehingga dinyatakan tidak valid. Tiga puluh tiga soal (66%) dinyakan valid dengan nilai reabilitas (Cronbach Alpha) sebesar 0,809.
Kesimpulan: Tidak adanya perbedaan bermakna pada nilai SJT berdasarkan usia, jenis kelamin, dan tahap pendidikan menunjukkan bahwa SJT bersifat netral (fair). Hal ini penting bagi uji seleksi yang bersifat high stakes. Nilai SJT yang didapat calon peserta didik sebaiknya tidak digunakan sebagai penapis peserta didik tersebut untuk mengikuti pendidikan pada prodi; pertimbangan layak tidaknya seseorang diterima sebagai calon peserta didik memerlukan penilaian ataupun uji lainnya, dengan pertimbangan adanya soal-soal SJT yang tidak bersifat diskriminatif karena memiliki indeks kesulitan melebihi 80%.
Kata Kunci: Proses seleksi, situational judgement test, profesionalisme, komunikasi efektif, kepemimpinan.


Background: Selection is the first assessment in the medical education and training pathway. In addition to the academic ability, the non-academic attributes are also important to be assessed. Situational judgement tests (SJT) provides a reliable method for measuring important non-academic attributes that are important for education and training. To the best of our knowledge, no previous study has explored the use of SJT in postgraduate training selection system in any medical school in Indonesia. Methods: This cross sectional study was to validate the SJT that measure the non-academic attributes in candidates of Cardiology and Vascular Medicine Study Program Postgraduate Training. Specifically, we addressed three non-academic attributes, i.e professionalism, effective communication, and leadership. Pilot testing was done on all current residents of the study program. The SJT item difficulty and internal consistency were analyzed. Results: Content validity was conducted by performing expert review, releasing fifty out of sixty SJT scenarios to be piloted on the residents. SJT  scores were relatively normally distributed. The difficulty index was in the expected range (56-88%). 22% SJT scenarios had difficulty index value above 80%. The mean score on professionalism was 716.89+3.60 (maximal targeted score was 968); the mean score on effective communication was 302.24+15.41 (maximal targeted score was 408); the mean score on leadership was 644.82+30.71 (maximal targeted score was 868). Males outperformed females on the mean SJT score (720.57+35.38 vs 711.62+32.14, p > 0.05). There are no significant differences on SJT scores with respect to residents’ age and their three level of cardiology training. Seventeen out of 50 piloted SJT scenarios had no significant correlation, and thus considered non valid; the rest of the scenarios (66%) were valid with good realibility (Cronbach’s Alpha = 0.809). Conclusion: No statistically significant group differences in performance on SJT based on gender, age, and level of cardiology training showed that SJT was fair. Fairness was essential in any high stakes tests. Concerning that there were some SJT’s scenarios with difficulty index above 80%, we suggested that the SJT not be used as a single instrument in sifting candidates out of the postgraduate training.
Keywords: Student selection, situational judgement test, professionalism, effective communication, leadership