Workshop Item Development and Review UKDI
-
Upload
muhammad-khotibuddin -
Category
Documents
-
view
253 -
download
3
Transcript of Workshop Item Development and Review UKDI
![Page 1: Workshop Item Development and Review UKDI](https://reader035.fdocuments.us/reader035/viewer/2022062513/5571fa214979599169915aec/html5/thumbnails/1.jpg)
Item Development and Review Workshop
Divisi Ujian Tulis
Komite Bersama
Uji Kompetensi Dokter IndonesiaBandung, 15 Maret 2008
![Page 2: Workshop Item Development and Review UKDI](https://reader035.fdocuments.us/reader035/viewer/2022062513/5571fa214979599169915aec/html5/thumbnails/2.jpg)
Tahap Penjaminan Mutu UKDI
InputInputProcessProcess
OutputOutput
1. Blueprinting
2. Item Writer Standard
3. Item Reviewer Standard
4. ICT support
1. Review Process
2. Try-out
3. Examination guideline
4. Report on Examination
5. Feedback process.
6. Item Bank
• Criterion-reference.
• Standard setting exercise
![Page 3: Workshop Item Development and Review UKDI](https://reader035.fdocuments.us/reader035/viewer/2022062513/5571fa214979599169915aec/html5/thumbnails/3.jpg)
Aspek Review ?
![Page 4: Workshop Item Development and Review UKDI](https://reader035.fdocuments.us/reader035/viewer/2022062513/5571fa214979599169915aec/html5/thumbnails/4.jpg)
Aspek Review
• Isi
• Struktur
![Page 5: Workshop Item Development and Review UKDI](https://reader035.fdocuments.us/reader035/viewer/2022062513/5571fa214979599169915aec/html5/thumbnails/5.jpg)
Contoh Kasus 1: isi?
Seorang pria 20 tahun, sehat, sebelumnya masuk perawatan rumah sakit dengan keluhan nyeri mendadak pada dada sebelah kiri, ECG normal, foto paru-paru terlihat pneumotorak.Prosedur apa yang akan anda lakukan : A. Observasi. B. Barium meal. C. Torakotomi. D. Torakostomi. E. Torakostomi + intubasi.
![Page 6: Workshop Item Development and Review UKDI](https://reader035.fdocuments.us/reader035/viewer/2022062513/5571fa214979599169915aec/html5/thumbnails/6.jpg)
SKDI
• Pneumothoraks (3a dan 3b)
• 3b. Mampu membuat diagnosis klinik berdasarkan pemeriksaan fisik dan pemeriksaanpemeriksaan tambahan yang diminta oleh dokter (misalnya : pemeriksaan laboratorium sederhana atau X-ray). Dokter dapat memutuskan dan memberi terapi pendahuluan, serta merujuk ke spesialis yang relevan (kasus gawat darurat).
Torakotomi, torakostomi tidak ada dalam list keterampilan dokter umum.
![Page 7: Workshop Item Development and Review UKDI](https://reader035.fdocuments.us/reader035/viewer/2022062513/5571fa214979599169915aec/html5/thumbnails/7.jpg)
Lesson Learnt pada isi
• Apakah secara isi, topik soal yang ditanyakan esensial?
• Rujukan: Standard Kompetensi Dokter Indonesia (SKDI) dan blueprinting UKDI.
![Page 8: Workshop Item Development and Review UKDI](https://reader035.fdocuments.us/reader035/viewer/2022062513/5571fa214979599169915aec/html5/thumbnails/8.jpg)
Bagan Alir Proses ReviewSoal baru
Scanning isi soal terkait topik soal
DikembalikanTidak esensial
Review struktur
Ese
nsia
l
![Page 9: Workshop Item Development and Review UKDI](https://reader035.fdocuments.us/reader035/viewer/2022062513/5571fa214979599169915aec/html5/thumbnails/9.jpg)
Struktur?
![Page 10: Workshop Item Development and Review UKDI](https://reader035.fdocuments.us/reader035/viewer/2022062513/5571fa214979599169915aec/html5/thumbnails/10.jpg)
Struktur
• Vignette
• Lead in
• Option
![Page 11: Workshop Item Development and Review UKDI](https://reader035.fdocuments.us/reader035/viewer/2022062513/5571fa214979599169915aec/html5/thumbnails/11.jpg)
Bagan Alir Proses ReviewSoal baru
Scanning isi soal terkait topik soal
DikembalikanTidak esensial
Review struktur
Ese
nsia
l
Vignette
![Page 12: Workshop Item Development and Review UKDI](https://reader035.fdocuments.us/reader035/viewer/2022062513/5571fa214979599169915aec/html5/thumbnails/12.jpg)
Contoh Kasus 2: vignette?
Seorang laki-laki berusia 55 tahun datang dengan nyeri dada kiri yang hebat sejak 2 jam yang lalu saat sedang senam pagi. Nyeri dirasakan menjalar ke lengan kiri, tidak hilang dengan istirahat. Pasien adalah perokok berat. Kakak tertua meninggal mendadak 2 tahun yang lalu saat latihan tenis.
Apakah pemeriksaan yang paling tepat saudara minta untuk memastikan diagnosis pasien di atas?
A. Foto thorax dan EKG
B. Echocardiografi dan EKG
C. Echocardiografi dan enzim CPK
D. EKG dan enzim CPK
E. Foto thorax dan Echocardiografi
![Page 13: Workshop Item Development and Review UKDI](https://reader035.fdocuments.us/reader035/viewer/2022062513/5571fa214979599169915aec/html5/thumbnails/13.jpg)
Komponen Vignette
– Jenis kelamin, Umur (e.g. laki-laki 45 tahun)a. Kasus spesifik wanita kehamilanb. Kasus anak-anak, dewasa, geriatri?
- Tempat pelayanan/setting (IGD)- Keluhan Utama- Durasi- Gejala penyerta dan keterangan pasien lainnya- Pemeriksaan fisik- Pemeriksaan penunjang
![Page 14: Workshop Item Development and Review UKDI](https://reader035.fdocuments.us/reader035/viewer/2022062513/5571fa214979599169915aec/html5/thumbnails/14.jpg)
Lesson learnt pada vignette
- Bahasa yang digunakan pada vignette
- Vignette terlalu pendek (tidak lengkap), atau terlalu panjang (tidak terkait logika option).
- Urutan vignette tidak sistematik (HT, PD, HT, PD, PP).
![Page 15: Workshop Item Development and Review UKDI](https://reader035.fdocuments.us/reader035/viewer/2022062513/5571fa214979599169915aec/html5/thumbnails/15.jpg)
Next step?
![Page 16: Workshop Item Development and Review UKDI](https://reader035.fdocuments.us/reader035/viewer/2022062513/5571fa214979599169915aec/html5/thumbnails/16.jpg)
Bagan Alir Proses ReviewSoal baru
Scanning isi soal terkait topik soal
DikembalikanTidak esensial
Review struktur
Ese
nsia
l
Vignette
Lead-in
![Page 17: Workshop Item Development and Review UKDI](https://reader035.fdocuments.us/reader035/viewer/2022062513/5571fa214979599169915aec/html5/thumbnails/17.jpg)
Kasus 3: Lead in?
Seorang wanita umur 30 tahun mengeluh ada benjolan sebesar 1,5 cm dibawah telinga kanan yang diderita selama 4 tahun. Pada pemeriksaan, lesinya padat dan keras, dapat digerakkan, N.VII, fungsi baik, tidak teraba pembesaran kelenjar getah bening. Diagnosisnya kasus ini adalah : A. Kistoadenoma limfomatosum (Warthin tumor). B. Karsinoma Muko-epidermoid tahap awal.
C. Tumor campur jinak. D. Tumor campur ganas.E. Adenokarsinoma sel asinar.
![Page 18: Workshop Item Development and Review UKDI](https://reader035.fdocuments.us/reader035/viewer/2022062513/5571fa214979599169915aec/html5/thumbnails/18.jpg)
Lesson learnt pada Lead-in
• Menggunakan kata tanya secara langsung, sehingga dapat memenuhi “close the option rule”
![Page 19: Workshop Item Development and Review UKDI](https://reader035.fdocuments.us/reader035/viewer/2022062513/5571fa214979599169915aec/html5/thumbnails/19.jpg)
Next step?
![Page 20: Workshop Item Development and Review UKDI](https://reader035.fdocuments.us/reader035/viewer/2022062513/5571fa214979599169915aec/html5/thumbnails/20.jpg)
Bagan Alir Proses ReviewSoal baru
Scanning isi soal terkait topik soal
DikembalikanTidak esensial
Review struktur
Ese
nsia
l
Vignette
Lead-in
Option
![Page 21: Workshop Item Development and Review UKDI](https://reader035.fdocuments.us/reader035/viewer/2022062513/5571fa214979599169915aec/html5/thumbnails/21.jpg)
Kasus 4: Option?
Seorang pria, berusia 60 tahun, dibawa ke bagian gawat darurat oleh seorang polisi, yang menemukannya dalam keadaan tergeletak tidak sadarkan diri di sisi jalan. Setelah memastikan bahwa saluran pernafasan dalam keadaan tidak tersumbat, langkah pertama dalam manajemen adalah administrasi intravena:
A. pemeriksaan cairan serebrospinal
B. glukosa dengan vitamin B1 (thiamine)
C. CT scan kepala
D. fenitoin
E. diazepam
![Page 22: Workshop Item Development and Review UKDI](https://reader035.fdocuments.us/reader035/viewer/2022062513/5571fa214979599169915aec/html5/thumbnails/22.jpg)
Lesson learnt pada Option
• Homogen: gramatikal, semantik, panjang-pendek.
• Hindari absolutisme: selalu, tidak pernah.• Hindari konvergensi.• Hindari kesamaan istilah dengan vignette.• Hindari urutan yang tidak sistematis
menyulitkan.• Hindari kalimat: bukan salah satu
di atas
![Page 23: Workshop Item Development and Review UKDI](https://reader035.fdocuments.us/reader035/viewer/2022062513/5571fa214979599169915aec/html5/thumbnails/23.jpg)
Bagan Alir Proses ReviewSoal baru
Scanning isi soal terkait topik soal
DikembalikanTidak esensial
Review struktur
Ese
nsia
l
Vignette
Lead-in
Option
![Page 24: Workshop Item Development and Review UKDI](https://reader035.fdocuments.us/reader035/viewer/2022062513/5571fa214979599169915aec/html5/thumbnails/24.jpg)
Checkpoint
• Bagaimanakah step mereview soal?
![Page 25: Workshop Item Development and Review UKDI](https://reader035.fdocuments.us/reader035/viewer/2022062513/5571fa214979599169915aec/html5/thumbnails/25.jpg)
Apa saja yang perlu ditelaah ?
• Materi :– Relevansi: Kongruensi– Bahasa– Tingkat kesulitan (tingkat kompetensi)– Klasifikasi : e.g. Dasar atau klinik?
![Page 26: Workshop Item Development and Review UKDI](https://reader035.fdocuments.us/reader035/viewer/2022062513/5571fa214979599169915aec/html5/thumbnails/26.jpg)
Apa saja yang perlu ditelaah ?
• Struktur :– Stem– Lead in– Option
• Kesimpulan – Komentar umum dan saran– Diterima/revisi/dikembalikan
![Page 27: Workshop Item Development and Review UKDI](https://reader035.fdocuments.us/reader035/viewer/2022062513/5571fa214979599169915aec/html5/thumbnails/27.jpg)
Struktur Soal : Item Flaws• Grammatical Cues ( ) Ya ( ) Tidak• Logical Cues ( ) Ya ( ) Tidak• Istilah yang absolut ( ) Ya ( ) Tidak• Jawaban benar yang panjang ( ) Ya ( ) Tidak• Pengulangan kata dari badan
soal ke jawaban ( ) Ya ( ) Tidak• Konvergensi soal ( ) Ya ( ) Tidak• Pilihan jawaban yang panjang,
kompleks, atau duplikasi ( ) Ya ( ) Tidak
![Page 28: Workshop Item Development and Review UKDI](https://reader035.fdocuments.us/reader035/viewer/2022062513/5571fa214979599169915aec/html5/thumbnails/28.jpg)
• Pilihan yang berupa angka tidak diurut sesuai dengan besarnya ( ) Ya ( ) Tidak
• Pilihan yang mengandung unsur frekuensi suatu kejadian bersifat multi interpretasi ( ) Ya ( ) Tidak
• Pilihan jawaban tidak paralel dan urutan tidak logis ( ) Ya ( ) Tidak
• Penggunaan BSSD (bukan salah satu di atas pada pilihan jawaban) ( ) Ya ( ) Tidak
• Badan soal terlalu panjang, sulit, dan kompleks ( ) Ya ( ) Tidak
![Page 29: Workshop Item Development and Review UKDI](https://reader035.fdocuments.us/reader035/viewer/2022062513/5571fa214979599169915aec/html5/thumbnails/29.jpg)
Komentar Umum Reviewer
ID Soal :
Kesimpulan Hasil Review
( ) Diterima tanpa perbaikan( ) Diterima dengan perbaikan
( ) Perlu konfirmasi pembuat soal( ) Tidak perlu konfirmasi dengan
pembuat soal( ) Dikembalikan kepada pembuat soal
( ) memerlukan perbaikan keseluruhan
( ) Berpotensi diterima dengan perbaikan
![Page 30: Workshop Item Development and Review UKDI](https://reader035.fdocuments.us/reader035/viewer/2022062513/5571fa214979599169915aec/html5/thumbnails/30.jpg)
Saran Perbaikan
Tanggal:
(DD) / (MM) / (YY)
Nama Jelas :
Tanda Tangan Reviewer
![Page 31: Workshop Item Development and Review UKDI](https://reader035.fdocuments.us/reader035/viewer/2022062513/5571fa214979599169915aec/html5/thumbnails/31.jpg)
ExerciseSeorang mahasiswa pria, 25 tahun datang ke rumah sakit dengan keluhan panas badan sejak 2 minggu yang lalu yang mulai secara gradual dan berlangsung remiten. BAB mencret lebih kurang 2 kali sehari. Pada pemeriksaan fisik ditemukan keadaan umum yang sakit sedang, apatis, hepatomegali 2 jari dibawah arcus costae. Hb 14,2 gr/dL, leukosit 4200 /mm3, trombosit 172000/mm3.
Pertanyaan: Apa tindakan diagnosis yang akan anda lakukan pada pasien ini?Pilihan jawaban:
A. Pemeriksaan Hemaglutinasi test untuk dengueB. Pemeriksaan Widal I dan II, Kultur darah dan feses untuk salmonelaC. Pemeriksaan Widal I dan II.D. Pemeriksaan apus tebal darah untuk malaria/ DDRE. Feses rutin dan kultur
![Page 32: Workshop Item Development and Review UKDI](https://reader035.fdocuments.us/reader035/viewer/2022062513/5571fa214979599169915aec/html5/thumbnails/32.jpg)
Komentar
![Page 33: Workshop Item Development and Review UKDI](https://reader035.fdocuments.us/reader035/viewer/2022062513/5571fa214979599169915aec/html5/thumbnails/33.jpg)
Alasan penolakan
• Isi tidak esensial
• Isi terlalu spesialistis.
• Isi tidak realistis, terlalu teoritis (status gizi tanpa tabel tumbuh kembang).
• Tidak ada vignette.
• Vignette tidak berfungsi
![Page 34: Workshop Item Development and Review UKDI](https://reader035.fdocuments.us/reader035/viewer/2022062513/5571fa214979599169915aec/html5/thumbnails/34.jpg)
Next step?
Bekerja dalam kelompok untuk mereview soal-soal menggunakan formulir review yang ada.
![Page 35: Workshop Item Development and Review UKDI](https://reader035.fdocuments.us/reader035/viewer/2022062513/5571fa214979599169915aec/html5/thumbnails/35.jpg)
• Feedback terhadap pembuat soal?