Validitas dan Reliabilitas Pengukuran

Validitas dan reliabilitas adalah dua properti inti yang menentukan apakah suatu ukuran kualitas dapat dipercaya. Validitas berkaitan dengan apakah suatu ukuran benar-benar menangkap aspek kualitas yang diklaimnya; reliabilitas berkaitan dengan apakah ukuran tersebut menghasilkan hasil yang konsisten bila diterapkan berulang kali dalam kondisi yang sama. Suatu ukuran harus reliabel dan valid sebelum hasilnya dapat membenarkan penilaian tentang kualitas atau keputusan untuk bertindak.

Definition

Reliabilitas adalah tingkat di mana suatu ukuran menghasilkan hasil yang konsisten dan dapat direproduksi di seluruh aplikasi berulang, penilai, atau item; validitas adalah tingkat di mana suatu ukuran secara akurat mencerminkan konstruk yang mendasarinya, dalam hal ini aspek kualitas layanan kesehatan, yang dimaksudkan untuk dinilai.

Scope

Entri ini mencakup bentuk-bentuk utama validitas dan reliabilitas sebagaimana berlaku untuk indikator dan instrumen kualitas, statistik yang umum digunakan untuk mengukurnya, dan mengapa kedua properti ini penting untuk pengukuran yang memiliki konsekuensi. Ini adalah referensi metodologis dan tidak memberikan ambang batas penilaian klinis untuk instrumen spesifik apa pun.

Core questions

• Apa artinya suatu ukuran kualitas valid, dan bagaimana validitas dinilai?
• Bagaimana reliabilitas dibedakan dari validitas, dan mengapa keduanya diperlukan?
• Statistik apa yang mengukur konsistensi internal dan kesepakatan antar penilai?
• Bagaimana validitas atau reliabilitas yang buruk menyesatkan penilaian tentang kualitas?

Key concepts

• Validitas isi
• Validitas konstruk
• Validitas kriteria
• Konsistensi internal (alpha Cronbach)
• Reliabilitas antar penilai (kappa Cohen)
• Reliabilitas uji-ulang
• Kesalahan pengukuran dan variasi acak

Key theories

Teori tes klasik tentang reliabilitas

Teori tes klasik membingkai pengukuran yang diamati sebagai jumlah nilai sebenarnya dan kesalahan acak, sehingga reliabilitas adalah proporsi varians yang diamati yang dapat diatribusikan pada perbedaan sebenarnya daripada kesalahan. Koefisien alpha Cronbach mengoperasionalkan salah satu bentuk ini sebagai konsistensi internal antar item yang dimaksudkan untuk mengukur konstruk yang sama.

Mechanisms

Reliabilitas dinilai dengan memeriksa konsistensi pengukuran di seluruh pengulangan: konsistensi internal antar item, kesepakatan antar penilai, dan stabilitas dari waktu ke waktu ketika keadaan yang mendasari tidak berubah. Alpha Cronbach merangkum konsistensi internal untuk skala multi-item, sementara kappa Cohen mengukur kesepakatan antara dua penilai pada penilaian kategoris, mengoreksi kesepakatan kebetulan. Validitas dinilai dengan mengumpulkan bukti bahwa ukuran tersebut mencerminkan konstruk yang dimaksud: validitas isi (cakupan konsep yang komprehensif), validitas konstruk (hubungan yang diharapkan dengan ukuran lain), dan validitas kriteria (kesepakatan dengan standar referensi). Suatu ukuran dapat reliabel namun tidak valid, secara konsisten mengukur hal yang salah, tetapi tidak dapat valid tanpa reliabel, karena kesalahan acak membatasi seberapa baik suatu ukuran dapat melacak targetnya.

Clinical relevance

Sebelum indikator kualitas atau instrumen yang dilaporkan pasien digunakan untuk pelaporan, akreditasi, atau insentif, validitas dan reliabilitasnya harus ditetapkan sehingga perbedaan yang diamati mencerminkan variasi kualitas yang nyata daripada kebisingan pengukuran. Properti ini sangat penting untuk menafsirkan program pengukuran kualitas apa pun. Entri ini menjelaskan properti pengukuran dan bukan merupakan sumber aturan penilaian klinis untuk pasien individu.

Evidence & guidelines

Dasar-dasar statistik berasal dari koefisien alpha Cronbach dan kappa Cohen, dengan panduan terapan untuk pengukuran kesehatan yang dikonsolidasikan dalam teks Streiner dan Norman. Panduan klasifikasi indikator menempatkan properti ini dalam pengukuran kualitas. Sumber-sumber ini dikutip untuk konten metodologisnya dan bukan merupakan arahan klinis.

History

Konsep validitas dan reliabilitas diformalkan dalam psikometri pada pertengahan abad kedua puluh, dengan alpha Cronbach tahun 1951 dan kappa Cohen tahun 1960 menjadi alat standar. Ketika layanan kesehatan mengadopsi instrumen yang dilaporkan pasien dan indikator kualitas, prinsip-prinsip psikometrik ini dibawa ke pengukuran layanan kesehatan dan dikodifikasi dalam panduan praktis seperti Streiner dan Norman.

Debates

Apakah alpha Cronbach merupakan ukuran reliabilitas yang memadai?

Alpha banyak dilaporkan tetapi bergantung pada jumlah item dan mengasumsikan dimensi tunggal yang mendasari; alpha yang tinggi dapat mencerminkan redundansi daripada pengukuran yang baik, dan itu tidak menetapkan unidimensionalitas atau validitas, mendorong seruan untuk bukti pelengkap.

Key figures

• Lee Cronbach
• Jacob Cohen
• David Streiner
• Geoffrey Norman

Seminal works

• cronbach-1951
• cohen-1960
• streiner-norman-2015

Frequently asked questions

Bisakah suatu ukuran reliabel tetapi tidak valid?

Ya. Suatu ukuran dapat memberikan hasil yang sangat konsisten sambil secara konsisten menangkap hal yang salah. Reliabilitas diperlukan untuk validitas tetapi tidak menjaminnya; suatu ukuran juga harus ditunjukkan untuk mencerminkan konstruk yang diklaimnya untuk dinilai.

Mengapa mengoreksi kebetulan saat menilai kesepakatan antar penilai?

Dua penilai akan setuju kadang-kadang murni karena kebetulan, terutama dengan sedikit kategori. Kappa Cohen menyesuaikan kesepakatan yang diamati untuk kesepakatan yang diharapkan secara kebetulan, memberikan perkiraan reliabilitas sejati yang lebih jujur.