Sıralı Test-Tekrar Test Güvenilirliği
Ordinal Test-Retest Reliability Analysis · Ayrıca şöyle bilinir: rank-based test-retest reliability, ordinal temporal consistency, Spearman test-retest reliability, weighted kappa test-retest
Sıralı test-tekrar test güvenilirliği, Likert ölçeği anketleri veya derecelendirme araçları gibi sıralı bir ölçüm aracının, aynı katılımcıları, aralarında istikrarlı bir aralık bulunan iki ayrı uygulamada ne kadar tutarlı bir şekilde sıraladığını veya puanladığını, sıralı kategorik verilere uygun korelasyon ve uyum istatistikleri kullanarak ölçer.
Tam yöntemi oku
Bu bölümü okumak için ücretsiz hesapla giriş yapın.
Yöntem haritası
İlişkili yöntemlerin komşuluğu — keşfetmek için bir düğüm seçin.
Ne zaman kullanılır
Sıralı test-tekrar test güvenilirliğini şu durumlarda kullanın: (1) ölçek Likert tipi veya diğer sıralı kategorik yanıt biçimleri kullanır, (2) değişmeyen koşullar altında puanların zaman içinde stabil olduğuna dair kanıta ihtiyacınız vardır ve (3) altında yatan özelliğin seçilen yeniden test aralığı boyunca teorik olarak stabil olması beklenir. Maddeler sıralı ve dağılımlar çarpıksa standart Pearson tabanlı test-tekrar testi KULLANMAYIN - eşit aralık varsayımı katsayıyı şişirebilir veya bozabilir. Yapısal durum değişkeni gibi olup değişmesi beklenen (örneğin, ruh hali, bugünkü ağrı yoğunluğu) durumlarda test-tekrar testi tek güvenilirlik kanıtı olarak kullanmayın; bu gibi durumlarda iç tutarlılık kanıtı daha uygundur.
Güçlü yönler & sınırlılıklar
- Yalnızca iç tutarlılığın yakalayamadığı zamansal kararlılığı doğrudan değerlendirir.
- Sıra tabanlı istatistikler, ölçümün sıralı düzeyini, yanlış aralık varsayımları dayatmadan saygı duyar.
- Ağırlıklı kappa, erken ölçek geliştirme sırasında kullanışlı olan madde düzeyinde uyum kanıtı sağlar.
- ICC, sistematik ve rastgele hata bileşenlerine ayrıştırmaya izin vererek daha zengin güvenilirlik bilgisi sunar.
- Sonuçlar, yaygın olarak kabul görmüş kıyaslamalarla standartlaştırılmış 0-1 ölçeğinde yorumlanabilir.
- İki veri toplama dalgası gerektirir, bu da katılımcı yükünü, kaybını ve çalışma maliyetini artırır.
- Yeniden test aralığı seçimi doğası gereği keyfidir; çok kısa olması hafıza etkilerini riske atar, çok uzun olması gerçek değişimin tahmini karıştırma riskini taşır.
- İç tutarlılığı veya derecelendiriciler arası uyumu değerlendirmez - diğer güvenilirlik yönleri ayrı olarak değerlendirilmelidir.
- Heterojen örneklemlerdeki stabil özellikler, homojen örneklemlere kıyasla şişirilmiş güvenilirlik tahminleri verecektir, bu da genellenebilirliği sınırlar.
- Çok kısa ölçekler (dörtten az madde) için toplam puan sıra korelasyonları, bireysel madde aykırı değerlerine karşı oldukça hassastır.
SSS
Likert verilerim varsa test-tekrar testi için Pearson korelasyonu kullanabilir miyim?
Uygulamada sıklıkla yapılır, ancak ideal değildir. Pearson korelasyonu, aralık düzeyinde veriler ve normal dağılımlı farklar varsayar; bu varsayımlar Likert maddeleri tarafından sıklıkla ihlal edilir. Spearman rho veya ağırlıklı kappa tercih edilir çünkü verileri sıralı sıralar olarak ele alır ve çarpık veya sınırlı dağılımlara karşı dayanıklıdır.
Ne kadar yeniden test aralığı kullanmalıyım?
Aralık, katılımcıların belirli yanıtlarını hatırlayamayacakları kadar uzun (tipik olarak en az bir hafta) ancak ölçülen yapının gerçekten değişmesi pek olası olmayacak kadar kısa olmalıdır. Stabil kişilik veya tutum özellikleri için iki ila dört hafta yaygındır. Dalgalanan durumlar için test-tekrar test kanıtı daha az anlamlıdır ve bunun yerine iç tutarlılık vurgulanmalıdır.
Spearman rho'nun kabul edilebilir güvenilirliği hangi değer gösterir?
Geleneksel kıyaslamalar alana ve uygulamaya göre değişir. Klinik ve psikometrik araçlar için genellikle 0.80'in üzerindeki değerler iyi zamansal kararlılık olarak kabul edilir. Yüksek riskli kararlar için araştırmacılar sıklıkla 0.90 veya daha yüksek gerektirir. Nokta tahmininin yanında her zaman güven aralıklarını raporlayın.
Ağırlıklı kappayı Spearman rho yerine ne zaman kullanmalıyım?
Ağırlıklı kappa, toplam puanlar yerine bireysel madde düzeyinde (zaman 1'deki her maddenin kategori derecesi vs. zaman 2) uyum analizi yaparken veya ölçeğin çok az sıralı kategorisi olduğunda (örneğin, 3 veya 4 yanıt seçeneği) en uygunudur. Çok sayıda olası değere sahip toplanmış sıralı toplam puanlar için Spearman rho veya ICC daha doğaldır.
Yüksek bir test-tekrar test katsayısı ölçeğimin güvenilir olduğunu kanıtlar mı?
Test-tekrar test güvenilirliği, güvenilirliğin bir yönüdür; ölçeğin zaman içinde stabil puanlar ürettiğini gösterir. Ölçekteki maddelerin iç tutarlılığa sahip olup olmadığını, farklı derecelendiricilerin aynı puanları atayıp atamayacağını veya ölçeğin iddia ettiği şeyi ölçüp ölçmediğini ele almaz. Kapsamlı bir güvenilirlik değerlendirmesi, test-tekrar test kanıtını iç tutarlılık (omega veya alfa) ve uygun olduğunda derecelendiriciler arası uyum ile birleştirir.
Kaynaklar
- Shrout, P. E., & Fleiss, J. L. (1979). Intraclass correlations: Uses in assessing rater reliability. Psychological Bulletin, 86(2), 420–428. DOI: 10.1037/0033-2909.86.2.420 ↗
- Cohen, J. (1968). Weighted kappa: Nominal scale agreement with provision for scaled disagreement or partial credit. Psychological Bulletin, 70(4), 213–220. DOI: 10.1037/h0026256 ↗
Bu sayfayı kaynak gösterin
ScholarGate. (2026, June 3). Ordinal Test-Retest Reliability Analysis. ScholarGate. https://scholargate.app/tr/psychometrics/ordinal-test-retest-reliability
Hangi yöntem?
Bu yöntemi en yakın akrabalarının yanına koyup yan yana okuyun — kütüphane kitapları masaya serer; seçim sizindir.
- Sıralı Güvenilirlik AnaliziPsikometri↔ karşılaştır
- Test-Tekrar GüvenilirliğiPsikometri↔ karşılaştır