Sağlam İçerik Geçerliliği Değerlendirmesi
Robust Content Validity Assessment · Ayrıca şöyle bilinir: robust CVR, outlier-resistant content validity, robust content validity index, robust expert-panel validation
Sağlam içerik geçerliliği değerlendirmesi, içerik geçerlilik çalışmalarında uzman panel oylamalarının toplanmasına aykırı değerlere dirençli istatistiksel yöntemler uygular. Aykırı veya aşırı uzman yargılarını tespit edip ağırlıklarını azaltarak, bir veya birkaç uzmanın gruptan keskin bir şekilde ayrıldığı durumlarda, standart ortalamadan daha doğru bir şekilde panelin fikir birliğini yansıtan İçerik Geçerlilik Oranı (CVR) ve İçerik Geçerlilik İndeksi (CVI) tahminleri üretir.
Tam yöntemi oku
Bu bölümü okumak için ücretsiz hesapla giriş yapın.
Yöntem haritası
İlişkili yöntemlerin komşuluğu — keşfetmek için bir düğüm seçin.
Ne zaman kullanılır
Uzman paneller heterojen olduğunda - örneğin, panelistler farklı mesleki geçmişlerden veya alt disiplinlerden geldiğinde ve bir veya daha fazlası uygunluk için belirgin şekilde farklı standartlara sahip olabileceğinde - sağlam içerik geçerliliği kullanın. Panel küçük olduğunda (beş ila sekiz uzman) ve tek bir aykırı uzmanın standart CVR/CVI değerleri üzerinde orantısız bir etkisi olduğunda da tavsiye edilir. Sağlam toplama, özellikle çapraz kültürel içerik geçerliliğinde uygundur, burada bir kültürel grubun uzmanları diğerlerinden sistematik olarak farklı olabilir. Sağlam içerik geçerliliğini dikkatli uzman seçimine bir ikame olarak kullanmayın: eğer uzmanların çoğu yapıya uygun değilse, hiçbir toplama yöntemi telafi edemez. Ayrıca, tüm uzmanlar yüksek derecede değerlendiriciler arası uyum gösterdiğinde gereksizdir, çünkü bu durumda standart ve sağlam endeksler neredeyse aynı sonuçları verecektir.
Güçlü yönler & sınırlılıklar
- Aykırı veya uyumsuz uzman değerlendiricilerin CVR ve CVI tahminleri üzerindeki bozucu etkisini azaltır, panel fikir birliğini daha iyi yansıtan endeksler üretir.
- Tanıdık CVR ve CVI çerçevesini ve eşiklerini korur, böylece sağlam ve standart sonuçlar hassasiyet kontrolü olarak doğrudan karşılaştırılabilir.
- Aykırı uzmanları keyfi olarak dışlamak veya üzerlerinden sessizce ortalama almak yerine ağırlıklarını azaltmak için şeffaf, belgelenmiş bir temel sağlar.
- Özellikle küçük panellerde, tek bir sapkın uzmanın oyların büyük bir kısmını oluşturduğu durumlarda değerlidir.
- Herhangi bir uzman panel tabanlı içerik geçerlilik bağlamına uygulanabilir - psikolojik ölçekler, sağlık sonuçları araçları, eğitim testleri ve iş analizi envanterleri.
- Aykırı değer tespit kriteri ve ağırlıklandırma şeması, sonuçları incelemeden önce seçilmeli ve gerekçelendirilmelidir; en uygun endeksleri üreten yöntemin sonradan seçimi, seçici davranmanın bir biçimidir.
- Sağlam toplama, aykırı uzmanların amaçlanan uzman fikir birliğine göre anomali olduğunu varsayar; eğer aykırı değer aslında en alan-doğru uzman ise, ağırlıklandırma ters etki yapar.
- Sağlam CVR/CVI için yazılım standart psikometrik paketlere entegre değildir; araştırmacılar R veya Python'da ağırlıklandırma algoritmalarını uygulamalıdır.
- Tüm panel boyunca sistematik ortak yanlılığı ele almaz - eğer tüm uzmanlar yapı hakkında bir yanlış anlama paylaşıyorsa, sağlam yöntemler bunu tespit edemez.
SSS
Sağlam içerik geçerliliği, standart içerik geçerliliğinden nasıl farklıdır?
Standart CVR ve CVI, her uzmana eşit etki veren, uzman oylarının ağırlıksız ortalamalarını veya oranlarını hesaplar. Sağlam içerik geçerliliği, genel oylama örüntüsü panele göre aykırı olan uzmanları tespit eder ve katkılarını azaltır, böylece tek bir sapkın uzman tüm madde endekslerini orantısız bir şekilde şişirmez veya azaltmaz. Tüm uzmanlar makul ölçüde uyumlu olduğunda, iki yaklaşım aynı sonuçları verir.
Aykırı uzmanları dışlamalı mıyım yoksa sadece ağırlıklarını mı azaltmalıyım?
Ağırlıklandırma genellikle dışlamadan daha iyidir, çünkü aykırı bir uzman, genel ciddiyeti çoğunluktan farklı olsa bile gerçek alan bilgisi taşıyabilir. Kesin dışlama, bir uzmanın görevi açıkça anlamadığı durumlar için saklanmalıdır (örneğin, derecelendirme ölçeğini yanlış okumak). Yaklaşımdan bağımsız olarak, karar kuralı önceden belirlenmeli ve şeffaf bir şekilde raporlanmalıdır.
Aykırı uzman ne olarak kabul edilir?
Yaygın bir kriter, uzmanın ortalama oyu için (tüm maddeler üzerinden ortalama alınmış) z-skorunun, yayılım için daha dirençli bir ölçüm olarak standart sapma veya medyan mutlak sapma kullanılarak hesaplanan |z| = 2'yi aşmasıdır. Tüm oylama matrisine uygulanan Mahalanobis uzaklığı, maddeler arasındaki oyların kovaryans yapısını hesaba katan çok değişkenli bir alternatiftir. Seçilen kriter yöntemler bölümünde belirtilmelidir.
SPSS veya SAS gibi yazılımlarda sağlam CVR/CVI kullanabilir miyim?
Standart psikometrik paketler, sağlam uzman oylama toplama işlemini yerel olarak uygulamaz. Araştırmacılar tipik olarak R'de (temel fonksiyonları veya robustbase paketini kullanarak) aykırı değer işaretlerini ve ağırlıklarını hesaplar ve ardından ağırlıklı CVR/CVI formüllerini manuel olarak veya özel komut dosyaları aracılığıyla uygular. StatWise bu iş akışını otomatikleştirir.
Sağlam içerik geçerliliği, CVR ve CVI için önerilen eşikleri değiştirir mi?
Geleneksel eşikler - Lawshe'nin tablosundan CVR anlamlılık değerleri, altı veya daha fazla panel için I-CVI >= 0.78 ve S-CVI/Ave >= 0.90 - sağlam endekslere de aynı şekilde uygulanır, çünkü sağlam değerler aynı ölçekte ve aynı yönlü yoruma sahiptir. Ancak, araştırmacılar klasik (ağırlıksız) istatistiklerden türetilen eşik tablolarının ağırlıklı varyantlar için özel olarak doğrulanmamış olabileceğini unutmalıdır.
Kaynaklar
- Lawshe, C. H. (1975). A quantitative approach to content validity. Personnel Psychology, 28(4), 563–575. link ↗
- Wilcox, R. R. (2012). Introduction to Robust Estimation and Hypothesis Testing (3rd ed.). Academic Press. ISBN: 978-0123869838
Bu sayfayı kaynak gösterin
ScholarGate. (2026, June 3). Robust Content Validity Assessment. ScholarGate. https://scholargate.app/tr/psychometrics/robust-content-validity
Hangi yöntem?
Bu yöntemi en yakın akrabalarının yanına koyup yan yana okuyun — kütüphane kitapları masaya serer; seçim sizindir.
- Yapısal GeçerlikPsikometri↔ karşılaştır
- Kapsam GeçerliliğiPsikometri↔ karşılaştır
- Yakınsak GeçerlilikPsikometri↔ karşılaştır
- Ayrışım GeçerliliğiPsikometri↔ karşılaştır
- Sağlam Madde AnaliziPsikometri↔ karşılaştır
- Ölçek GeliştirmePsikometri↔ karşılaştır