Bilgisayarlı Uyarlanabilir Test için McDonald's Omega
Computerized Adaptive Test McDonald's Omega · Ayrıca şöyle bilinir: CAT omega reliability, omega in adaptive testing, hierarchical omega for CAT, CAT composite reliability
Bilgisayarlı uyarlanabilir testler (CAT) için uyarlanan McDonald's omega, farklı adayların farklı madde alt kümelerine yanıt verdiği durumlarda yetenek veya özellik tahminlerinin güvenilirliğini ölçer. Cronbach'ın alfası'nın aksine omega, bir faktör modeline dayanır ve bu da onu uyarlanabilir uygulamaların karakteristiği olan heterojen madde havuzları ve değişken test uzunlukları için uygun hale getirir.
Tam yöntemi oku
Bu bölümü okumak için ücretsiz hesapla giriş yapın.
Yöntem haritası
İlişkili yöntemlerin komşuluğu — keşfetmek için bir düğüm seçin.
Ne zaman kullanılır
Bilgisayarlı bir uyarlanabilir test tarafından üretilen puanlar için modele dayalı bir güvenilirlik indeksi gerektiğinde, özellikle madde havuzu farklı faktör yüklemelerine sahip maddeler içeriyorsa veya test değişken uygulama uzunluğuna izin veriyorsa CAT McDonald's omegayı kullanın. Bu bağlamda Cronbach'ın alfasından daha uygundur çünkü alfa, tau-eşdeğerliği (eşit yüklemeler) gerektirir — bu varsayım uyarlanabilir havuzlarda rutin olarak ihlal edilir. Test sabit formluysa (standart omega veya alfa yeterlidir), uyarlanmamış bir örneklemden madde havuzu kalibrasyon verileri eksikse veya CAT tamamen IRT ile tahmin edilen bir theta kullanıyorsa ve klasik veya faktör analitik bir temel yoksa (IRT'den marjinal güvenilirlik orada daha doğaldır) bu yöntemi kullanmayın.
Güçlü yönler & sınırlılıklar
- Tau-eşdeğerliği varsayımından ziyade bir faktör modeline dayanır, bu da onu heterojen CAT madde havuzları için alfadan daha uygun hale getirir.
- IRT kalibrasyon parametrelerinden hesaplanabilir, çoğu CAT motorunun temelini oluşturan IRT çerçevesiyle doğal olarak bütünleşir.
- Sabit formlu ve uyarlanabilir test puanları arasında karşılaştırılabilir tek bir yorumlanabilir güvenilirlik katsayısı sağlar.
- Bifaktör uzantısı aracılığıyla genel ve özel faktör varyansı arasındaki ayrımcılığa duyarlıdır, bu da çok boyutlu CAT'ler için nüanslı güvenilirlik raporlamasına olanak tanır.
- Hiyerarşik bir madde havuzu yapısı mevcut olduğunda hem toplam puan hem de alt ölçek güvenilirliğinin raporlanmasını destekler.
- Yeterince büyük ve temsili bir kalibrasyon örneğinden elde edilen parametre tahminleriyle iyi kalibre edilmiş bir madde havuzu gerektirir — bu, ilk CAT dağıtımında her zaman mevcut değildir.
- IRT-faktör yüklemesi dönüşümü normal-ogive IRT modelini varsayar; kalibrasyon modeli ile dönüşüm formülü arasındaki uyumsuzluk omega'yı yanlı hale getirebilir.
- Doğrudan uyarlanabilir madde seçim mekanizmasının kendisini hesaba katmaz; madde seçim algoritmalarının puan varyansı üzerindeki etkisini yansıtmak yerine havuz parametrelerini sabit olarak ele alır.
- CAT sonlandırma kuralları oldukça değişken test uzunlukları ürettiğinde, güvenilirlik adaylar arasında farklılık gösterir ve tek bir havuz düzeyindeki omega bu değişkenliği maskeler.
SSS
Neden CAT için sadece Cronbach'ın alfasını kullanmıyorsunuz?
Cronbach'ın alfa'sı, tüm maddelerin eşit faktör yüklemelerine (tau-eşdeğerliği) sahip olduğunu varsayar ve paylaşılan bir madde kümesi üzerinde hesaplanır — maddelerin ayrımcılığının değiştiği ve her adayın farklı bir alt küme yanıtladığı bir CAT'de bu koşullardan hiçbiri geçerli değildir. Omega, eşit yükleme varsayımını gevşetir ve kalibrasyon verilerinden havuz düzeyinde hesaplandığında, o havuzdan elde edilen tüm uyarlanabilir puanlara uygulanan bir güvenilirlik tahmini sağlar.
Bir CAT ayarında omega için gereken faktör yüklemelerini nasıl elde ederim?
En yaygın yaklaşım, tüm madde havuzunun (veya temsili büyük bir alt kümenin) bir kalibrasyon örneğine uygulandığı ve ardından bir CFA veya bifaktör modeli uydurulduğu uyarlanmamış bir kalibrasyon çalışması çalıştırmaktır. Alternatif olarak, kalibrasyondan elde edilen IRT ayrımcılık parametreleri (a), normal-ogive modeli altında lambda = a / sqrt(1 + a^2) kullanılarak yüklere dönüştürülebilir, ardından bunlar omega formülüne yerleştirilebilir.
Omega, IRT'deki marjinal güvenilirlikle aynı mı?
Aynı miktarı — gizli özellikten kaynaklanan puan varyansının oranı — hedeflerler, ancak farklı çerçevelerden gelirler. Marjinal güvenilirlik, test bilgi fonksiyonunu yetenek dağılımı üzerinden entegre eder; omega faktör modeli yüklemelerini kullanır. İyi uyan tek boyutlu IRT modellerinde iki tahmin genellikle yakındır, ancak cebirsel olarak eşdeğer değildirler ve model uyumu kusurlu olduğunda farklılık gösterebilirler.
Tüm CAT için tek bir omega değeri mi yoksa ayrı değerler mi raporlamalıyım?
Adaylar arasında uyarlanabilir test uzunluğu değiştiği için kesinlik de değişir. Havuz düzeyindeki omegayı (kalibrasyon parametrelerinden hesaplanan) ortalama uygulanan madde sayısı ve yetenek ölçeği boyunca koşullu güvenilirliğin (veya ölçüm standart hatasının) aralığı ile birlikte raporlamak en eksiksiz resmi verir.
Çok boyutlu bir CAT için omega-toplam ile omega-hiyerarşik arasındaki fark nedir?
Omega-toplam, hem genel hem de özel faktör varyansı — tüm sistematik varyansın doğru puan olarak kabul edildiği toplam puan için güvenilirliği yansıtır. Omega-hiyerarşik, yalnızca genel faktöre atfedilebilen güvenilirliği izole eder ve özel faktör varyansını rahatsız edici olarak ele alır. Raporlanan puanın geniş bir genel özelliği mi yoksa belirli bir alt alanı mı temsil etmesi amaçlandığına bağlı olarak seçin.
Kaynaklar
- McDonald, R. P. (1999). Test Theory: A Unified Treatment. Lawrence Erlbaum Associates. ISBN: 978-0805830408
- Green, B. F., Bock, R. D., Humphreys, L. G., Linn, R. L., & Reckase, M. D. (1984). Technical guidelines for assessing computerized adaptive tests. Journal of Educational Measurement, 21(4), 347–360. DOI: 10.1111/j.1745-3984.1984.tb01039.x ↗
Bu sayfayı kaynak gösterin
ScholarGate. (2026, June 3). Computerized Adaptive Test McDonald's Omega. ScholarGate. https://scholargate.app/tr/psychometrics/computerized-adaptive-test-mcdonalds-omega
Hangi yöntem?
Bu yöntemi en yakın akrabalarının yanına koyup yan yana okuyun — kütüphane kitapları masaya serer; seçim sizindir.
- Bilgisayarlı Uyarlanabilir Test Cronbach Alfa DeğeriPsikometri↔ karşılaştır
- Madde Yanıt Kuramı (MYK) Temelli Bilgisayarlı Uyarlanabilir Test (BUT-MYK)Psikometri↔ karşılaştır
- Bilgisayarlı Uyarlanabilir Test Güvenilirlik AnaliziPsikometri↔ karşılaştır
- Doğrulayıcı faktör analizi (DFA)Psikometri↔ karşılaştır
- Madde Yanıt Teorisi (MYT)Psikometri↔ karşılaştır