Bilgisayarlı Uyarlanabilir Test Madde İşlev Farklılığı (CAT-DIF)
Computerized Adaptive Test Differential Item Functioning · Ayrıca şöyle bilinir: CAT DIF analysis, adaptive test DIF, DIF in computerized adaptive testing, CAT item bias detection
CAT-DIF, bilgisayarlı uyarlanabilir bir testteki maddeleri, genel yetenek kontrol altına alındıktan sonra demografik veya grup alt popülasyonları arasında farklı davrananları belirler. Uyarlanabilir algoritmalar, her adayın tahmin edilen yeterliliğine göre rastgele olmayan maddeler seçtiği için, standart DIF tespit yöntemlerinin bu bağlamda geçerli bir şekilde uygulanabilmesi için ayarlanması gerekir.
Tam yöntemi oku
Bu bölümü okumak için ücretsiz hesapla giriş yapın.
Yöntem haritası
İlişkili yöntemlerin komşuluğu — keşfetmek için bir düğüm seçin.
Ne zaman kullanılır
Cinsiyet, etnik köken, dil geçmişi veya diğer demografik özelliklere göre farklılık gösteren gruplara sahip büyük ölçekli bir bilgisayarlı uyarlanabilir test uyguladığınızda ve madde performans farklılıklarının gerçek yetenek farklılıklarını mı yoksa madde yanlılığını mı yansıttığından emin olmanız gerektiğinde CAT-DIF kullanın. Özellikle yüksek riskli kararlar — lisanslama, sertifikasyon, üniversite kabulü veya klinik değerlendirme gibi — CAT puanlarına dayandığında önemlidir. Maruziyet düzeltmesi yapmadan standart sabit form DIF prosedürlerini (örneğin, sayı-doğru puanlara dayalı Mantel–Haenszel) CAT verilerine doğrudan uygulamayın, çünkü rastgele olmayan madde seçimi bu yöntemlerin varsayımlarını ihlal eder. Tüm adayların aynı madde setlerini aldığı veya gruplar içindeki örneklem boyutlarının DIF tespitini güvenilir bir şekilde güçlendirmek için çok küçük olduğu (genellikle grup başına 200'den az) durumlarda CAT-DIF gerekli değildir.
Güçlü yönler & sınırlılıklar
- Yüksek riskli uyarlanabilir değerlendirmelerde ölçüm adaletini, madde düzeyinde yapı-ilgisiz grup farklılıklarını tespit ederek sürdürür.
- IRT tabanlı yetenek koşullandırması, gözlemlenen puan eşleştirmesinden daha hassastır, DIF tahminlerinde yetenek karıştırmasını azaltır.
- Binlerce madde içeren büyük operasyonel CAT bankalarına uygulanabilir, sistematik adalet incelemesini destekler.
- Hem istatistiksel anlamlılık hem de etki büyüklüğü kriterleri, yanlış pozitif DIF işaretlerini azaltan iki aşamalı bir filtre sağlar.
- Simülasyon tabanlı maruziyet düzeltme yöntemleri, yeni test uygulamaları gerektirmeden gerçekçi uyarlanabilir yönetim koşullarını tekrarlayabilir.
- Gruplar arasındaki farklı madde maruziyeti, DIF tahminini karmaşıklaştırır; maruziyet oranlarını göz ardı etmek Tip I hatayı şişirir.
- DIF istatistikleri için genellikle grup başına 200 veya daha fazla olmak üzere büyük grup örneklem boyutları gereklidir, bu da küçük ölçekli CAT dağıtımlarında mevcut olmayabilir.
- IRT modelinin banka düzeyinde uyumsuzluğu, madde parametreleri kötü kalibre edilmişse yanıltıcı DIF tahminlerine yayılabilir.
- Yapı-ilgisiz yanlılığı meşru grup farklılıklarından ayırt etmek için içerik incelemesi insan uzmanlığı gerektirir ve zaman alıcıdır.
- DIF maddelerinin bankadan çıkarılması madde havuzunun derinliğini azaltabilir, CAT'nin belirli yetenek seviyelerinde doğru ölçüm yapma yeteneğini sınırlayabilir.
SSS
Neden CAT verilerime sadece Mantel–Haenszel DIF uygulayamıyorum?
Mantel–Haenszel, adayları gözlemlenen doğru sayı puanlarına göre eşleştirir ve ardından grup performansını her madde üzerinde karşılaştırır. Bir CAT'de, farklı adaylar farklı maddeler görür, bu nedenle doğru sayı puanı adaylar veya gruplar arasında karşılaştırılabilir değildir. Koşullandırma değişkeni olarak yetenek tahminleri ile IRT tabanlı DIF istatistiklerini kullanmalısınız ve grupları karşılaştırmadan önce farklı madde maruziyet oranları için düzeltme yapmalısınız.
CAT-DIF analizi için ne kadar örnekleme ihtiyacım var?
Değerlendirilen her madde için yaygın bir minimum, grup başına (odak ve referans) yaklaşık 200 adayıdır. Bireysel CAT maddeleri tüm adaylar tarafından görülmediği için, özellikle bankadaki daha az sıklıkla maruz kalan maddeler için, grup başına madde başına yeterli yanıt biriktirmek için önemli ölçüde daha büyük bir toplam örnekleme ihtiyacınız olabilir.
DIF için işaretlenen maddelerle ne yapmalıyım?
İstatistiksel işaretleme ilk adımdır, son karar değildir. İşaretlenen maddeler, farklı performansın yapı-ilgisiz bir özelliği — kültürel olarak özgü içerik veya belirsiz kelime seçimi gibi — veya ilgili bir yapı üzerindeki meşru bir grup farkını yansıtıp yansıtmadığını değerlendiren içerik uzmanları tarafından incelenmelidir. Yalnızca yanlı olduğu doğrulanan maddeler kaldırılmalı veya revize edilmelidir.
DIF analizi test geliştirme sırasında mı yoksa operasyonel olarak mı yürütülebilir?
Her ikisi de önemlidir. Madde deneme sırasında operasyonel öncesi DIF çalışmaları, yanlı maddeleri canlı bankaya girmeden önce ayırmaya yardımcı olur. Madde maruziyet modelleri ve aday popülasyonları zamanla değiştiği ve başlangıçta yanlı görünmeyen maddeler test programı olgunlaştıkça DIF gösterebileceği için devam eden operasyonel DIF izlemesi de gereklidir.
DIF ile CAT'de farklı test işlevselliği (DTF) arasındaki fark nedir?
DIF bir madde düzeyinde kavramdır: yetenek eşleştirmesinden sonra tek bir maddenin gruplar arasında farklı performans gösterip göstermediğini sorar. Farklı test işlevselliği (DTF), bir adayın karşılaştığı tüm maddeler üzerinden DIF'i toplar ve tüm uyarlanabilir testin bir grup için sistematik olarak yeteneği aşırı mı yoksa eksik mi tahmin ettiğini yakalar. Bir CAT'de, hiçbir tek madde büyük DIF göstermese bile, küçük DIF etkileri uyarlanabilir yol boyunca biriktiğinde DTF ortaya çıkabilir.
Kaynaklar
- Zwick, R., Thayer, D. T., & Mazzeo, J. (1997). Describing and categorizing DIF in polytomous items. Journal of Educational Measurement, 34(4), 261–285. DOI: 10.1002/j.2333-8504.1997.tb01726.x ↗
- Wainer, H. (Ed.). (2000). Computerized Adaptive Testing: A Primer (2nd ed.). Lawrence Erlbaum Associates. ISBN: 978-0805835113
Bu sayfayı kaynak gösterin
ScholarGate. (2026, June 3). Computerized Adaptive Test Differential Item Functioning. ScholarGate. https://scholargate.app/tr/psychometrics/computerized-adaptive-test-differential-item-functioning
Hangi yöntem?
Bu yöntemi en yakın akrabalarının yanına koyup yan yana okuyun — kütüphane kitapları masaya serer; seçim sizindir.
- Bilgisayarlı Uyarlanabilir Test Madde AnaliziPsikometri↔ karşılaştır
- Madde Yanıt Kuramı (MYK) Temelli Bilgisayarlı Uyarlanabilir Test (BUT-MYK)Psikometri↔ karşılaştır
- Bilgisayarlı Uyarlanabilir Test Ölçüm DeğişmezliğiPsikometri↔ karşılaştır
- Ayırt Edici Madde Fonksiyonu (DIF)Psikometri↔ karşılaştır
- Madde Yanıt Teorisi (MYT)Psikometri↔ karşılaştır
- Çok Gruplu Madde İşlev Farklılığı (MG-DIF)Psikometri↔ karşılaştır