Bilgisayarlı Uyarlamalı Testlerde (BUT) İçerik Geçerliliği
Content Validity in Computerized Adaptive Testing · Ayrıca şöyle bilinir: CAT content validity, adaptive item bank content coverage, content balancing in CAT, CAT blueprint validity
Bilgisayarlı uyarlamalı testlerde (BUT) içerik geçerliliği, uyarlamalı olarak uygulanan bir değerlendirmenin, her bir katılımcıya yalnızca bir madde alt kümesi sunmasına rağmen, amaçlanan içerik alanını yeterince örneklemesini sağlar. Bu, klasik içerik geçerliliği yöntemlerini, BUT'a özgü madde havuzu tasarımı ve içerik dengeleme algoritmalarıyla birleştirerek hem madde havuzu hem de bireysel test düzeyinde temsili alan kapsamını garanti eder.
Tam yöntemi oku
Bu bölümü okumak için ücretsiz hesapla giriş yapın.
Yöntem haritası
İlişkili yöntemlerin komşuluğu — keşfetmek için bir düğüm seçin.
Ne zaman kullanılır
Lisans sınavı, klinik tarama aracı veya eğitimsel başarı testi gibi iyi tanımlanmış bir içerik alanını ölçmek için tasarlanmış uyarlamalı bir değerlendirme geliştirirken veya gözden geçirirken BUT'ta içerik geçerliliği değerlendirmesini kullanın. Yüksek riskli kararlar için plan uyumunun belgelenebilir olması gerektiğinde esastır. BUT içerik geçerliliğini sonradan yapılan bir adım olarak ele almayın; madde havuzu geliştirme ve algoritma tasarımına baştan itibaren dahil edilmelidir. Yapı veya ölçüt geçerliliği kanıtının yerine geçmez — kapsamlı bir geçerlilik argümanı için her üç kanıt türü de gereklidir. Yapının doğası gereği tek boyutlu olduğu ve alan örneklemesinin anlamlı olmadığı durumlarda (örn. esaslı alt alanları olmayan saf bir gizil özellik ölçüsü) bu yaklaşımdan kaçının.
Güçlü yönler & sınırlılıklar
- Değişken madde sunumuna rağmen uyarlamalı testlerin içerik alanının temsil edilebilirliğini korumasını sağlar.
- Geçerliliğin ikili güvencesi için yerleşik uzman panel yöntemlerini (CVR) algoritmik içerik dengeleme ile bütünleştirir.
- Alan kapsamının belgelenmiş kanıtını sağlayarak savunulabilir yüksek riskli karar almayı destekler.
- Modern gölge test ve kısıtlı BUT çerçeveleriyle uyumlu olup, otomatik plan uygulamasını mümkün kılar.
- Madde havuzu kapsamındaki boşlukları erken tespit eder, operasyonel dağıtımdan önce hedeflenmiş madde geliştirmeye rehberlik eder.
- İçerik dengeleme kısıtlamaları, madde seçiminin istatistiksel verimliliğini azaltır ve hedeflenen ölçüm hassasiyetine ulaşmak için gereken test uzunluğunu potansiyel olarak artırır.
- Her içerik kategorisinde yeterli maddeye sahip, büyük, iyi kalibre edilmiş bir madde havuzu gerektirir — geliştirilmesi ve sürdürülmesi kaynak yoğundur.
- Uzman panelinin içerik uygunluğuna ilişkin yargıları, paneller veya zaman noktaları arasında öznel ve değişken olabilir.
- Yapı veya uygulama alanı geliştikçe plan oranları yeniden gözden geçirilmelidir, bu da sürekli geçerlilik izlemesi gerektirir.
SSS
Sabit formlu testlere kıyasla BUT'ta içerik geçerliliği neden özel bir endişe kaynağıdır?
Sabit formlu bir testte her katılımcı aynı maddeleri alır, bu nedenle alan kapsamı test tasarımında bir kez belirlenir ve evrensel olarak uygulanır. BUT'ta her katılımcı, istatistiksel verimlilik için seçilen farklı bir madde alt kümesi alır, bu da algoritmanın daha az bilgilendirici içerik alanlarını göz ardı etme riskini artırır. Açık içerik dengeleme kısıtlamaları olmadan, bazı plan kategorileri bireysel uyarlamalı uygulamalardan sistematik olarak eksik temsil edilebilir veya tamamen dışarıda bırakılabilir.
Lawshe'nin CVR'si nedir ve BUT madde havuzu geliştirmede nasıl kullanılır?
İçerik Geçerliliği Oranı, bir maddeyi yapı için temel olarak derecelendiren konu alanı uzmanlarının oranını, şans anlaşmasına göre ayarlanmış olarak nicelleştirir. Panel büyüklüğü için kritik CVR'ye ulaşamayan maddeler revize edilir veya hariç tutulur. BUT geliştirmede bu adım, kalibrasyondan önce her aday maddeye uygulanır ve uyarlamalı seçim başlamadan önce havuzun yalnızca içerik geçerli maddeler içerdiğini garanti eder.
İçerik dengeleme BUT hassasiyetini önemli ölçüde azaltır mı?
Bu, plan kısıtlamalarının katılığı ile her kategorideki madde havuzunun derinliği arasındaki dengeye bağlıdır. Zengin bir havuzla, hassasiyet kaybı mütevazıdır. Seyrek kategorilerle, kısıtlamalar daha az bilgilendirici maddelerin seçilmesini zorlayabilir, bu da güvenilirlik hedeflerini karşılamak için gereken test uzunluğunu artırır. Bu ödünleşim, etkili içerik dengeleme için kategori başına yeterli havuz kapsamının neden bir ön koşul olduğunu açıklar.
İçerik dengelemede gölge test yaklaşımı nedir?
van der Linden ve meslektaşları tarafından geliştirilen gölge test yaklaşımı, her madde seçim adımında, tüm plan ve lojistik kısıtlamaları aynı anda karşılayan eksiksiz bir hipotetik test (gölge test) oluşturur. Bu uygulanabilir gölge testinden en bilgilendirici madde daha sonra uygulanır. Bu, uyarlamanın ilerleyen aşamalarında uygulanamaz hale gelebilecek açgözlü yerel kararlar almak yerine, küresel olarak uygulanabilir, plana uygun bir testi garanti eder.
Bir testin sabit formlu versiyonundan elde edilen içerik geçerliliği kanıtı BUT versiyonuna aktarılabilir mi?
Kısmen. Bireysel maddeler için uzman panel incelemeleri ve CVR değerleri aktarılır, çünkü madde içeriği uygulama moduyla değişmez. Ancak, plan uyumu kanıtı BUT bağlamı için yeniden oluşturulmalıdır, çünkü uyarlamalı seçim, sabit formdan farklı gerçekleşen içerik dağılımları üretebilir. Uyarlamalı uygulamaların plan oranlarını karşıladığını belgeleyen yeni geçerlilik kanıtı gereklidir.
Kaynaklar
- Lawshe, C. H. (1975). A quantitative approach to content validity. Personnel Psychology, 28(4), 563–575. link ↗
- van der Linden, W. J. & Glas, C. A. W. (Eds.). (2010). Elements of Adaptive Testing. Springer. DOI: 10.1007/978-0-387-85461-8 ↗
Bu sayfayı kaynak gösterin
ScholarGate. (2026, June 3). Content Validity in Computerized Adaptive Testing. ScholarGate. https://scholargate.app/tr/psychometrics/computerized-adaptive-test-content-validity
Hangi yöntem?
Bu yöntemi en yakın akrabalarının yanına koyup yan yana okuyun — kütüphane kitapları masaya serer; seçim sizindir.
- Bilgisayarlı Uyarlanabilir Testlerde (CAT) Yapı GeçerliğiPsikometri↔ karşılaştır
- Madde Yanıt Kuramı (MYK) Temelli Bilgisayarlı Uyarlanabilir Test (BUT-MYK)Psikometri↔ karşılaştır
- Yapısal GeçerlikPsikometri↔ karşılaştır
- Kapsam GeçerliliğiPsikometri↔ karşılaştır
- Ayırt Edici Madde Fonksiyonu (DIF)Psikometri↔ karşılaştır
- Madde Yanıt Teorisi (MYT)Psikometri↔ karşılaştır