Pilot-tested Survey — Ana Veri Toplama Fazından Önce Anketlerin Ön Test Edilmesi

Evrensel bir kural yoktur, ancak kısa bir anketin ilk bilişsel pilotu için genellikle 5 ila 10 katılımcı yeterlidir, daha uzun bir araç için veya ön güvenilirlik tahminleri elde etmek için ise 20 ila 30 katılımcı gerekebilir. Temel ilke, pilot grubun ana çalışma popülasyonunu temsil etmesi gerektiğidir, sadece mevcut olması değil.

Genellikle hayır, eğer pilot bilişsel sorgulama için kullanıldıysa veya katılımcılara anketin bir test sürümü olduğu söylendiyse. Onları dahil etmek kontaminasyon riskini taşır: araçla olan aşinalıkları, ana çalışmadaki öz substantive yanıtlarını etkileyebilir. Eğer pilot tam bir uygulama ise ve sorgulama yapılmadıysa ve sonrasında herhangi bir araç değişikliği yapılmadıysa, dahil etme bazen haklı görülebilir — ancak bu belgelenmeli ve açıklanmalıdır.

Hayır. Pilot test öncelikle yüz ve içerik geçerliliğini kontrol eder — soruların amaçlandığı gibi anlaşılıp anlaşılmadığını ve formatın çalışıp çalışmadığını. Yapı geçerliliği, ölçüt geçerliliği ve ölçek düzeyindeki güvenilirlik, tam çalışma verilerinin analizi veya daha büyük bir örneklemle özel bir psikometrik doğrulama çalışması yoluyla belirlenir.

Bilişsel görüşme, katılımcılardan her soruyu tamamlarken yüksek sesle düşünmelerini ister — yorumlarını, bir cevap seçme zihinsel süreçlerini ve hissettikleri herhangi bir belirsizliği dile getirirler. Anketi basitçe çalıştırmak, insanların ne yanıt verdiğini söyler; bilişsel görüşme ise nedenini söyler, verilerde görünmez kalacak anlama başarısızlıklarını ortaya çıkarır.

Her zaman değil. Doğrulanmış araçlar, yeni bir popülasyonla, yeni bir dilde, farklı bir uygulama modunda veya herhangi bir madde değişikliğinden sonra kullanıldığında hala kısaca pilotlanmalıdır. Küçük bağlamsal değişiklikler bile soruların nasıl anlaşıldığını değiştirebilir.