Sınıf Gözlemi — Sistematik Sınıf Gözlemi

Yapılandırılmış gözlem, önceden tanımlanmış bir kodlama aracı kullanır — gözlemcinin gözlemlenen her olayı yerleştirdiği sabit bir kategori kümesi (örneğin, öğretmen soru sorar = FIAC'de 4. kategori). Güvenilir nicelleştirmeyi ve siteler arası karşılaştırmayı destekler ancak yalnızca aracın görmesi için tasarlananı yakalar. Yapılandırılmamış (etnografik) gözlem, sosyal sahnenin tüm karmaşıklığını yakalamak için açık uçlu alan notları kullanır; daha esnektir ancak sınıflar arasında sistematik olarak karşılaştırmak daha zordur. Yarı yapılandırılmış yaklaşımlar, bir rehber çerçeveyi açık notlar için alanla birleştirir.

Gözleme dayalı öğretim ölçümlerinin güvenilirliği üzerine yapılan araştırmalar, öğretim pratiğinin kararlı bir tahminini elde etmek için tipik olarak öğretmen başına en az iki ila dört gözlem oturumunun, her biri 30-60 dakika süren oturumun gerekli olduğunu göstermektedir. Daha az oturum, öğretmenleri güvenilir bir şekilde ayırt edemeyen veya zaman içindeki değişimi izleyemeyen geniş güven aralıklarına sahip tahminler üretir.

Tüm gözlemcileri, araç geliştiricileri veya altın standart bir ekip tarafından önceden kodlanmış anahtar videolar kullanarak kodlama protokolü üzerinde eğitin. İki gözlemcinin aynı oturumu bağımsız olarak kodlamasını sağlayarak ve anlaşma istatistiklerini — kategorik kodlama için Cohen'in kappa'sı veya derecelendirme ölçekleri için sınıflar arası korelasyon katsayısı (ICC) — hesaplayarak güvenilirlik kontrolleri yapın. Alan veri toplama başlamadan önce 0.70'in üzerindeki bir ICC veya kappa yaygın olarak kabul edilen eşiktir.

Gözlem puanlarını kullanan yüksek riskli öğretmen değerlendirmesi, çok yüksek güvenilirlik ve birden çok puanlayıcı veya birden çok gözlem gerektirir. Gates Vakfı MET projesi dahil olmak üzere araştırmalar, tekil gözlemlerin öğrenci çıktıları için sınırlı güvenilirliğe ve öngörücü geçerliliğe sahip olduğunu göstermiştir. Personel kararları için kullanıldığında, gözlem diğer kanıt kaynaklarıyla (öğrenci başarı verileri, portföyler) birleştirilmeli ve dikkatlice standartlaştırılmış koşullar altında toplanmalıdır.

Her ikisinin de avantajları vardır. Video, tekrarlanan izlemeye, birden çok puanlayıcı tarafından geriye dönük kodlamaya ve daha sonra analiz veya mesleki gelişim kullanımı için arşivlemeye olanak tanır. Ancak kameralar kendileri davranış değişikliğine neden olabilir, gizlilik endişeleri yaratabilir ve sınıfın tam duyusal ortamını yakalayamayabilir. Şahsen gözlem, kameranın kaçırabileceği gerçek zamanlı kodlama ve bağlamsal farkındalık sağlar. Birçok titiz çalışma her ikisini de kullanır.