Tanım ve kapsam
Gözlemciler arası güvenirlik (İngilizce: inter-rater reliability; Almanca: Interrater-Reliabilität). Gözlemciler arası güvenirlik, aynı davranış veya olayları önceden belirlenmiş ölçütlerle değerlendiren bağımsız gözlemcilerin ne ölçüde benzer sonuçlara ulaştığını gösterir. Özellikle sınıf gözlemi, klinik kodlama ve davranış araştırmalarında önemlidir. Gözlemcilerin yalnız aynı görüşte olması yeterli değildir; değerlendirmenin tanımı, eğitimleri ve kullanılan uyum istatistiği de açıklanmalıdır.
Gözlemciler “derste söz aldı” gibi açık davranışları kodlarken daha kolay uzlaşabilir; “yüksek motivasyon gösterdi” gibi yoruma açık kategorilerde anlaşmazlık büyüyebilir. Kod kitabı hazırlanması, örnek videolarla eğitim ve bağımsız puanlama kaliteyi geliştirebilir. Basit yüzde uyum, bazı kategoriler çok sık seçiliyorsa tesadüfi uyumu olduğundan etkileyici gösterebilir. Bu nedenle araştırmada uygun koşullarda kappa veya sınıf içi korelasyon gibi ek göstergeler kullanılır.
Somut örnek
İki gözlemci, 20 dakikalık videoda öğrencinin söz kesme davranışını ayrı ayrı sayar. Sayımların yakın olması değerli bir kanıttır; hangi anların söz kesme sayıldığı önceden tanımlanmalıdır.
Gözlemciler aynı kişiyle görüşüp ortak karar verdiyse bu, bağımsız iki puanlayıcının uyumuna eşdeğer değildir.