Geçerlik ve güvenirlik tek bir Cronbach alfa katsayısıyla gösterilemez. Ölçeğin amaçlanan kullanımına ilişkin kanıt; içerik, iç yapı, diğer değişkenlerle ilişkiler, ölçüm hatası ve farklı gruplarda işleyiş gibi birbiriyle bağlantılı incelemelerden oluşur.
Önce ölçülecek yapı ve kullanım amacı
Aynı ölçek tarama, tanı desteği, grup karşılaştırması veya bireysel değişimi izleme amacıyla farklı kanıtlara ihtiyaç duyar. Hedef popülasyon, uygulama biçimi, puanlama, alt boyutlar ve yorumlanacak puan düzeyi protokolde tanımlanmalıdır.
Çeviri–geri çeviri tek başına kültürel uyarlama değildir. Uzman değerlendirmesi, bilişsel görüşmeler ve pilot uygulama; maddelerin anlaşılırlığını, bağlamsal uygunluğunu ve içerik kapsamını incelemelidir.
İç yapı: EFA mı CFA mı?
Yapı yeterince bilinmiyor veya yeni madde havuzu geliştiriliyorsa keşfedici faktör analizi (EFA) düşünülebilir. Önceden tanımlı bir model sınanıyorsa doğrulayıcı faktör analizi (CFA) daha uygundur. Aynı örneklemde tamamen veri odaklı EFA yapıp aynı veride CFA ile “doğrulamak” bağımsız doğrulama sağlamaz.
Likert maddelerinde kategori sayısı, dağılım, korelasyon matrisi ve kestirim yöntemi dikkate alınmalıdır. Sadece özdeğer>1 kuralı ve varimax döndürme otomatik seçimler olarak kullanılmamalıdır; paralel analiz ve kuramsal yorum birlikte değerlendirilir.
Güvenirlik hangi katsayıyla değerlendirilir?
Cronbach alfa belirli varsayımlara dayanır ve yüksek olması tek boyutluluğu kanıtlamaz. Uygun durumda omega katsayıları, test–tekrar test güvenirliği, değerlendiriciler arası uyum ve ölçümün standart hatası birlikte incelenebilir.
Madde sayısının artması alfayı yükseltebilir; çok yüksek değerler tekrarlayıcı maddelere de işaret edebilir. Güvenirlik katsayısı örnekleme ve kullanım amacına bağlıdır; ölçeğin değişmez bir özelliği gibi sunulmamalıdır.
Geçerlik kanıtları
- İçerik: uzman görüşü ve hedef kullanıcı değerlendirmesi
- İç yapı: faktör yapısı, yerel bağımlılık ve madde işleyişi
- Yakınsak/ayrışan ilişkiler: önceden yönü ve büyüklüğü belirlenmiş hipotezler
- Bilinen gruplar: klinik olarak gerekçeli grup farklılıkları
- Ölçüt ilişkisi: uygun ve güvenilir referans ölçütle karşılaştırma
- Değişime duyarlılık: izlem amaçlı kullanımlarda değişimi yakalama
Gruplar arası karşılaştırmadan önce ölçüm değişmezliği
Cinsiyet, yaş grubu, dil veya kültürler arasında puan karşılaştırılacaksa ölçeğin aynı yapıyı benzer biçimde ölçüp ölçmediği incelenmelidir. Yapılandırma, yükler, eşikler/kesişimler ve gerektiğinde hata varyansları aşamalı olarak değerlendirilir.
Değişmezlik desteklenmiyorsa gözlenen puan farkı gerçek yapı farkı ile ölçüm biçimi farkını birbirine karıştırabilir. Kısmi değişmezlik veya madde düzeyinde farklı işleyiş alternatifleri gerekçeli biçimde ele alınabilir.
Örneklem büyüklüğü için tek kural yoktur
“Madde başına 5 veya 10 kişi” kaba bir başlangıç kuralıdır; faktör sayısı, yüklerin büyüklüğü, madde kategorileri, model karmaşıklığı, eksik veri ve hedeflenen parametre hassasiyeti sonucu değiştirir. Simülasyon veya modele özgü örneklem gerekçesi daha savunulabilir olabilir.
Sık sorulan sorular
Cronbach alfa 0,70’in üzerindeyse ölçek geçerli midir?
Hayır. Alfa iç tutarlılıkla ilgili sınırlı bir güvenirlik göstergesidir; yapı, içerik veya ölçüt geçerliğini kanıtlamaz.
EFA ve CFA aynı örneklemde yapılabilir mi?
Yapılabilir; ancak bağımsız doğrulama sayılmaz. Yeterli örneklem varsa rastgele bölme veya tercihen ayrı bir örneklemde doğrulama planlanabilir.
Uyarlama çalışmasında sadece dil çevirisi yeterli midir?
Hayır. Anlamsal, kavramsal ve kültürel eşdeğerlik ile hedef popülasyondaki ölçüm özellikleri ayrıca değerlendirilmelidir.
Temel kaynaklar
- COSMIN — Outcome measurement instruments methodology
- Standards for Educational and Psychological Testing
- McNeish D. Thanks coefficient alpha, we’ll take it from here
Bu içerik genel bilimsel bilgilendirme amacı taşır; tek başına çalışma özelinde istatistiksel karar veya etik/hukuki görüş oluşturmaz.
Bu yöntemin sizin tasarımınıza uygun olup olmadığını birlikte değerlendirelim.
Araştırma sorusu, değişken listesi ve mevcut aşamanızı kısaca paylaşın; ihtiyaç duyulan desteğin kapsamını netleştirelim.