Örneklem Büyüklüğü ve Hata Payı Nasıl Hesaplanır?

Örneklem büyüklüğü, bir anket sonucunun dayandığı cevap sayısıdır; hata payı ise bu sonucun, tüm çalışanlar cevap verseydi çıkacak gerçek değerden tesadüfen ne kadar sapabileceğini gösterir. Çalışan anketlerinde hata payı, %95 güven düzeyinde z × √(p × (1 − p) / n) × √((N − n) / (N − 1)) formülüyle hesaplanır; burada N çalışan sayısı, n cevap sayısı, p ise olumlu cevap oranıdır. Örneğin 1.000 kişilik bir kurumda 500 kişi cevap verdiğinde hata payı yaklaşık ±3 puandır; 50 kişilik bir birimde 25 cevapla ±14 puana çıkar. Bu yazıda formülü sade bir dille açıklıyor, kurum büyüklüğü ve katılım oranına göre hesaplanmış tablolar paylaşıyor ve sonuçları yorumlarken nelere dikkat etmeniz gerektiğini anlatıyoruz.

Tam sayım mı, örneklem mi?

Seçim anketleri ya da pazar araştırmaları, büyük bir nüfusu temsil etmesi için seçilmiş birkaç yüz ya da birkaç bin kişiyle yapılır. Buna örneklem denir. Çalışan anketleri ise genellikle farklı çalışır: Anket kurumdaki tüm çalışanlara gönderilir. Herkesin cevap verdiği bir ankete tam sayım denir ve tam sayımda tesadüfi örneklem hatası yoktur.

Pratikte hiçbir çalışan anketinde herkes cevap vermez. %70 katılımla tamamlanan bir anket, çalışanların %30'unun görüşünü içermez. Yani herkese gönderilen anket, katılım oranı yüzünden fiilen bir örnekleme dönüşür ve sonuç bir hata payı taşır. Bu yüzden "Tüm çalışanlara sorduk, sonuç kesindir" demek doğru değildir.

İki önemli fark daha vardır:

• Örneklem rastgele seçilmemiştir: Cevap verenler kendi kararıyla katılır. Bu, hata payının hesaba katmadığı bir risk yaratır (aşağıda cevapsızlık yanılgısı başlığında ele alıyoruz).
• Evren küçüktür ve bellidir: Seçim anketinde nüfus milyonlarcadır; çalışan anketinde evren 80, 600 ya da 4.000 kişidir. Bu yüzden formüle sonlu evren düzeltmesi eklenir.

Hata payı ve güven düzeyi nedir?

Hata payı, sonucun etrafındaki belirsizlik aralığıdır. Bağlılık endeksinde olumlu cevap oranı %62, hata payı ±4 puan ise, tüm çalışanlar cevap verseydi oranın büyük ihtimalle %58 ile %66 arasında çıkacağını söyleyebilirsiniz.

Güven düzeyi, bu "büyük ihtimalle" ifadesinin ne kadar büyük olduğudur. %95 güven düzeyi, aynı anket aynı koşullarda defalarca tekrarlansaydı hesaplanan aralıkların yaklaşık %95'inin gerçek değeri içereceği anlamına gelir. Anket araştırmalarında standart olarak %95 kullanılır. Güven düzeyi yükseldikçe aralık genişler: %99 güven için aynı veriyle daha geniş bir hata payı elde edersiniz.

Hata payını üç şey belirler:

1. Cevap sayısı (n): Cevap arttıkça hata payı daralır; ama karekök ilişkisi nedeniyle hata payını yarıya indirmek için cevap sayısını yaklaşık dört katına çıkarmak gerekir.
2. Oranın kendisi (p): Hata payı, oran %50 iken en geniştir. %90 ya da %10 gibi uç oranlarda daha dardır.
3. Evrenin büyüklüğü (N) ve kapsanan kısım: Çalışanların büyük kısmı cevap verdiğinde sonlu evren düzeltmesi hata payını belirgin şekilde daraltır.

Hata payı formülü

Bir oran (örneğin bir önermenin olumlu cevap oranı) için hata payı şöyle hesaplanır:

e = z × √(p × (1 − p) / n) × √((N − n) / (N − 1))

• e: Hata payı. Sonuç ondalık çıkar; 100 ile çarparak puana çevirirsiniz (0,043 = ±4,3 puan).
• z: Güven düzeyine karşılık gelen katsayı. %90 için 1,645, %95 için 1,96, %99 için 2,576.
• p: Olumlu cevap oranı (ondalık olarak, örneğin %70 için 0,70). Oranı henüz bilmiyorsanız, en geniş hata payını veren 0,50 kullanılır.
• n: Cevap veren kişi sayısı.
• N: Ankete davet edilen toplam çalışan sayısı.
• √((N − n) / (N − 1)): Sonlu evren düzeltmesi. Çalışanların büyük bir kısmı cevap verdiğinde 1'in belirgin şekilde altına düşer ve hata payını küçültür. Herkes cevap verdiğinde (n = N) sıfır olur.

Örnek: 1.000 çalışanlı bir kurumda 300 kişi cevap vermiş ve bir önermede olumlu cevap oranı %70 çıkmış olsun.

• Standart hata: √(0,70 × 0,30 / 300) ≈ 0,0265
• Sonlu evren düzeltmesi: √(700 / 999) ≈ 0,837
• Hata payı: 1,96 × 0,0265 × 0,837 ≈ 0,043, yani ±4,3 puan

Düzeltme olmasaydı hata payı ±5,2 puan olurdu. Aynı kurumda 700 kişi cevap verseydi hata payı ±1,9 puana inerdi.

Kurum büyüklüğü ve katılım oranına göre hata payı tablosu

Aşağıdaki tablo, %95 güven düzeyinde ve en temkinli varsayım olan p = 0,50 ile hesaplanmış hata paylarını gösterir. Parantez içindeki sayı cevap sayısıdır.

Değerler puan cinsindendir ve sonlu evren düzeltmesi uygulanarak hesaplanmıştır. Olumlu cevap oranı %50'den uzaklaştıkça hata payı biraz daralır; örneğin oran %80 ise tablodaki değerlerin yaklaşık %80'i kadardır.

Tablodan çıkan üç pratik sonuç:

• Büyük kurumlarda düşük katılım bile dar bir hata payı verir. 5.000 kişilik bir kurumda %30 katılımla hata payı ±2,1 puandır. Büyük kurumlarda asıl risk hata payı değil, kimin cevap vermediğidir.
• Küçük birimlerde yüksek katılım şarttır. 100 kişilik bir birimde %30 katılımla ±15 puanlık bir aralık, sonucu neredeyse yorumlanamaz hale getirir.
• Katılım arttıkça kazanç küçük gruplarda daha büyüktür. 250 kişilik bir birimde katılımı %50'den %70'e çıkarmak hata payını ±6,2'den ±4,1'e indirir.

Belirli bir hata payı için kaç cevap gerekir?

Soruyu tersinden de sorabilirsiniz: "±5 puanlık bir hata payı istiyorsam kaç cevaba ihtiyacım var?" Bunun için önce sonsuz bir evren için gereken sayı, sonra sonlu evren düzeltmesiyle kurumunuz için gereken sayı hesaplanır:

n₀ = z² × p × (1 − p) / e²

n = n₀ / (1 + (n₀ − 1) / N)

%95 güven düzeyi ve p = 0,50 için n₀, ±5 puan için yaklaşık 385, ±3 puan için yaklaşık 1.068'dir. Kurumunuz büyüdükçe gereken sayı bu değerlere yaklaşır ama hiçbir zaman aşmaz.

%95 güven düzeyi ve p = 0,50 ile hesaplanmıştır; cevap sayıları yukarı yuvarlanmıştır.

Bu tablo, büyük kurumlarda neden %7 katılımın "istatistiksel olarak yeterli" görünebileceğini açıklar. Ancak bu yalnızca kurum geneli için geçerlidir. Sonuçları birimlere, lokasyonlara ve yaka tiplerine ayırdığınızda her grup kendi küçük evreni olur ve her grupta yeterli cevap gerekir. Ayrıca %7 katılımla temsiliyet riski çok yüksektir.

Küçük ekiplerde hata payı neden geniştir?

Küçük gruplarda her bir kişi sonucu büyük ölçüde etkiler. 15 kişilik bir ekipte 12 kişi cevap verdiğinde, bir kişinin cevabını "Kararsızım"dan "Katılıyorum"a değiştirmesi olumlu cevap oranını yaklaşık 8 puan oynatır. Bu ekipte %75'lik bir sonucun hata payı, sonlu evren düzeltmesine rağmen ±11 puan civarındadır.

Bu, kurumların uyguladığı 10 kişilik raporlama sınırıyla karıştırılmamalıdır. Bu sınır, cevapların kime ait olduğunun tahmin edilmesini önlemek, yani anonimliği korumak içindir; istatistiksel kesinlik için değil. 20 kişilik bir ekipte 10 kişi cevap verdiğinde sonuç raporlanabilir, ancak hata payı %95 güven düzeyinde ±22 puana yakındır. Anonimlik kurallarını çalışan anketlerinde anonimlik yazımızda anlattık.

Küçük ekip sonuçlarını yorumlarken şunlara dikkat edin:

• Ekip puanını kurum ortalamasıyla karşılaştırırken küçük farkları (5–10 puan) "fark yok" olarak okuyun.
• Tek tek önermeler yerine kategori ya da endeks puanlarına odaklanın; birden fazla önermenin ortalaması daha az oynar.
• Ekipleri birbirine göre sıralamaktan kaçının. Küçük ekiplerde sıralama büyük ölçüde tesadüfe bağlıdır.
• Açık uçlu yorumları ve ekip içi geri bildirim toplantılarını puanlar kadar önemseyin.

Grupları ve kırılımları nasıl oluşturacağınızı çalışan anketlerinde segmentasyon yazımızda anlattık.

Cevap sayısı temsiliyet demek değildir

Hata payı formülü, cevap verenlerin çalışanlar arasından rastgele seçildiğini varsayar. Çalışan anketlerinde ise katılım gönüllüdür ve cevap verenler cevap vermeyenlerden farklı olabilir. Buna cevapsızlık yanılgısı denir ve hata payı bunu hesaba katmaz.

Örneğin 2.000 kişilik bir kurumda katılım %70 ise hata payı yalnızca ±1,4 puandır. Ancak cevap vermeyen 600 kişinin büyük kısmı fabrikadaki vardiya çalışanlarıysa ve bu grubun bağlılığı ofis çalışanlarından düşükse, kurum geneli sonucu olduğundan iyi görünür. Dar hata payı burada yanıltıcı bir kesinlik hissi verir.

Cevapsızlık yanılgısını sınırlamak için:

• Katılımı yalnızca kurum geneli için değil, birim, lokasyon, yaka tipi ve kıdem bazında takip edin.
• Katılımı düşük kalan grupları anket sürerken tespit edip hatırlatma, kiosk ya da basılı form gibi yöntemlerle destekleyin.
• Cevap verenlerin dağılımını çalışan dağılımıyla karşılaştırın; belirgin bir sapma varsa kurum sonucunu grup bazında yorumlayın.
• Sonuç raporunda katılım dağılımını açıkça gösterin.

Katılımın hangi düzeyde yeterli sayıldığını çalışan anketlerinde katılım oranı yazımızda, katılımı artırmanın yollarını ise çalışan anketi katılım oranı nasıl artırılır rehberimizde anlattık. Diğer yanılgı türlerine anket yanılgıları nedir yazımızda değindik.

Pratik öneriler

1. Herkese gönderin. Çalışan anketlerinde örneklem seçmek yerine tüm çalışanları davet etmek hem hata payını daraltır hem de her çalışana söz hakkı verir. Örneklem yalnızca çok sık yapılan kısa nabız anketlerinde ya da çok büyük kurumlarda anket yorgunluğunu azaltmak için düşünülebilir.
2. Raporlayacağınız en küçük grubu baştan belirleyin. Hedef katılımı bu gruba göre koyun. Kurum geneli için %30 yeterli görünse de 60 kişilik birimler için çok düşüktür.
3. Hata payını raporlarda gösterin. En azından küçük gruplarda sonucun yanına cevap sayısını yazın ya da güven aralığını gösterin. Bu, yöneticilerin küçük farklara aşırı tepki vermesini önler.
4. Yıllar arası farkları ayrıca test edin. İki ölçüm arasındaki farkın anlamlı olup olmadığı, her iki ölçümün hata payına birlikte bağlıdır. Bunun için iki oran arasındaki farkın anlamlılık testi kullanılır. Bu karşılaştırmada sonlu evren düzeltmesini uygulamayan, daha temkinli bir yaklaşım öneriyoruz; ayrıntılar bağlılık anketi sonuçlarını yıllar arasında karşılaştırmak yazımızda.
5. Kesinliği temsiliyetle birlikte değerlendirin. Dar bir hata payı, cevap verenler kurumu iyi temsil ettiğinde anlam taşır.

Sık yapılan hatalar

• Tam sayım varsayımı: Anket herkese gönderildi diye sonucun kesin olduğunu düşünmek. Cevap vermeyenler varsa sonuç bir hata payı taşır.
• Kurum geneli hata payını birimlere uygulamak: Kurum genelinde ±2 puan olan hata payı, 80 kişilik bir birimde ±10 puanı aşabilir.
• Raporlama sınırını yeterli örneklem sanmak: 10 kişilik sınır anonimlik içindir. 10 cevaplı bir grubun sonucu raporlanabilir ama çok geniş bir aralıkla okunmalıdır.
• Küçük farkları sıralamaya dönüştürmek: Hata payının içinde kalan farklarla birimleri "en iyi" ve "en kötü" diye sıralamak, yöneticiler arasında haksız karşılaştırmalara yol açar.
• Yüksek cevap sayısını temsiliyet sanmak: Binlerce cevap, belirli bir grubun sistematik olarak eksik kaldığı gerçeğini düzeltmez.
• Ortalama puanlarla oran formülünü karıştırmak: Bu yazıdaki formül oranlar (örneğin olumlu cevap oranı) içindir. 1–5 arası ortalama puanlarda hata payı, puanların standart sapmasıyla hesaplanır.

Hata payını bilmek, anket sonuçlarını daha temkinli ama daha güvenle yorumlamanızı sağlar: Hangi farkın gerçek, hangisinin tesadüf olduğunu ayırabilir, yöneticilerin enerjisini gerçekten önemli alanlara yönlendirebilirsiniz. Ölçümün kendisinin ne kadar tutarlı olduğunu ise anketlerde güvenilirlik ve geçerlilik yazımızda anlattık.

Sık sorulan sorular