Örneklem büyüklüğü önemlidir; ancak seçim yöntemi, parti tanımı, kapsam, ölçüm kalitesi ve analiz, daha büyük bir örneklemin meşru olarak neyi destekleyebileceğini belirler.
Daha fazla gözlem otomatik olarak daha iyi kanıt değildir
Hayır. Gözlemler ilgili olduğunda, tutarlı biçimde ölçüldüğünde ve uygun bir yöntemle seçildiğinde örneklem büyüklüğünü artırmak rastlantısal belirsizliği azaltabilir. Ancak yanlı bir örneklemi otomatik olarak düzeltemez. Çok sayıda birim tek bir elverişli konumdan, tek bir üretim döneminden veya kasıtlı olarak tercih edilen bir gruptan alınırsa, ek gözlemler tüm partiyi temsil etmek yerine aynı seçim yanlılığını tekrarlayabilir.
Seçim ve kapsam sonucu şekillendirir
Yararlı bir değerlendirme, sonucun uygulanacağı popülasyonu veya partiyi tanımlamakla başlar. Daha sonra örneklemin kaynağı, seçim prosedürü, zamanlaması, dışlamalar ve bu popülasyonla ilişkisi açık olmalıdır. Rastgele seçim, hangi birimlerin örnekleme gireceğini kişisel tercihlerin belirlemesini önlemeye yardımcı olabilir. NIST/SEMATECH e-Handbook, kabul örneklemesinin bir partinin muhtemelen kabul edilebilir olup olmadığına ilişkin bir kararı desteklemek için örneklem kullandığını açıklar. Bu karar yine de önceden belirlenmiş bir plana bağlıdır ve partinin kesin kalitesini ortaya koymaz.
Güvenilirlik yöntemin tamamına bağlıdır
Bu nedenle örneklem büyüklüğü; örnekleme tasarımı, beklenen değişkenlik, ölçüm prosedürü, kusur tanımı ve istatistiksel karar kuralıyla birlikte değerlendirilmelidir. Daha küçük ve iyi dağıtılmış bir örneklem, parti düzeyindeki bir soruyu elle seçilmiş daha büyük birim grubundan daha güvenilir biçimde yanıtlayabilir. Buna karşılık, rastgele seçilmiş bir örneklem bile karar kuralı için çok küçükse veya ölçümler tutarsızsa yetersiz olabilir.
Sonuç gerçek kapsama uygun olmalıdır. Kaç birimin incelendiğini, nereden geldiklerini, nasıl seçildiklerini, neyin ölçüldüğünü ve analizin hangi popülasyonu ele aldığını bildirin. Bu ayrıntılar olmadan, tek başına büyük bir sayı sonucun temsili veya güvenilir olduğunu kanıtlamaz.