Yanıtlar:
Benim düşüncem, bunun çalışma alanına bağlı olmadığı (ve olması gerektiği). Örneğin, iyi daha düşük anlamlılık düzeyinde çalışabilir , sen tarihsel ya da köklü sonuçlarla bir çalışma çoğaltmak için çalışıyoruz (örneğin I çeşitli çalışmalarda aklınıza gelebilecek eğer Stroop etkisi neden olmuştu, son birkaç yıldaki bazı tartışmalara). Bu, hipotezi test etmek için klasik Neyman-Pearson çerçevesi içinde daha düşük bir "eşik" olarak düşünülür. Bununla birlikte, istatistiksel ve pratik (veya esaslı) önem bir başka konudur.
Herkesin önceden belirlenmiş bir alfa düzeyini, örneğin 0.01'den düşük kullanması nadir olabilir, ancak insanların gözlemlenen bir P değerinin daha düşük olduğuna dair yanlış inançta insanların 0.01'den küçük bir zımni alfa talep ettikleri neredeyse nadir değildir. 0.01, 0.01'den küçük bir Neyman-Pearson alfa ile aynıdır.
Bu literatüre çok aşina değilim, ancak bazı fizikçilerin istatistiksel testlerde çok daha düşük eşikler kullandıklarına inanıyorum, ancak bunlar hakkında biraz farklı konuşuyorlar. Örneğin, bir ölçü teorik tahminden üç standart sapma ise, “üç sigma” sapması olarak tanımlanır. Temel olarak, bu, ilgili parametrenin α = .01 ile az testinde öngörülen değerden istatistiksel olarak farklı olduğu anlamına gelir. İki sigma kabaca a = .05'e eşittir (aslında 1.96 σ olacaktır). Yanılmıyorsam, fizikteki standart hata seviyesi 5 sigma, α = 5 * 10 ^ -7
Ayrıca, nörobilim veya epidemiyolojide, çoklu karşılaştırmalar için rutin olarak bazı düzeltmeler yapmak giderek yaygınlaşmaktadır. Her bir test için hata seviyesi bu nedenle p <.01'den düşük olabilir
Gaël Laurans'ın belirttiği gibi, çoklu karşılaştırma problemine giren istatistiksel analizler daha muhafazakar eşikler kullanma eğilimindedir. Bununla birlikte, özünde 0.05 kullanıyorlar, ancak test sayısı ile çarpılıyorlar. Bu prosedürün (Bonferroni düzeltmesi) hızla inanılmaz derecede küçük p değerlerine yol açabileceği açıktır. Bu yüzden geçmişte insanlar (sinirbilimde) p <0.001'de durdu. Günümüzde diğer çoklu karşılaştırma düzeltmeleri yöntemleri kullanılmaktadır (bakınız Markov rasgele alan teorisi).