İstatistikler ve Büyük Veri

Genel olarak sınıflandırma ile ilgili bir sorum var. F bazı verilerle verilen bir olasılık kümesi ortaya çıkaran bir sınıflandırıcı olsun. D Normalde biri şöyle der: p: p (c | D)> 0.5 ise 1. sınıfa, aksi takdirde 0 atarız (bunun bir ikili olmasına izin verin). sınıflama). Benim sorum şu, ne öğrenirsem, …

49 machine-learning  classification  binary-data  threshold 

Stokastik gradyan inişinin, her bir tekrarlamayı eğitim veri setinin farklı bir örneğiyle güncelleyerek geri yayılım kullanarak bir sinir ağını optimize etmek için kullanılabileceğini biliyorum. Parti büyüklüğü ne kadar büyük olmalıdır?

49 machine-learning  neural-networks  gradient-descent  backpropagation 

Bir web sitesinde kitap puanları örneğini alın. A kitabı, ortalama 4.25 puanla 10.000 kişi ve varyansı ile değerlendirilmektedir . Benzer şekilde, B Kitabı 100 kişi tarafından derecelendirilmiştir ve ile 4.5 .σ=0.5σ=0.5\sigma = 0.5σ=0.25σ=0.25\sigma = 0.25 Şimdi Kitap A'nın büyük örneklem büyüklüğü nedeniyle, "ortalama 4.25'e sabitlendi". Şimdi 100 kişi için, eğer …

49 t-test  mean  sample-size 

Aynı temel istatistiksel yöntemin bütün versiyonları nasıl?

49 regression  self-study  anova  generalized-linear-model  t-test 

Hem önyükleme hem de jackknife yöntemleri yanlılığı ve standart bir tahminin hatasını tahmin etmek için kullanılabilir ve her iki yeniden örnekleme yönteminin mekanizmaları çok da farklı değildir: değiştirme ile örnekleme ve her seferinde bir gözlem yapma. Ancak, jackknife araştırma ve uygulamada bootstrap kadar popüler değildir. Jackknife kullanmak yerine bootstrap kullanmanın …

49 r  confidence-interval  bootstrap  jackknife 

Alındığı Tıbbi Araştırma Pratik İstatistik Douglas Altman sayfa 285 yazıyor: ... herhangi iki miktar X ve Y için, X, XY ile ilişkilendirilecektir. Gerçekten, X ve Y, rastgele sayılardan oluşan örnekler olsa bile, X ve XY arasındaki korelasyonun 0.7 olmasını beklerdik. Bunu R'de denedim ve durum böyle görünüyor: x <- rnorm(1000000, …

49 correlation  random-variable  intuition 

Doğru anlarsam, 1-5 arası kitap derecelendirme Likert puanlarıdır. Yani, benim için bir 3 mutlaka bir başkası için bir 3 olmayabilir. Sıralı bir ölçek IMO. Kişi gerçekten sıralı skalaları ortalamamalı, ancak kesinlikle mod, ortanca ve yüzdelik harfleri alabilir. Bu yüzden hiç 'Tamam' olduğunu kuralları esnetmeye nüfusun büyük bir kısmı anlar beri …

49 mean  ordinal-data  likert 

Girdilin doğrusal bir kombinasyonunu doğrusal olmayan bir çıktıya dönüştürmek için lojistik işlevini kullandığımızdan, lojistik regresyon nasıl doğrusal bir sınıflandırıcı olarak değerlendirilebilir? Doğrusal regresyon, gizli katmanı olmayan bir sinir ağı gibidir; peki neden sinir ağları doğrusal olmayan sınıflandırıcılar olarak kabul edilir ve lojistik regresyon neden doğrusaldır?

49 logistic  classification  neural-networks 

31 değerli örnek veri setim var. Gerçek ortalamanın 10'a eşit olup olmadığını test etmek için R kullanarak iki kuyruklu t testi yaptım: t.test(x=data, mu=10, conf.level=0.95) Çıktı: t = 11.244, df = 30, p-value = 2.786e-12 alternative hypothesis: true mean is not equal to 10 95 percent confidence interval: 19.18980 23.26907 …

49 r  statistical-significance  t-test  p-value 

İstatistik bilgilerimi genişletmeye çalışıyorum. OLS regresyon - Ben fiziksel testler geçmişinden istatistiksel teste “tarife dayalı” bir yaklaşımla geliyorum , sürekli olduğunu söylüyoruz , normal dağılmış - OLS regresyon . Okuduğumda şu terimlerle karşılaştım: rastgele etki modeli, sabit etki modeli, marjinal model. Benim sorularım: Çok basit bir ifadeyle, bunlar nedir? Aralarındaki …

49 random-effects-model  fixed-effects-model  marginal 

Bu şartları 502847894789 kez görmüş olmama rağmen, yaşamım boyunca hassasiyet, özgüllük, kesinlik, kesinlik ve hatırlama arasındaki farkı hatırlayamıyorum. Oldukça basit kavramlar, ancak isimler benim için son derece sezgisel değil, bu yüzden birbirleriyle karıştırılmaya devam ediyorum. Bu kavramları düşünmenin iyi bir yolu nedir, böylece isimler anlamlı olmaya başlar? Başka bir deyişle, …

49 terminology  accuracy  sensitivity-specificity 

In Idiot Beyin: Bir Neuroscientist Your Head Gerçekten Kadar nedir açıklar Dean Burnett yazdı Yükseklik ve zeka arasındaki ilişki genellikle yaklaşık olarak çağırılır , yükseklik ve istihbarat sadece ilişkili görünmektedir anlam içinde kişilik.0.20.20.2111555 Bana göre, bu yanlış ses: Ben, o kişi hakkında bildiğimiz tek şey diğer ölçü ise (burada yükseklik), …

48 correlation  neuroscience 

Tekrarlayan Sinir Ağları ve Özyinelemeli Sinir Ağları vardır. Her ikisi de genellikle aynı kısaltma ile gösterilir: RNN. Wikipedia'ya göre , Recurrent NN aslında Recursive NN'dir, ancak açıklamayı gerçekten anlamıyorum. Dahası, Doğal Dil İşleme için hangisinin daha iyi olduğunu (örneklerle ya da öylesine) bulmuyorum. Gerçek şu ki, Socher öğreticisinde NLP için …

48 machine-learning  neural-networks  deep-learning  natural-language 

Bir örnek olduğunu varsayalım ortak dağıtım X ve Y . Bunu nasıl hipotezini test edebilirim X ve Y olan bağımsız ?( Xn, Yn) , n = 1 .. N(Xn,Yn),n=1..N(X_n,Y_n), n=1..NXXXYYYXXXYYY ve Y'nin ortak ya da marjinal dağıtım yasaları üzerinde bir varsayım yapılmaz (en azından ortak normallik, çünkü bu durumda bağımsızlık …

48 hypothesis-testing  references  independence 

Yayınlanan bir makale ( pdf ) bu 2 cümleyi içermektedir: Ayrıca, yanlış raporlama yanlış kuralların uygulanmasından veya istatistiksel testin bilgisi eksikliğinden kaynaklanabilir. Örneğin, bir ANOVA'daki toplam df, bir testinin rapor edilmesinde df hatası olarak alınabilir veya araştırmacı, elde etmek için , bir veya testinin bildirilen p değerini ikiye bölebilir bir …

48 hypothesis-testing  chi-squared