İstatistikler ve Büyük Veri

Herhangi bir serbest istatistik ders kitabı var mı?

119 teaching  references 

İşyerinde bunu, patronum normalleşmeyi hiç duymadığı için tartışıyorduk. Lineer Cebir'de Normalizasyon, bir vektörün boyuna bölünmesini ifade eder. Ve istatistiklerde, Standardizasyon bir ortalamanın çıkarılmasını ve ardından SD'ye bölünmesini ifade ediyor gibi görünmektedir. Ancak, diğer olasılıklarla da birbirleriyle değiştirilebilir gibi görünüyorlar. Bir çeşit evrensel puan oluştururken , bu, farklı araçlara ve farklı …

118 descriptive-statistics  normalization  standardization 

Korelasyon, nedensellik anlamına gelmez, çünkü korelasyon için birçok açıklama olabilir. Ancak nedensellik korelasyon anlamına mı gelir? Sezgisel olarak nedensellik varlığının mutlaka bir korelasyonun olduğu anlamına geldiğini düşünüyorum. Ancak sezgim istatistiklerde bana her zaman iyi hizmet etmedi. Nedensellik korelasyon anlamına mı gelir?

118 correlation  causality 

Doğrusal regresyon modelleri kullanıyorum ve engelleme terimini kaldırmak için koşulların ne olduğunu merak ediyorum. Birinde kesişen, diğeri olmayan iki farklı regresyondan elde edilen sonuçları karşılaştırırken, kesişme olmadan fonksiyonun 2'sinin çok daha yüksek olduğunu fark ettim . Kesişim teriminin kaldırılmasının geçerli olduğundan emin olmak için izlemem gereken belirli koşullar veya varsayımlar …

118 regression  linear-model  r-squared  intercept 

Uygulayabilmek ve kullanabilmek için EM algoritmasını iyi anlamaya çalışıyorum. Tam günümü EM'nin radardan gelen konum bilgisini kullanarak uçağı izlemek için kullandığı teori ve makaleyi okuyarak geçirdim. Açıkçası, altında yatan fikri tam olarak anladığımı sanmıyorum. Birisi beni daha basit bir problem için EM'nin birkaç yinelemesini (3-4) gösteren sayısal bir örneğe işaret …

117 regression  probability  mathematical-statistics  intuition  expectation-maximization 

Olasılık ve istatistik arasındaki fark nedir ve neden birlikte çalışıldı?

116 probability  teaching  mathematical-statistics 

Son zamanlarda, Klammer ve ark. p-değerlerinin düzgün dağılması gerektiğini ifade eder. Yazarlara inanıyorum, ama neden böyle olduğunu anlayamıyorum. Klammer, AA, Park, CY ve Stafford Noble, W. (2009) SEQUEST XCorr Fonksiyonunun İstatistiksel Kalibrasyonu . Proteome Araştırma Dergisi . 8 (4): 2106-2113.

115 p-value  uniform 

Bu başlangıçta, doğal metni sınıflandırmak için bir modele yaptığımız bir çalışma olarak ortaya çıktı, ama basitleştirdim ... Belki de çok fazla. Mavi bir arabanız var (bazı objektif bilimsel önlemlerle - mavi). 1000 kişiye gösterdin. 900 mavi olduğunu söylüyor. 100 değil. Bu bilgiyi arabayı göremeyen birine veriyorsunuz. Tek bildikleri, 900 kişinin …

114 probability 

Kendi anlayışım için, tahmin edilen katsayıların standart hatalarının hesaplanmasının örneğin lm()fonksiyonun çıktısıyla geldiği R, ancak tespit edemediği gibi manuel olarak kopyalanmasıyla ilgileniyorum . Kullanılan formül / uygulama nedir?

114 r  regression  standard-error  lm 

Çok değişkenli normal bir vektörümüz var Y∼N(μ,Σ)Y∼N(μ,Σ){\boldsymbol Y} \sim \mathcal{N}(\boldsymbol\mu, \Sigma) . Bölümleme düşünün μμ\boldsymbol\mu ve YY{\boldsymbol Y} içine μ=[μ1μ2]μ=[μ1μ2]\boldsymbol\mu = \begin{bmatrix} \boldsymbol\mu_1 \\ \boldsymbol\mu_2 \end{bmatrix} Y=[y1y2]Y=[y1y2]{\boldsymbol Y}=\begin{bmatrix}{\boldsymbol y}_1 \\ {\boldsymbol y}_2 \end{bmatrix} Benzer bir bölüme sahip ΣΣ\Sigma içine [Σ11Σ21Σ12Σ22][Σ11Σ12Σ21Σ22] \begin{bmatrix} \Sigma_{11} & \Sigma_{12}\\ \Sigma_{21} & \Sigma_{22} \end{bmatrix} Daha sonra, …

114 normal-distribution  conditional-probability 

Bu terimlerle tam olarak belirtilen soruyu görmedim ve bu yüzden yeni bir soru yapıyorum. Bilmek istediğim şey sinir ağının tanımı değil, derin bir sinir ağıyla gerçek farkı anlamak. Daha fazla bağlam için: Sinir ağının ne olduğunu ve geri yayılımın nasıl çalıştığını biliyorum. Bir DNN'nin birden çok gizli katmana sahip olması …

114 neural-networks  deep-learning 

İstatistik danışmanlığı çalışmalarımda bu soruyu yeterince sık alıyorum, burada yayınlayacağımı düşündüm. Aşağıda verilen bir cevabım var, fakat başkalarının söyleyeceklerini duymak istekliydim. Soru: Normalde dağınık olmayan iki değişkeniniz varsa, korelasyon için Spearman's rho kullanmanız gerekir mi?

113 correlation  normality-assumption  pearson-r  spearman-rho 

Bu xkcd çizgi roman (Frequentists vs. Bayesians) , açıkça yanlış bir sonuç çıkaran sıkça istatistikçi ile dalga geçiyor . Ancak bana göre, mantığının standart frekansçı metodolojiyi takip etmesi anlamında gerçekten doğru olduğu görülüyor. Öyleyse benim sorum şu: "Frekansist metodolojiyi doğru şekilde uyguluyor mu?" Eğer hayırsa: bu senaryoda doğru, sıkça bir …

113 bayesian  frequentist 

Boyutsallığın azaltılması için ana bileşen analizi (PCA) kullanılabilir. Böyle bir boyutluluk azaltma gerçekleştirildikten sonra, orijinal değişkenler / özellikler az sayıda temel bileşenden yaklaşık olarak nasıl yeniden yapılandırılabilir? Alternatif olarak, birkaç temel bileşen veriden nasıl çıkarılabilir veya atılabilir? Başka bir deyişle, PCA nasıl tersine çevrilir? PCA'nın tekil değer ayrışması (SVD) ile …

113 pca  dimensionality-reduction  svd 

Onları etkileyici bulduğum için, bu topluluktaki kişilerin en ilginç istatistiksel paradoks olarak neden bulduğunu ve neden olduğunu duymak istiyorum.

112 paradox