İstatistikler ve Büyük Veri

İstatistik, makine öğrenmesi, veri analizi, veri madenciliği ve veri görselleştirmesi ile ilgilenen kişiler için soru cevap

1
K-katlamalı CV ile orijinal (?) Model seçimi
Regresyon modelleri arasında seçim yapmak için k-katlamalı CV kullanırken, genellikle standart hatası SE ile birlikte her model için CV hatasını ayrı ayrı hesaplıyorum ve en düşük CV hatasına sahip modelin 1 SE'sinde en basit modeli seçiyorum (1 standart hata kuralı için buraya bakınız ). Ancak, son zamanlarda bana bu şekilde …


3
İlişkisiz ancak doğrusal bağımlı değişkenler kümesi
İlişkisiz ancak doğrusal olarak bağımlı olan bir dizi değişkenine sahip olmak mümkün müdür ?KKK yani vecor(xi,xj)=0cor(xi,xj)=0cor(x_i, x_j)=0∑Ki=1aixi=0∑i=1Kaixi=0 \sum_{i=1}^K a_ix_i=0 Evet ise bir örnek yazabilir misiniz? EDIT: Cevaplardan mümkün olmadığını takip ediyor. O en azından mümkün olabilir mi nerede tahmini korelasyon katsayısı tahmin edilmektedir değişkenlerinin örnekleri ve , ile ilgisiz bir …

1
Laplace hataları ile doğrusal regresyon
Doğrusal bir regresyon modeli göz önünde bulundurun: yi=xi⋅β+εi,i=1,…,n,yi=xi⋅β+εi,i=1,…,n, y_i = \mathbf x_i \cdot \boldsymbol \beta + \varepsilon _i, \, i=1,\ldots ,n, burada εi∼L(0,b)εi∼L(0,b)\varepsilon _i \sim \mathcal L(0, b) , yani , 000 ortalama ve bbb ölçek parametresi ile Laplace dağılımı , birbirinden bağımsızdır. \ Boldsymbol \ beta parametresinin maksimum olasılık …

1
Bu otomatik kodlayıcı ağının işlevi düzgün şekilde yapılamıyor (evrişimli ve makspool katmanlarla)
Otomatik kodlayıcı ağları normal sınıflandırıcı MLP ağlarından çok daha karmaşık görünmektedir. Lasagne kullanarak yapılan birkaç denemeden sonra , yeniden yapılandırılmış çıktıda elde ettiğim her şey, en iyi şekilde , giriş basamağının gerçekte ne olduğunu ayırt etmeden MNIST veritabanının tüm görüntülerinin bulanık bir ortalamasına benzeyen bir şeydir . Seçtiğim ağ yapısı …

3
PCA bileşenlerini döndürerek her bileşendeki varyansı eşitleyin
Veri kümesinde PCA gerçekleştirerek ve son birkaç PC'yi atarak veri kümesinin boyutsallığını ve gürültüsünü azaltmaya çalışıyorum. Bundan sonra, kalan bilgisayarlarda bazı makine öğrenme algoritmaları kullanmak istiyorum ve bu nedenle algoritmaların daha iyi çalışması için PC'lerin varyansını eşitleyerek verileri normalleştirmek istiyorum. Basit bir yol, birim değerlere olan varyansı normalleştirmektir. Ancak, ilk …

3
Regresyon katsayıları için bu sapma sapması dengesi nedir ve nasıl türetilir?
Olarak , bu kağıt , ( Varyans Bileşenleri Bayes Çıkarım tezat teşkil hata sadece kullanarak , yazar istemlerde Harville, 1974) "iyi bilinen" ilişki ", doğrusal bir regresyon için burada (y−Xβ)′H−1(y−Xβ)=(y−Xβ^)′H−1(y−Xβ^)+(β−β^)′(X′H−1X)(β−β^)(y−Xβ)′H−1(y−Xβ)=(y−Xβ^)′H−1(y−Xβ^)+(β−β^)′(X′H−1X)(β−β^)(y-X\beta)'H^{-1}(y-X\beta)=(y-X\hat\beta)'H^{-1}(y-X\hat\beta)+(\beta-\hat\beta)'(X'H^{-1}X)(\beta-\hat\beta)y=Xβ+ϵ,y=Xβ+ϵ,y=X\beta+\epsilon,ϵ∼N(0,H).ϵ∼N(0,H).\epsilon\sim\mathcal{N}(0, H). Bu nasıl biliniyor? Bunu kanıtlamanın en basit yolu nedir?

1
Bu kıvrık zar haddeleme mekaniğinin sonucunun olasılığı nasıl hesaplanır?
Bu soru , bir Rol Yapma Oyununda başarı olasılığı hakkında sorular soruyor. Ancak, soru ve cevapları zar tamircisinin bazı karmaşıklıklarını kapsamaz. Özellikle, botları (olası bir sonuç) hiç kapsamaz. Bir oyuncunun, oyunda bu soru ile ilgisi olmayan bazı tamircilere dayanan bir zar havuzu vardır. Bir zar havuzu, bir oyuncunun oynayabileceği değişken …
9 dice 

1
Doğrusal ve lojistik regresyon katsayıları neden aynı yöntem kullanılarak tahmin edilemiyor?
Bir makine öğrenme kitabında doğrusal regresyon parametrelerinin (diğer yöntemlerin yanı sıra) gradyan kökenli olarak tahmin edilebileceğini okurken lojistik regresyon parametreleri genellikle maksimum olabilirlik tahmini ile tahmin edilmektedir. Bir acemi (bana) neden doğrusal / lojistik regresyon için farklı yöntemlere ihtiyacımız olduğunu açıklamak mümkün mü? aka lineer regresyon için neden MLE değil …

1
Bir keyfi ve simetrik dağılımın bileşimi açısından her zaman doğru eğimli bir dağılımı yeniden yazabilir miyiz?
İki farklılaştırılabilir ve simetrik bir dağılım düşünün FXFX\mathcal{F}_X. Şimdi ikinci iki farklılaştırılabilir dağılımı düşününFZFZ\mathcal{F}_Z sertlik şu anlama gelir: (1)FX⪯cFZ.(1)FX⪯cFZ.(1)\quad\mathcal{F}_X\preceq_c\mathcal{F}_Z. nerede ⪯c⪯c\preceq_c van Zwet [0] 'ın dışbükey düzeni, böylece (1)(1)(1) şuna eşittir: (2)F−1ZFX(x) is convex ∀x∈R.(2)FZ−1FX(x) is convex ∀x∈R.(2)\quad F^{-1}_ZF_X(x)\text{ is convex $\forall x\in\mathbb{R}.$} Şimdi üçüncü iki kez farklılaştırılabilir dağılımı düşünün …

1
Bayes faktörünü güncelleme
Bayes faktörü Bayesian hipotez testinde ve Bayes modeli seçiminde iki marjinal olasılığa göre tanımlanmıştır: iid örneği verildi (x1,…,xn)(x1,…,xn)(x_1,\ldots,x_n) ve ilgili örnekleme yoğunlukları f1(x|θ)f1(x|θ)f_1(x|\theta) ve f2(x|η)f2(x|η)f_2(x|\eta), karşılık gelen önceliklerle π1π1\pi_1 ve π2π2\pi_2, iki modeli karşılaştırmak için Bayes faktörü B12(x1,…,xn)=defm1(x1,…,xn)m2(x1,…,xn)=def∫∏ni=1f1(xi|θ)π1(dθ)∫∏ni=1f2(xi|η)π2(dη)B12(x1,…,xn)=defm1(x1,…,xn)m2(x1,…,xn)=def∫∏i=1nf1(xi|θ)π1(dθ)∫∏i=1nf2(xi|η)π2(dη)\mathfrak{B}_{12}(x_1,\ldots,x_n)\stackrel{\text{def}}{=}\frac{m_1(x_1,\ldots,x_n)}{m_2(x_1,\ldots,x_n)}\stackrel{\text{def}}{=}\frac{\int \prod_{i=1}^n f_1(x_i|\theta)\pi_1(\text{d}\theta)}{\int \prod_{i=1}^n f_2(x_i|\eta)\pi_2(\text{d}\eta)}Şu anda incelediğim bir kitapta yukarıdaki Bayes faktörününB12(x1,…,xn)B12(x1,…,xn)\mathfrak{B}_{12}(x_1,\ldots,x_n)"bireysel faktörlerin …

3
Bunu nasıl kanıtlayabilirim?
Eşitsizliği tespit etmeye çalışıyorum |Ti|=∣∣Xi−X¯∣∣S≤n−1n−−√|Tben|=|Xben-X¯|S≤n-1n\left| T_i \right|=\frac{\left|X_i -\bar{X} \right|}{S} \leq\frac{n-1}{\sqrt{n}} nerede X¯X¯\bar{X} örnek ortalamasıdır ve SSS örnek standart sapma, yani S=∑ni=1(Xi−X¯)2n−1−−−−−−−−−√S=Σben=1n(Xben-X¯)2n-1S=\sqrt{\frac{\sum_{i=1}^n \left( X_i -\bar{X} \right)^2}{n-1}}. Bunu görmek kolay ∑ni=1T2i=n−1Σben=1nTben2=n-1\sum_{i=1}^n T_i^2 = n-1 ve bu yüzden |Ti|&lt;n−1−−−−−√|Tben|&lt;n-1\left| T_i \right| < \sqrt{n-1}ama bu aradığım şeylere çok yakın değil, yararlı bir sınır da …


3
PCA sonuçlarında örüntü olmadığını nasıl anlarım?
19 değişkenli 1000'den fazla örnek veri setim var. Amacım diğer 18 değişkene (ikili ve sürekli) dayalı bir ikili değişken tahmin etmektir. Tahmin değişkenlerinin 6'sının ikili yanıtla ilişkili olduğundan eminim, ancak veri kümesini daha fazla analiz etmek ve eksik olabileceğim diğer ilişkilendirmeleri veya yapıları aramak istiyorum. Bunu yapmak için PCA ve …
9 pca 

2
Tsoutliers paketi ve auto.arima kullanarak tahmin etme ve tahmin yapma
1993'ten 2015'e kadar aylık verilerim var ve bu verilerle ilgili tahmin yapmak istiyorum. Aykırı değerleri tespit etmek için tsoutliers paketini kullandım, ancak veri setimle nasıl tahmin etmeye devam ettiğimi bilmiyorum. Bu benim kodum: product.outlier&lt;-tso(product,types=c("AO","LS","TC")) plot(product.outlier) Bu benim tsoutliers paketinden çıktı ARIMA(0,1,0)(0,0,1)[12] Coefficients: sma1 LS46 LS51 LS61 TC133 LS181 AO183 AO184 …

Sitemizi kullandığınızda şunları okuyup anladığınızı kabul etmiş olursunuz: Çerez Politikası ve Gizlilik Politikası.
Licensed under cc by-sa 3.0 with attribution required.