İstatistikler ve Büyük Veri

Skaler rasgele bir değişken XXX pdf ile bir vektör parametresi üstel ailesine ait olduğunu varsayın fX( x | θ ) = h ( x ) exp( ∑i = 1sηben( θ ) Tben( x ) - A ( θ ) )fX(x|θ)=h(x)tecrübe⁡(Σben=1sηben(θ)Tben(x)-bir(θ)) f_X(x|\boldsymbol \theta) = h(x) \exp\left(\sum_{i=1}^s \eta_i({\boldsymbol \theta}) T_i(x) - A({\boldsymbol …

11 variance  mean  exponential-family  sufficient-statistics 

Geçen gün bir a / b test şirketi tarafından hazırlanan bir web seminerinde yerleşik "Data Scientist" deneyi yeniden çalıştırarak sonuçlarınızı doğrulamanız gerektiğini açıkladı. Öncül,% 95 güven seçerseniz,% 5 (1/20) yanlış pozitif şansı vardır. Denemenizi aynı kısıtlamalarla yeniden çalıştırırsanız, şimdi 1/400 var (bunu 0.05 ^ 2 = 1/400 olarak belirlediklerini varsayıyorum) …

11 probability  hypothesis-testing  statistical-significance  ab-test 

Düzenleme teknikleri ile kement, sırt regresyonu, elastik ağ ve benzerlerinden bahsediyorum. Yatarak tedavi gören hastaların kalış sürelerinin tahmin edildiği demografik ve tanı verilerini içeren sağlık hizmeti verileri üzerinde bir öngörme modeli düşünün. Bazı bireyler için, başlangıç ​​süresi boyunca ilişkili olan çoklu LOS gözlemleri (yani birden fazla IP bölümü) vardır. Örneğin, …

11 multiple-regression  random-effects-model  regularization 

Bir kamuoyu araştırması verilerini kullanarak bir adayın oylarının ana belirleyicileri hakkında bilgi sunmam gerekiyor. Önem verdiğim tüm değişkenleri kullanarak lojistik bir gerileme yaptım, ancak bu bilgiyi sunmanın iyi bir yolunu bulamıyorum. Müvekkilim sadece etkinin büyüklüğünü değil, etkinin büyüklüğü ile bu nitelikteki nüfusun büyüklüğü arasındaki etkileşimi önemsiyor. Bununla bir grafikte nasıl …

11 logistic  data-visualization  survey 

Let XXX bir eş dağılımını takip etmek ve YYY normal bir dağılım izleyin. X hakkında ne söylenebilir?XYXY\frac X Y ? Bunun için bir dağıtım var mı? Ortalama sıfır ile iki normalin oranının Cauchy olduğunu buldum.

11 probability  normal-distribution  uniform  ratio 

R'deki çok düzeyli modellerle karmaşık anket verilerinin nasıl analiz edileceğine dair tavsiye arıyorum. Bir seviyeli modellerde surveyeşit olmayan seçim olasılıkları için paketi ağırlık olarak kullandım , ancak bu paket çok düzeyli modelleme için işlevlere sahip değil. lme4Paket düzeyli modelleme için harika ama ben kümeleme farklı düzeylerde ağırlıkları dahil etmek bildiğim …

11 r  mixed-model  weighted-sampling  cluster-sample 

Varsayalım bağımsızdır.X= X1+ X2+ ⋯ + XnX=X1+X2+⋯+Xn X = X_1 + X_2+\cdots+ X_n Xben∼ N( 0 , σ2)Xi∼N(0,σ2)X_i \sim N(0,\sigma^2) Sorum şu, dağıtım ne işe yarıyor Z= X2X21+ X22+ ⋯ + X2nZ=X2X12+X22+⋯+Xn2 Z = \frac{X^2}{X_1^2 + X_2^2 + \cdots + X_n^2} takip et? Buradan biliyorum ki olarak ifade edilen ki-kare …

11 normal-distribution  chi-squared  beta-distribution  ratio 

GLM'de, pdf f ile temel dağılım için bir skaler YYY ve varsayarsak Y ( y | θ , τ ) = h ( y , τ ) exp ( θ y - A ( θ )θθ\thetafY( y|θ , τ) = h ( y, τ) exp( θ y- A ( θ …

11 generalized-linear-model  exponential-family 

İki giriş x-ray görüntüleri arasında benzerlik metriği hesaplayan bir sınıflandırma sorunu üzerinde çalışıyorum. Görüntüler aynı kişiden geliyorsa ('sağ' etiketi), daha yüksek bir metrik hesaplanır; iki farklı kişinin giriş görüntüleri ('yanlış' etiketi) daha düşük bir metrikle sonuçlanır. Yanlış sınıflandırma olasılığını hesaplamak için tabakalı 10 kat çapraz doğrulama kullandım. Şu anki örnek …

11 classification  confidence-interval  cross-validation  matlab 

Marjinal model ve rastgele etkiler modeli ve aralarında nasıl seçim yapılacağı hakkında herhangi bir bilgi ararken bazı bilgiler buldum ama daha fazla veya daha az matematiksel soyut açıklama (örneğin burada: https: //stats.stackexchange) .com / a / 68753/38080 ). Bir yerde, bu iki yöntem / model ( http://www.biomedcentral.com/1471-2288/2/15/ ) arasında bir …

11 mixed-model  random-effects-model  glmm  gee  marginal-model 

Geniş anlamda durağan stokastik süreçlerin ergodisitesini örnek yollarından nasıl kontrol edersiniz? Ergodisiteyi tek bir örnek yolundan kontrol edebilir miyiz? Yoksa birden fazla örnek yola mı ihtiyacımız var? Ergodisiteyi kontrol etmenin bir motivasyonu, zaman içindeki örnek yolun ortalamasını, popülasyon ortalaması için tahmin olarak güvenle kullanabilmenizi sağlamak için zaman serilerinde mi?

11 time-series  ergodic 

Üniversitemde ML yapıyorum ve Profesör Gauss süreçlerinde bazı şeyleri açıklamaya çalışırken Beklenti (E) teriminden bahsetti. Ancak açıkladığı şekilde E'nin ortalama μ ile aynı olduğunu anladım. Doğru mu anladım? Aynı ise, her iki sembolün neden kullanıldığını biliyor musunuz? Ayrıca E'nin E ( ) gibi bir işlev olarak kullanılabileceğini gördüm , ancak …

11 machine-learning  gaussian-process  linear-algebra 

Franklin M. Fisher'ın Ekonometri'de Kimlik Sorunu kitabını okuyordum ve olasılık fonksiyonunu görselleştirerek tanımlamayı gösterdiği kısım ile karıştırdım. Sorun şu şekilde basitleştirilebilir: Bir regresyon için , burada , ve parametrelerdir. Varsayalım bir katsayısına sahiptir bire eşittir. Daha sonra uzayındaki olasılık fonksiyonu , gerçek parametreler vektörüne ve skaler katlarına karşılık gelen ışın …

11 mathematical-statistics  maximum-likelihood  geometry 

Denetimli bir makine öğrenimi sınıflandırma algoritmasının performansını değerlendirmeye çalışıyorum. Gözlemler 99 kişiden oluşan nominal sınıflara (şimdilik 2, ancak bunu çok sınıflı problemlere genelleştirmek istiyorum) düşüyor. Cevaplamak istediğim sorulardan biri, algoritmanın girdi sınıfları arasında sınıflandırma doğruluğunda önemli bir fark göstermesi. İkili sınıflandırma durumu için, eşleştirilmiş bir Wilcoxon testi kullanarak (altta yatan …

11 r  hypothesis-testing  nonparametric 

Binom dağılımının beta dağılımına çok benzer olduğu ve aynı görünmelerini sağlamak için her iki pdf'de sabitleri yeniden parametrelendirebileceğim anlaşılıyor. Peki neden beta dağıtımına ihtiyacımız var? Belirli bir amaç için mi? Teşekkürler!

11 bayesian  mathematical-statistics  binomial  beta-distribution