İstatistikler ve Büyük Veri

ilişkili rasgele değişkenlerin çarpımı nedir?kkk

12 variance  random-variable 

Genelleştirilmiş doğrusal bir model yapıyorum, burada normal olandan farklı bir aile belirtmem gerekiyor. Artıkların beklenen dağılımı nedir? Örneğin, artıklar normal olarak mı dağıtılmalı?

12 generalized-linear-model  residuals  normality-assumption 

Kendi Naive Bayes çanta modelimi prototiplendiriyorum ve özellik olasılıklarını hesaplamakla ilgili bir sorum vardı. Diyelim ki iki dersim var, herkesin kullandığı için spam değil spam kullanacağım. Örnek olarak "viagra" kelimesini ele alalım. Eğitim setimde 10 e-posta var, 5 spam ve 5 spam olmayan. "spam", 5 spam dokümanın tamamında görünür. Eğitim …

12 classification  conditional-probability  naive-bayes 

Kilitli . Bu soru ve cevapları kilitlidir çünkü soru konu dışıdır, ancak tarihsel önemi vardır. Şu anda yeni yanıtları veya etkileşimleri kabul etmiyor. R için çok yeniyim. Şu anda makine öğrenmeyi öğreniyorum. Çok üzgünüm, eğer bu soru çok basit görünüyorsa. R'de iyi bir özellik seçim paketi bulmaya çalışıyorum. Boruta paketinden …

12 r  feature-selection 

Aşağıdakiler aovve lmçağrılardaki p-değerleri arasındaki farkları ne açıklar ? Fark sadece farklı türde kareler toplamı hesaplamalarından mı kaynaklanıyor? set.seed(10) data=rnorm(12) f1=rep(c(1,2),6) f2=c(rep(1,6),rep(2,6)) summary(aov(data~f1*f2)) summary(lm(data~f1*f2))$coeff

12 r  regression  anova  linear-model  sums-of-squares 

8000 küme ve 4 milyon gözlem içeren bir veri setim var. Ne yazık ki istatistiksel yazılımım Stata, lojistik regresyon için panel veri işlevini kullanırken oldukça yavaş çalışıyor: xtlogit% 10 alt örnekle bile. Ancak, panel dışı logitişlevi kullanıldığında sonuçlar çok daha erken görünür. Bu nedenle logit, sabit etkileri açıklayan değiştirilmiş verilerden …

12 logistic  categorical-data  stata  fixed-effects-model 

Veri uyumu dağıtımı için minimum 20 örnek büyüklüğünün dikkate alınmasını öneren referanslarım var. Bunda bir anlam var mı? Teşekkürler

12 sample-size 

Rastgele Bir Orman, sayım verilerini uygun şekilde tahmin etmek üzere eğitilebilir mi? Bu nasıl olacaktı? Oldukça geniş bir değer yelpazem var, bu yüzden sınıflandırma gerçekten mantıklı değil. Eğer regresyon kullanırsam sonuçları kısaltır mıydım? Burada oldukça kayboldum. Herhangi bir fikir?

12 r  regression  random-forest  prediction  count-data 

Bir histogram, çekirdek yoğunluğu ve kayıplara (işaretler değişti) dönüştürülen mali günlük getirilerinin takılmış normal dağılımına ve bu verilerin normal bir QQ grafiğine sahibim: QQ grafiği kuyrukların doğru takılmadığını açıkça göstermektedir. Ancak histograma ve takılan normal dağılıma (mavi) bir göz atarsam, 0.0 civarındaki değerler bile doğru şekilde takılmaz. Bu nedenle, QQ …

12 data-visualization  normality-assumption  histogram  qq-plot 

Şu anda bir ikili sınıflandırıcı çalıştırıyorum. ROC eğrisini çizdiğimde, başlangıçta iyi bir kaldırma elde ederim, sonra yönü değiştirir ve diyagonalden sonra elbette yukarı doğru çaprazlanır ve eğriyi eğimli bir S şekline dönüştürür. Bu etki için bir yorum / açıklama ne olabilir? Teşekkürler

12 roc 

Bir biyofizik deneyinin verilerini analiz etmek için, şu anda oldukça doğrusal olmayan bir modelle eğri uydurma yapmaya çalışıyorum. Model işlevi temelde şöyle görünür: y=ax+bx−1/2y=ax+bx−1/2y = ax + bx^{-1/2} Burada özellikle değeri büyük ilgi görüyor.bbb Bu işlev için bir çizim: (Model işlevinin, sistemin ayrıntılı bir matematiksel açıklamasına dayandığını ve çok iyi …

12 curve-fitting  nonlinear 

Gösterime aşina olduğum gibi: yben j= β0+ βbenxben j+ uj+ eben j=β0 j+βbenxbenj+eben jybenj=β0+βbenxbenj+uj+ebenj=β0j+βbenxbenj+ebenj\begin{align} y_{ij} &= \beta_0 + \beta_i x_{ij} + u_j + e_{ij}\\ &= \beta_{0j} + \beta_i x_{ij} + e_{ij} \end{align} burada veβ0j=β0+ujβ0j=β0+uj\beta_{0j}=\beta_{0}+u_j yij=β0+β1xij+u0j+u1jxij+eij=β0j+β1jxij+eijybenj=β0+β1xbenj+u0j+u1jxbenj+ebenj=β0j+β1jxbenj+ebenj\begin{align} y_{ij} &= \beta_0 + \beta_1 x_{ij} + u_{0j} + u_{1j} x_{ij} + e_{ij} \\ &= …

12 mixed-model  mathematical-statistics 

Aynı ortak değişkenler ve dağıtım ailesi seti göz önüne alındığında, farklı bağlantı işlevlerine sahip modelleri nasıl karşılaştırabilirim? Burada doğru cevabın "AIC / BIC" olduğunu düşünüyorum, ama% 100 emin değilim. Farklı bir bağlantıları varsa iç içe geçmiş modellerin olması mümkün müdür?

12 generalized-linear-model  aic  link-function 

Tenis'in kendine özgü üç kademeli bir puanlama sistemi var ve daha iyi bir oyuncuyu belirlemek için bir deney olarak bir maç açısından herhangi bir istatistiksel faydası olup olmadığını merak ediyorum. Bilmediğiniz kişiler için, normal kurallarda bir oyun ilk 4 puana kadar kazanır, ancak 2 puan önde olduğunuzda (yani 4-2 ise …

12 probability  inference  games 

İki rastgele değişkenim var ve Y > 0 .X>0X>0X > 0Y>0Y>0Y > 0 Ben tahmin edebilir düşünülürse ben tahmin edebilir nasıl Cov ( log ( X ) , log ( Y ) ) ?Cov(X,Y),Cov(X,Y),\text{Cov}(X, Y),Cov(log(X),log(Y))?Cov(log⁡(X),log⁡(Y))?\text{Cov}(\log(X), \log(Y))?

12 data-transformation  covariance  random-variable