İstatistikler ve Büyük Veri

"Veri ile yatmanın" yaygın bir yolu, değişikliklerin gerçekte olduğundan daha önemliymiş gibi görünmesini sağlayan y ekseni ölçeğini kullanmaktır. Bilimsel yayınları veya öğrencilerin laboratuvar raporlarını incelerken, bu “veri görselleştirme günahı” ndan sık sık üzülüyorum. Ancak, "y eksenini daima sıfırdan başlat" zor ve hızlı bir kural değildir. Örneğin, Edward Tufte işaret bir …

45 data-visualization 

Farklı ülkelerdeki ölüm oranlarındaki (1000 ppl başına) trendleri göstermek için bir grafik oluşturuyorum ve arsadan gelmesi gereken hikaye, 1932'den sonra trendi artan tek Almanya (açık mavi çizgi) olmasıdır. ilk (temel) denemem Benim düşünceme göre, bu grafik ne anlatmak istediğimizi gösteriyor ama süper sezgisel değil. Eğilimler arasındaki ayrımın daha açık bir …

45 data-visualization 

Destek vektör makinesini kullanırken, RBF gibi lineer çekirdeğe göre doğrusal olmayan çekirdeği seçme konusunda yönergeler var mı? Bir zamanlar, doğrusal olmayan çekirdeğin, özelliklerin sayısı büyük olduğunda iyi performans gösterme eğiliminde olmadığını duydum. Bu konuda referans var mı?

45 machine-learning  classification  svm  references  kernel-trick 

Doğrusal modeller sınıfımda iki yordayıcının bağıntılı olması ve her ikisinin de bir modele dahil edilmesi durumunda birinin önemsiz olacağını öğrendim. Örneğin, bir evin büyüklüğünü ve yatak odası sayısının korele olduğunu varsayın. Bu iki öngörücüyü kullanan bir evin maliyetini tahmin ederken, ikisi de aynı bilgiyi sağladığı için bunlardan biri düşebilir. Sezgisel …

45 regression  multiple-regression  p-value  linear-model  multicollinearity 

Lojistik regresyon anlayışımda bir şeyleri özlediğimi biliyorum ve gerçekten herhangi bir yardım için minnettar olurum. Anladığım kadarıyla, lojistik regresyon girdiler için verilen '1' sonucunun olasılığının, ters-lojistik fonksiyonundan geçen girdilerin doğrusal bir birleşimi olduğunu varsayar. Bu, aşağıdaki R kodunda örneklenmiştir: #create data: x1 = rnorm(1000) # some continuous variables x2 = …

45 r  regression  logistic  generalized-linear-model  simulation 

İktisat alanında (bence) düzenli aralıklı zaman serileri için ARIMA ve GARCH ve modelleme noktası süreçleri için Poisson, Hawkes var, peki düzensiz (düzensiz) aralıklı zaman serileri modelleme girişimleri hakkında - en azından herhangi bir ortak uygulama var mı? ? (Bu konuda biraz bilginiz varsa, ilgili wiki makalesini de genişletebilirsiniz .) Baskı …

45 time-series  garch  poisson-process  point-process  unevenly-spaced-time-series 

Rastgele değişken verildiğinde Y=max(X1,X2,…,Xn)Y=max(X1,X2,…,Xn)Y = \max(X_1, X_2, \ldots, X_n) XiXiX_i IID tekdüze değişkenler nerede , Y'nin PDF'sini nasıl hesaplarım YYY?

45 pdf  maximum 

R'yi bir web arayüzünde, kurulmasına gerek kalmadan kullanma imkanı var mı? Çalıştırmayı sevdiğim sadece küçük bir senaryom var ama uzun bir kurulum prosedürü olmadan bir şans vermek istiyorum. Teşekkür ederim.

45 r 

“Sapma” nedir, nasıl hesaplanır ve istatistiki olarak farklı alanlarda kullanımları nelerdir? Özellikle, CART’daki kullanımlarıyla (ve R’de rpart’taki uygulaması) kişisel olarak ilgileniyorum. Bunu soruyorum çünkü wiki makalesi biraz eksik görünüyor ve görüşleriniz en iyi şekilde karşılanacak.

45 r  cart  rpart  deviance 

Eleştirel düşünme için iş görüşmesi yetenek testinde bir soru ile karşılaştım. Böyle bir şey gider: Zorganya Cumhuriyeti'nin çok garip gelenekleri var. Çiftler sadece kız çocukları olmasını ister, çünkü sadece kadınlar ailenin zenginliğini devralabilir, bu nedenle erkek çocukları varsa, kız olana kadar daha fazla çocuğu vardır. Bir kızları varsa çocuk sahibi …

45 probability  ratio 

Hem genel olarak hem de özellikle doğrusal regresyon bağlamında yanlılık sapma değişiminin sezgisel bir açıklamasını arıyorum.

45 regression  variance  bias 

Özellikle, lm(y ~ x1 + x2)ve arasında bir fark olup olmadığını bilmek istiyorum glm(y ~ x1 + x2, family=gaussian). Bu özel glm vakasının lm'ye eşit olduğunu düşünüyorum. Yanlış mıyım?

45 r  normal-distribution  generalized-linear-model  lm 

Gradient Descent'in Yerel Minima'da takılma sorunu var. Küresel minima bulmak için degrade iniş üstel zamanlar çalıştırmak gerekir. Herhangi biri bana sinir ağları öğreniminde uygulandığı gibi gradyanlı iniş alternatiflerini artıları ve eksileriyle ilgili söyleyebilir.

45 machine-learning  svm  neural-networks 

Hepimiz alışılmadık bir X belirleyicisi ile bir sonuç arasında nedensel bir bağlantı kurmaya çalışan gözlemsel çalışmalara aşinayız, bir çoklu regresyon modelinde akla gelebilecek her potansiyel karıştıcıyı dahil ederek. Böylece tüm kafa karıştırıcıları “kontrol” edersek, argüman gider, çıkar tahmincisinin etkisini izole ederiz. İstatistik derslerimin çeşitli profesörleri tarafından yapılan açık sözlere dayanarak, …

45 multiple-regression  ancova  observational-study 

'Normalizasyon' ve 'Ölçekleme' verileri arasındaki fark nedir? Şimdiye dek her iki terimin de aynı işlemi ifade ettiğini düşündüm ama şimdi bilmediğim / anlamadığım bir şey olduğunu fark ediyorum. Ayrıca Normalizasyon ve Ölçekleme arasında bir fark varsa, Normalizasyon'u ne zaman kullanmalıyız, ancak Ölçekleme'yi kullanmamalıyız (ve bunun tersi? Lütfen bir örnek veriniz.

45 data-transformation  scales  normality-assumption  normalization