İstatistikler ve Büyük Veri

29 ünite için aşağıdaki 4 değişkeni tahmin etmem gerekiyor. Kabaca 2 yıllık geçmiş verilerim var, burada 1 ve 14 ve 27 aynı dönem (ya da yılın zamanı). Sonunda, bir Oaxaca-kör tarzı ayrışması yaptığım , ağ d , ağırlık c ve p .WWWw dwdwdw cwcwcppp time W wd wc p 1 …

17 time-series  forecasting  multivariate-analysis  var 

Aşağıdakileri içeren bir deney yapıyorum: DV: Dilim tüketimi (sürekli veya kategorik olabilir) IV: Sağlıklı mesaj, sağlıksız mesaj, mesaj yok (kontrol) (insanların rastgele atandığı 3 grup - kategorik) Bu, dilimin sağlıklılığı hakkında manipüle edilmiş bir mesajdır. Aşağıdaki IV'ler bireysel fark değişkenleri olarak düşünülebilir: Dürtüsellik (bu kategorik olabilir, yani yüksek veya düşük …

17 anova  multiple-regression  continuous-data  ancova 

Hatayı modellerken neden Gauss varsayımını kullandığımızı merak ediyorum. In Stanford ML kursu Prof. Ng iki şekilde temelde bunu anlatır: Matematiksel olarak uygundur. (En Küçük Kareler montajı ile ilgilidir ve psödoinverse ile çözülmesi kolaydır) Merkezi Limit Teoremi nedeniyle, süreci etkileyen çok sayıda temel olgu olduğunu varsayabiliriz ve bu bireysel hataların toplamı …

17 regression  normality-assumption  pac-learning 

Basit soru: R'deki GLM ailesi argümanında lognormal dağılım nasıl belirtilir? Bunun nasıl başarılabileceğini bulamadım. Lognormal (veya üstel) neden aile argümanında bir seçenek değil? R-Arşivlerinde bir yerde, bir lognormal belirtmek için GLM'de gaussian olarak ayarlanan aile için günlük bağlantısını kullanmak zorunda olduğumu okudum. Bununla birlikte, bu saçmalıktır, çünkü bu doğrusal olmayan …

17 r  distributions  generalized-linear-model  lognormal 

Rastgele değişkenler ve dağılımları ile ilgili bazı gösterimlerin anlamları yanı sıra, anlamların doğru gösterimleriyle karıştırıyorum. Aşağıda, doğru olduğunu düşündüğüm şeyleri ve anlamadığım şeyleri listeleyeceğim ve giriş / düzeltmeleri çok seveceğim. Her bir noktayı / soruyu referans kolaylığı için bir numara ile etiketledim. Bunun gibi tek bir sorudaki öğeleri listelemek uygun …

17 probability  random-variable 

Not: Bir ay sonra hiçbir doğru cevapları, ben reposted var SO Arka fon Bir modelim var, fff , buradaY=f(X)Y=f(X)Y=f(\textbf{X}) XX\textbf{X} , parametrelerinden örnek matrisidir ve Y , model çıktılarının n \ times 1 vektörüdür.n×mn×mn \times mmmmYYYn×1n×1n \times 1 fff hesaplama açısından yoğundur, bu nedenle f'yi (X, Y) noktaları fffüzerinden çok …

17 r  multivariate-analysis  splines  interpolation  gaussian-process 

Aşağıdaki veri kümesinde 95. yüzdelik dilimi hesaplamaya çalışıyordum. Birkaç çevrimiçi referansla karşılaştım. Yaklaşım 1: Örnek verilere dayanarak İlki elde etmek söyler TOP 95 Percentseçmek sonra veri kümesinin ve MINya AVGçıkan setin. Aşağıdaki veri kümesi için bunu yapmak bana verir: AVG: 29162 MIN: 0 Yaklaşım 2: Normal Dağılım Var İkincisi ise …

17 r  dataset  quantiles  sql 

Üzerinde çalıştığım bir proje için farklı sınıflandırma yöntemleri araştırıyorum ve Rastgele Ormanları denemekle ilgileniyorum. Ben ilerlerken kendimi eğitmeye çalışıyorum ve CV topluluğu tarafından sağlanan yardımları takdir ediyorum. Verilerimi eğitim / test setlerine ayırdım. R'deki rastgele ormanlarla yapılan deneylerden (randomForest paketini kullanarak), daha küçük sınıfım için yüksek yanlış sınıflandırma oranı ile …

17 r  machine-learning  random-forest 

Korelasyonun nedensellik değil, ilişkinin gücü ve yönü olduğunu biliyorum. Basit doğrusal regresyon nedenselliği ima eder mi? Yoksa bunun için çıkarımsal (t testi, vb.) Bir istatistiksel test gerekli midir?

17 regression  correlation  causality 

İstatistikleri anlamaya çalışan bir tıp öğrencisiyim (!) - lütfen nazik olun! ;) Hayatta kalma analizi (Kaplan-Meier, Log-Rank ve Cox regresyonu) dahil olmak üzere makul miktarda istatistiksel analiz içeren bir makale yazıyorum. İki gruptaki (yüksek riskli veya düşük riskli hastalar) hastaların ölümleri arasında anlamlı bir fark bulabileceğimi bulmaya çalışırken verilerim üzerinde …

17 regression  survival  hazard 

Bazı toplu frekans verilerim var. Bir satırı , verilere son derece iyi uyuyor gibi görünür, ancak satırda döngüsel / periyodik kıpırdatma vardır. Kümülatif frekansın ne zaman belirli bir değere ulaşacağını tahmin etmek istiyorum c . Artıkları ve takılmış değerleri karşılaştırdığımda güzel bir sinüzoidal davranış elde ederim.y=ax+by=ax+by=ax+bccc Şimdi, başka bir komplikasyon …

17 time-series  regression 

"Rejim değiştirme modelleri" olarak da adlandırılan "Gizli Markov Modelleri" nin muhteşem dünyasını keşfediyorum. Trendleri ve dönüm noktalarını tespit etmek için R'deki bir HMM'yi uyarlamak istiyorum. Modeli olabildiğince jenerik olarak inşa etmek istiyorum, böylece birçok fiyata test edebiliyorum. Herkes bir kağıt önerebilir mi?Birkaç tanesini gördüm (ve okudum), ancak uygulaması kolay basit …

17 r  time-series  finance  hidden-markov-model 

İki sağkalım eğrisinin karşılaştırmasını özetlemenin bir yolu, tehlike oranını (HR) hesaplamaktır. Bu değeri hesaplamak için en az iki yöntem vardır. Logrank yöntemi. Kaplan-Meier hesaplamalarının bir parçası olarak, her bir gruptaki ( ve ) gözlemlenen olayların (genellikle ölümler) sayısını ve hayatta kalma farkı olmayan bir sıfır hipotezi ( ve ) varsayarak …

17 survival  hazard 

Ben doğrusal bir regresyon (null hipotezi hiçbir korelasyon olan) bazı hipotez testleri gerçekleştirmek için nasıl çalışıyorum. İçinde bulunduğum konuyla ilgili her kılavuz ve sayfa bir t testi kullanıyor gibi görünüyor. Ama doğrusal regresyon için t-testinin aslında ne anlama geldiğini anlamıyorum. Tamamen yanlış bir anlayışım veya zihinsel bir modelim yoksa, iki …

17 regression  t-test 

Bu bir terminoloji meselesidir. Bazen insanların derin sinir ağlarına "çok katmanlı algılayıcılar" adını verdiğini görüyorum, neden bu? Öğretilen bir algılayıcı, ağırlıkların (sırt destekli değil) eğitiminin belirli bir yolunu kullanan ikili eşik çıktısı olan tek katmanlı bir sınıflandırıcıdır (veya regresör). Algılayıcının çıkışı hedef çıktıyla eşleşmezse, girdi vektörünü ağırlıklara ekler veya çıkarırız …

17 neural-networks  perceptron