İstatistikler ve Büyük Veri

Birçok yardım sitesini araştırdım ve karışık bir modelde daha karmaşık iç içe terimlerin nasıl belirleneceği konusunda kafam hala karıştı. Ayrıca kullanımı gibi karıştı :ve /ve |etkileşimleri belirterek kullanarak rasgele faktörlerle yuva içinde lmer()de lme4yer pakette R. Bu sorunun amacı için, verilerimi bu standart istatistiksel modelle doğru şekilde tasvir ettiğimi varsayalım: …

26 r  mixed-model  lme4-nlme 

Regresyon modeline gecikmeli bir bağımlı değişken eklemenin yasal olup olmadığı konusunda kafam çok karıştı. Temel olarak, eğer bu model Y'deki değişim ile diğer bağımsız değişkenler arasındaki ilişkiye odaklanırsa sağ tarafa gecikmeli bir bağımlı değişken eklemek, diğer IV'lerden önceki katsayıların Y'nin önceki değerlerinden bağımsız olduğunu garanti edebilir. Bazıları LDV'nin dahil edilmesinin …

26 regression  lags  misspecification 

Binom, negatif binom ve Poisson regresyonu arasındaki fark ve bu regresyonun hangi durumlar için en uygun olduğu ile ilgili bazı bilgiler arıyorum. SPSS'de yapabileceğim, bu gerilemelerden hangisinin durumum için en iyisi olduğunu söyleyebilecek herhangi bir test var mı? Ayrıca, regresyon kısmında görebileceğim bir seçenek olmadığından, SPSS'de nasıl Poisson veya negatif …

26 spss  references  binomial  poisson-distribution  negative-binomial 

AIC modelinin işe yaraması için yerine getirilmesi gereken ön koşullar nelerdir? Böyle bir karşılaştırma yaptığımda bu soruyu daha yeni çözdüm: > uu0 = lm(log(usili) ~ rok) > uu1 = lm(usili ~ rok) > AIC(uu0) [1] 3192.14 > AIC(uu1) [1] 14277.29 Bu sayede logdeğişken dönüşümünü haklı çıkardım usili. Fakat örneğin bağımlı …

26 regression  model-selection  aic  model-comparison  nested-models 

Anladığım kadarıyla çapraz doğrulama ve model seçimi ile iki şeyi ele almaya çalışıyoruz: P1 . Örneğimizle antrenman yaparken popülasyonda beklenen zararı tahmin et P2 . Bu tahmin konusundaki belirsizliğimizi ölçün ve rapor edin (varyans, güven aralıkları, önyargı vb.) Standart uygulama, tekrarlayan çapraz doğrulama yapmak gibi görünmektedir, çünkü bu tahmin edicimizin …

26 estimation  cross-validation  references 

Birçok durumda 0 ile 1 arasında bir sayı içeren bir logit modelim var, ancak bunu nasıl yorumlayabiliriz? 0.20 logit ile bir dava alalım Bir vakanın B grubuna karşı A grubuna ait olma ihtimalinin% 20 olduğunu iddia edebilir miyiz? logit değerini yorumlamanın doğru yolu bu mu?

26 regression  logistic  logit 

Bu, Caret yeniden örnekleme yöntemlerini sorgulamaya benzer , ancak bu sorunun bir kısmını gerçekten kararlaştırılmış bir şekilde yanıtlamadı. caret'in tren fonksiyonu sunuyor cvve repeatedcv. Söylemedeki fark nedir: MyTrainControl=trainControl( method = "cv", number=5, repeats=5 ) vs MyTrainControl=trainControl( method = "repeatedcv", number=5, repeats=5 ) cvK-folds (parametresi number) kümesini kırar anlıyorum ve daha …

26 r  machine-learning  caret 

Bazı prediktif modelleme teknikleri, sürekli prediktörlerin kullanımı için daha fazla tasarlanmıştır, diğerleri ise kategorik veya ayrık değişkenlerin ele alınması için daha iyidir. Elbette bir tipi diğerine dönüştürme teknikleri var (ayrıklaştırma, yapay değişkenler, vs.). Ancak, her iki giriş türünü aynı anda, özelliklerin türünü değiştirmeden aynı anda ele almak üzere tasarlanmış öngörücü …

26 classification  predictive-models  categorical-data  continuous-data  discrete-data 

PCA, LDA, CCA ve PLS arasında nasıl bir ilişki var? Hepsi "spektral" ve lineer cebirsel ve çok iyi anlaşılmış görünüyorlar (çevrelerinde inşa edilmiş 50+ yıl teorisi). Çok farklı şeyler için kullanılırlar (boyutsallığın azaltılması için PCA, sınıflandırma için LDA, regresyon için PLS) ama yine de çok yakın bir ilişki içinde olduklarını …

26 pca  discriminant-analysis  partial-least-squares  canonical-correlation 

Makine Öğrenimi konusunda yeniyim ve kendi başıma öğrenmeye çalışıyorum. Son zamanlarda bazı ders notlarını okuyordum ve temel bir sorum vardı. 13 no'lu slaytta “En Küçük Kare Tahmini Gauss modelinde Maksimum Olabilirlik Tahmini” ile aynıdır. Basit bir şey gibi görünüyor, ama bunu göremiyorum. Biri lütfen burada neler olduğunu açıklayabilir mi? Matematiği …

26 regression  bayesian  least-squares 

Zaman serilerinde acemi bir geçmişe sahibim (bazı ARIMA tahmini / tahmini) ve tam olarak anlamadığım bir problemle karşı karşıyayım. Herhangi bir yardım çok takdir edilecektir. Hepsi aynı zaman aralığında ve hepsi aynı frekansta, hepsi benzer bir veri tipini tanımlayan çoklu zaman serilerini analiz ediyorum. Her seri yalnızca bir değişkendir, bakacağım …

26 time-series 

Yazılım sonuçta istatistikçileri eskimiş kılacak mı? Bir bilgisayara programlanamayan ne yapılır?

26 machine-learning  dataset  careers 

İki ortalama oranı için güven aralığı için sınırları türetmek istiyorum . Varsayalım ve bağımsız olarak, ortalama oranı . Çözmeye çalıştım: ancak bu denklem birçok durumda çözülemedi (kök yok). Yanlış bir şey mi yapıyorum? Daha iyi bir yaklaşım var mı? Teşekkürlerx 1 ~ N ( θ 1 , σ 2 ) …

26 normal-distribution  mean 

Özellik sayısı ile "sağlam" bir sınıflayıcı yetiştirmek için gereken gözlem sayısı arasındaki ilişki hakkında herhangi bir makale / kitap / fikir var mı? Örneğin, bir eğitim seti olarak iki sınıftan 1000 özellik ve 10 gözlem, ve bir test seti olarak diğer 10 gözlemim olduğunu varsayalım. Bazı sınıflandırıcı X'i eğitiyorum ve …

26 machine-learning 

Orada zaten bir oldu mükemmel tartışma destek vektör makineleri sınıflandırmasını nasıl işlediğine fakat çok destek vektör makineleri regresyona genelleme konusunda kafam karıştı. Beni aydınlatmak isteyen var mı?

26 regression  machine-learning  svm