İstatistikler ve Büyük Veri

Bir akış veri setim var, örnekler birer birer hazır. Onlar üzerinde çok sınıflandırma yapmam gerekiyor. Öğrenme sürecine bir eğitim örneği beslediğimde, örneği atmam gerekiyor. Aynı zamanda, etiketlenmemiş veriler üzerinde öngörüde bulunmak için en son modeli kullanıyorum. Bildiğim kadarıyla bir sinir ağı, örnekleri birer birer besleyerek ve örnek üzerinde ileriye doğru …

33 machine-learning  svm  neural-networks 

Sinir ağları ile modelleme konusunda yeniyim, ancak gözlemlenen verilere uygun tüm mevcut veri noktalarına sahip bir sinir ağı oluşturmayı başardım. Sinir ağı, nnet paketi ile R'de yapıldı: require(nnet) ##33.8 is the highest value mynnet.fit <- nnet(DOC/33.80 ~ ., data = MyData, size = 6, decay = 0.1, maxit = 1000) …

33 r  neural-networks 

RA Fisher'ın geç katkılarından biri, kararsız aralıklar ve inanç temelli argümanlardı . Bununla birlikte, bu yaklaşım, frekansçı veya Bayesian ilkeli argümanları kadar popüler değildir. İnanılmaz argüman nedir ve neden kabul edilmedi?

33 inference  philosophical  fiducial 

Sonlu ve sonsuz varyans arasındaki fark nedir? İstatistik bilgilerim oldukça basit; Wikipedia / Google burada pek yardımcı olmadı.

33 variance  intuition  partial-moments 

Ekonometrideki fonksiyonları belirtmek için 10 tabanına oturtmak yerine doğal logaritmayı (ln) kullanmamızın sebebi nedir?

33 econometrics 

Poisson dağıtılmış verilerine (ya da muhtemelen diğer dağıtımlara) uyarlanmış bir kutu grafiği varyantı olup olmadığını bilmek ister misiniz? Gauss dağılımında, L = Q1 - 1.5 IQR ve U = Q3 + 1.5 IQR’ya yerleştirilen bıyıklar, boxplot’ın kabaca yüksek aykırı değerler (L'nin altındaki noktalar) olduğu kadar kabaca (L'nin altındaki noktalar) olacağı …

33 data-visualization  poisson-distribution  boxplot 

Dört farklı zaman aralığında saatlik ölçümlerim var: Bir evin içindeki ısı tüketimi Evin dışındaki sıcaklık Güneş radyasyonu Rüzgar hızı Evin içindeki ısı tüketimini tahmin edebilmek istiyorum. Hem yıllık bazda hem de günlük bazda net bir mevsimsel eğilim vardır. Farklı seriler arasında açık bir ilişki olduğu için, onlara bir ARIMAX modeli …

33 time-series  modeling  arima 

Bilgisayar vizyonu için bazı standart teknikleri (Gauss Bulanıklığı, eşikleme, Hough-Transform vb.) Kullanarak statik bir görüntüdeki (.jpeg, .png vb.) Madeni paraları algılayan bir bilgisayar programı yazdım. Belirli bir görüntüden toplanan sikkelerin oranlarını kullanarak, hangi sikkelerin hangisi olduğuna kesin olarak karar verebilirim. Bununla birlikte, güven düzeylerime eklemek ve ayrıca A tipi (yarıçap …

33 image-processing 

Standart "kümeleme" hatasını ve R'de nasıl çalıştırılacağını anlamaya çalışıyorum (Stata'da önemsiz). RI'de ya plmkendi işlevimi kullanmakta ya da yazmakta başarısız oldum. diamondsVeriyi ggplot2paketten kullanacağım . Her iki değişkenle de sabit efektler yapabilirim > library(plyr) > library(ggplot2) > library(lmtest) > library(sandwich) > # with dummies to create fixed effects > fe.lsdv …

33 r  panel-data  standard-error  fixed-effects-model  clustered-standard-errors 

Oylama gibi bazı veri setleri için daha iyi performans gösterdiğini biliyorum. Poisson regresyonu neden normal lineer regresyon veya lojistik regresyon üzerinde kullanılır? Bunun için matematiksel motivasyon nedir?

33 count-data  poisson-regression 

Diyelim ki bilinen varyans ve ortalama ile rastgele değişkenimiz var . Soru şudur: Bazı fonksiyonlar için in varyansı nedir ? Farkında olduğum tek genel yöntem delta yöntemidir, ancak yalnızca aproximation verir. Şimdi ilgileniyorum , ancak bazı genel yöntemleri bilmek de güzel olurdu.XXXf(X)f(X)f(X)f(x)=x−−√f(x)=xf(x)=\sqrt{x} Düzenleme 29.12.2010 Taylor serisini kullanarak bazı hesaplamalar yaptım, …

33 variance  random-variable  delta-method 

İki histogram verildiğinde, benzer olup olmadıklarını nasıl değerlendirebiliriz? İki histograma basitçe bakmak yeterli mi? Bire bir haritalamanın basit olması bir histogramın biraz farklı ve biraz kayması durumunda istenen sonucu alamayacağımız sorunudur. Baska öneri?

33 histogram  image-processing 

Bu dönem tıp öğrencilerine istatistik öğretmeye yardım etmek üzereyim. Bu öğrencilerin korkusuyla ilgili istatistik öğrenmekten korkan birçok korku hikayesi duydum. Birisi bu korku ile ne yapılması gerektiğini önerebilir mi? (Ya bunu tartışan insanlarla bağlantı kurar ya da kendi deneyimlerinden önerilerde bulunur)

33 teaching 

Hayatta kalma analizi hakkında bilgi edinmek için iyi bir kitap / öğretici arıyorum. Ayrıca R.’de hayatta kalma analizi yapmanın referansları ile de ilgileniyorum

33 r  survival  references 

GBDT model ailesinin aşağıdaki gibi birkaç uygulaması vardır: GBM XGBoost LightGBM Catboost. Bu farklı uygulamalar arasındaki matematiksel farklar nelerdir ? Catboost, bu uygulama işaretine göre sadece varsayılan parametrelerini kullanarak bile diğer uygulamalardan daha iyi performans gösteriyor gibi görünüyor , ancak yine de çok yavaş. Tahminime göre catboost, varsayılan değişkenleri kullanmıyor, …

33 boosting  xgboost