«outliers» etiketlenmiş sorular

Bir virüs dolaşımı (2002'de ABD'de West Nile Virus gibi) veya insanların direncinin azalması veya yiyecek veya su kontaminasyonu veya sayısındaki artış nedeniyle salgınlar sırasında (sayılarda ani artış) meydana gelen vaka ve ölüm sayısında bir artış meydana gelir. sivrisinekler. Bu salgınlar her 1 ila 5 yılda bir ortaya çıkabilecek aykırı değerler …

17 time-series  forecasting  epidemiology  outliers 

Sağlam PCA ( Candes ve ark 2009 veya daha iyisi henüz Netrepalli ve ark 2014 tarafından geliştirilen ), çok değişkenli aykırı değer tespiti için popüler bir yöntemdir , ancak Mahalanobis mesafesi , kovaryans matrisinin sağlam ve düzenli bir tahmini verildiğinde aykırı tespiti için de kullanılabilir . Bir yöntemi diğerine göre …

17 pca  outliers  covariance-matrix  robust  anomaly-detection 

Aylık zaman serisi verilerim var ve aykırı değerlerin tespiti ile tahmin yapmak istiyorum. Bu benim veri setimin bir örneğidir: Jan Feb Mar Apr May Jun Jul Aug Sep Oct Nov Dec 2006 7.55 7.63 7.62 7.50 7.47 7.53 7.55 7.47 7.65 7.72 7.78 7.81 2007 7.71 7.67 7.85 7.82 7.91 …

16 r  time-series  forecasting  arima  outliers 

Finansal zaman serisi verilerinden (yani tickdata) aykırı değerleri ve hataları (nedeni ne olursa olsun) kaldırmak için bazı sağlam teknikler arıyorum. Tick-by-tick mali zaman serisi verileri çok dağınık. Borsa kapatıldığında büyük (zaman) boşluklar içerir ve borsa tekrar açıldığında büyük sıçramalar yapar. Borsa açık olduğunda, her türlü faktör, fiyat seviyelerinde yanlış (gerçekleşmemiş) …

16 time-series  outliers 

Aşağıdaki kutu grafikte gördüğünüz gibi dört yöntemle test edilmiş bir tahmin modelim var. Modelin öngördüğü özellik 0-8 aralığındadır. Orada olduğunu fark edebilirsiniz biri üst sınır aykırı ve üç alt sınır aykırı tüm yöntemlerle gösterdi. Bu örnekleri verilerden kaldırmanın uygun olup olmadığını merak ediyorum. Yoksa bu tahmin modelini geliştirmek için bir …

15 regression  machine-learning  multiple-regression  predictive-models  outliers 

Wikipedia'dan Etkili gözlemler , regresyon modelinin tahminleri üzerinde nispeten büyük etkisi olan gözlemlerdir. Wikipedia'dan Kaldıraç noktaları , varsa, bağımsız değişkenlerin aşırı veya dış değerlerinde yapılan gözlemlerdir, böylece komşu gözlemlerin eksikliği, yerleştirilmiş regresyon modelinin söz konusu gözleme yakın olacağı anlamına gelir. Aşağıdaki Wikipedia neden karşılaştırması Etkili bir nokta tipik olarak yüksek …

15 regression  outliers  leverage 

Normal dağılım parametrelerini tahmin etmek için ortak yaklaşım, ortalama ve örnek standart sapma / varyansını kullanmaktır. Ancak, bazı aykırı değerler varsa, medyan ve medyandan medyan sapması çok daha sağlam olmalıdır, değil mi? Bazı veri kümeleri ben, tahmin normal dağılım çalıştı klasik çok daha iyi bir uyum sağlıyor gibi görünmektedir N …

15 normal-distribution  estimation  outliers  robust  unbiased-estimator 

Bir sürü tahminim var (yaklaşık 1000) ve hepsinin uzun dönem esneklik tahminleri olması gerekiyordu. Bunların yarısından biraz fazlası A yöntemi ve geri kalanı B yöntemi kullanılarak tahmin edilmektedir. Bir yerde "Sanırım B yöntemi A yönteminden çok farklı bir şey tahmin ediyor , çünkü tahminler çok (% 50-60) daha yüksek ". …

15 mean  outliers  robust  references 

Aşağıdaki grafikte gördüğüm sonucu anlamaya çalışıyorum. Genellikle, Excel'i kullanmaya ve doğrusal regresyon çizgisine sahip olmaya eğilimliyim, ancak aşağıdaki durumda R kullanıyorum ve komutla polinom regresyonu alıyorum: ggplot(visual1, aes(ISSUE_DATE,COUNTED)) + geom_point() + geom_smooth() Yani sorularım bununla sınırlı: Mavi regresyon çizgisi etrafındaki gri alan (ok # 1) nedir? Bu, polinom regresyonunun standart …

14 r  regression  data-visualization  outliers 

Aykırı değerleri tespit etmenin basit bir yolu olup olmadığını merak ediyorum. Temel olarak, katılımcıların bir hafta içinde fiziksel aktiviteye katılma sayısı ile bir hafta içinde ev dışında yemek yeme sayısı (fast food) arasında bir korelasyon olan bir projem için, bir dağılım grafiği çizdim ve kelimenin tam anlamıyla aşırı veri noktaları. …

14 correlation  outliers 

In Kahneman ve Deaton (2010) , yazarlar şunları yazın:††^\dagger Bu gerileme, varyansın% 37'sini açıklar ve 0.67852 kök ortalama kare hatası (RMSE) içerir. Aykırı değerleri ve mantıksız gelir raporlarını ortadan kaldırmak için, log geliri ile tahmini arasındaki farkın mutlak değerinin RMSE'nin 2,5 katını aştığı gözlemleri bıraktık. Bu yaygın bir uygulama mı? …

13 regression  outliers 

Makine öğrenimi bağlamında Outlier ve Anomaly arasındaki fark nedir? Anladığım kadarıyla, her ikisi de aynı şeyi ifade ediyor.

13 outliers  terminology  anomaly-detection 

En yakın komşuların en iyi yordayıcılar olduğu varsayımıyla veri kümem var. Görselleştirilmiş iki yönlü eğimin mükemmel bir örneği Birkaç değerin eksik olduğu bir vakamız olduğunu varsayalım, komşulara ve eğilime göre kolayca tahmin edebiliriz. R'de karşılık gelen veri matrisi (egzersiz için kukla örnek): miss.mat <- matrix (c(5:11, 6:10, NA,12, 7:13, 8:14, …

13 r  prediction  outliers  data-imputation  multiple-imputation 

L1 düzenli lineer regresyonu takmak için koordinat inişine karşı LARS [1] kullanmanın avantajları ve dezavantajları nelerdir? Ben esas olarak performans yönleriyle ilgileniyorum (sorunlarım Nyüzbinlerce ve p<20'de olma eğilimindedir ). Ancak, diğer görüşler de takdir edilecektir. edit: Soruyu gönderdiğimden beri, chl, Friedman ve arkadaşları tarafından koordinat inişinin diğer yöntemlerden önemli ölçüde …

13 regression  lasso  regularization  regression  references  lasso  regularization  elastic-net  r  distributions  aggregation  clustering  algorithms  regression  correlation  modeling  distributions  time-series  standard-deviation  goodness-of-fit  hypothesis-testing  statistical-significance  sample  binary-data  estimation  random-variable  interpolation  distributions  probability  chi-squared  predictor  outliers  regression  modeling  interaction 

İki grup veri tek bir veri kümesinden ayırmaya çalışıyorum. Popülasyonlardan birinin normal olarak dağıldığını ve numunenin en az yarısı kadar olduğunu varsayabilirim. İkincisinin değerleri, birincinin değerlerinden daha düşük veya daha yüksektir (dağılım bilinmemektedir). Ne yapmaya çalışıyorum normal dağıtılmış nüfusu diğerine kapsayacak üst ve alt sınırları bulmaktır. Benim varsayım bana başlangıç …

13 dataset  outliers  expectation-maximization