İstatistikler ve Büyük Veri

Let ve Y, aynı ortak dağılımına sahip iki bağımsız rastgele değişkenler U ( 0 , 1 ) yoğunluklaXXXYYYU( 0 , 1 )U(0,1)U(0,1) , 0 ≤ x ≤ 1 ise (vebaşka yerlerde 0 ).f( x ) = 1f(x)=1f(x)=10 ≤ x ≤ 10≤x≤10≤x≤1000 Let tarafından tanımlanan gerçek rasgele değişken olabilir:ZZZ ise X …

10 self-study  random-variable 

Şu anda lisansüstü düzeyde ilk uygulamalı doğrusal regresyon dersimi alıyorum ve çoklu doğrusal regresyonda öngörücü değişken dönüşümleri ile mücadele ediyorum. Kullandığım metin, Kutner ve ark. "Uygulamalı Doğrusal İstatistiksel Modeller" yaşadığım soruyu kapsamıyor gibi görünüyor. (çoklu öngörücülerin dönüştürülmesi için bir Box-Cox yöntemi olduğunu öne sürmek dışında). Bir cevap değişkeni ve birkaç …

10 data-transformation  multiple-regression 

Çevrimiçi tanışma sistemlerinin eşleşmeleri belirlemek için anket verilerini nasıl kullanabileceğini merak ediyorum. Geçmiş maçlardan sonuç verisi olduğunu varsayalım (örneğin, 1 = mutlu bir şekilde evlendi, 0 = 2. tarih yok). Şimdi diyelim ki 2 tercih soruları var, "Açık hava etkinliklerinden ne kadar hoşlanırsınız? (1 = kesinlikle beğenmedim, 5 = kesinlikle …

10 predictive-models 

Temelde yapmak istediğim tek şey bazı eğrileri kullanarak skaler yanıtı tahmin etmek. Bir regresyon (fda paketinden fRegress kullanarak) yapmak kadar var ama sonuçları (tahmin için) YENİ bir eğriler kümesine nasıl uygulanacağına dair hiçbir fikrim yok. N = 536 eğrisi ve 536 skaler yanıtı var. Şimdiye kadar yaptığım şey: Eğriler için …

10 r  functional-data-analysis 

Sosyal bilimlerde, bir şekilde dağıtılması gereken değişkenlerin, normal olarak, belirli noktalardaki dağılımlarında bir süreksizlikle sonuçlandığı sıklıkla görülür . Örneğin, "başarılı / başarısız" gibi spesifik kesintiler varsa ve bu önlemler bozulmaya tabi ise, o noktada bir süreksizlik olabilir. Önemli bir örnek (aşağıda belirtilmiştir) öğrenci standart test puanları normalde% 50-60 arasında çok …

10 normal-distribution  pdf 

Bu sorudan ve özellikle "Sorun 3" ten esinlenmiştir: Dağılımın sık, parametrik bir açıklaması sağlanmadıkça, posterior dağılımların bir meta-analize dahil edilmesi biraz daha zordur. Son zamanlarda meta-analizin Bayes modeline - öncelikli olarak bir öncelik kaynağı olarak - dahil edilmesi hakkında çok şey düşünüyordum, ancak diğer yönde nasıl devam edeceğim? Bayesian analizi …

10 bayesian  meta-analysis 

0'dan 7. güne kadar uzunlamasına veriler içeren bir grup değişkenim var. Bu uzunlamasına değişkenleri (vakalar değil) farklı gruplara kümeleyebilen uygun bir kümeleme yaklaşımı arıyorum. Bu veri kümesini ayrı ayrı analiz etmeye çalıştım, ancak sonucun makul bir şekilde açıklanması oldukça zordu. Bir SAS prosedürünün kullanılabilirliğini araştırdım PROC SIMILARITYçünkü web sitesinde bir …

10 clustering 

Boş zamanlarımda, Delphi Windows uygulamalarından gönderilen çökme raporlarını (ancak çökmeyen hata raporlarını değil) toplayan küçük bir web tabanlı sistem üzerinde çalışıyorum. Sorun giderme için, kullanıcılar donanım veya işletim sistemi sürümleri ile belirli hata ve / veya kilitlenme arasındaki ilişkileri bulmak için bir veri madenciliği özelliğine sahip olmak ister. Örnek olarak …

10 data-mining 

Sözde basit ama ilginç bir sorun olduğunu düşünerek, önceki alımlarımın tam geçmişi göz önüne alındığında, yakın gelecekte ihtiyaç duyacağım sarf malzemesini tahmin etmek için bazı kodlar yazmak istiyorum. Eminim bu tür bir problem daha genel ve iyi çalışılmış bir tanımlamaya sahiptir (birisi bunun ERP sistemlerindeki ve benzeri bazı kavramlarla ilişkili …

10 time-series  machine-learning  forecasting 

Birkaç Cox regresyon modeli oluşturdum ve bu modellerin ne kadar iyi performans gösterdiğini görmek istiyorum ve belki de bu makalelerin kullanımına benzer bir ROC eğrisi veya c-istatistiği yararlı olabilir: JN Armitage och JH van der Meulen, “Kraliyet Cerrahlar Koleji Charlson Skoru ile idari veriler kullanan cerrahi hastalarda ko-morbiditenin belirlenmesi”, British …

10 r  survival  roc 

Aylardır kısa vadeli yük tahmini ve doğruluğu artırmak için iklim / hava durumu verilerinin kullanımı üzerinde çalışıyorum. Bir bilgisayar bilimi geçmişim var ve bu nedenle ARIMA modelleri gibi istatistik araçlarıyla çalışırken büyük hatalar ve haksız karşılaştırmalar yapmaya çalışmıyorum. Birkaç şey hakkındaki görüşünüzü bilmek istiyorum: Hava verilerinin tahmin üzerindeki etkisini araştırmak …

10 time-series  forecasting  arima 

Okul yıllarımda ve üniversitede istatistikler konusunda yeterli kurs aldım. CI, p değerleri, istatistiksel anlamlılığı yorumlama, çoklu test, korelasyon, basit doğrusal regresyon (en küçük karelerle) (genel doğrusal modeller) ve tüm hipotez testleri gibi kavramları iyi anlıyorum. Daha önceki günlerin çoğunu çoğunlukla matematiksel olarak tanıştırmıştım. Ve son zamanlarda, Sezgisel Biyoistatistik kitabının yardımıyla …

10 bayesian  references  maximum-likelihood  generalized-linear-model 

Araştırmamda şu genel sorunla karşılaştım: Aynı alan üzerinde iki PPP ve dağılımı ve QQQbu dağılımlardan çok sayıda (ancak sonlu) örnek var. Örnekler bu iki dağılımdan birinden bağımsız ve özdeş olarak dağıtılır (dağılımlar ilişkili olsa da: örneğin, QQQ , PPP ve diğer bazı dağılımların bir karışımı olabilir .) Boş hipotez, numunelerin …

10 hypothesis-testing  mathematical-statistics  kullback-leibler  information-theory  bounds 

Ben iki bağımsız örnek t-testi (eşit varyans varsayarak Satterthwaite kullandım) için güç hesaplaması anlamaya çalışıyorum. İşte süreci anlamada yardımcı olduğum bir diyagram: Bu nedenle, iki popülasyon hakkında aşağıdaki ve örnek boyutları verildiğini varsaydım: mu1<-5 mu2<-6 sd1<-3 sd2<-2 n1<-20 n2<-20 0.05 üst kuyruk olasılığına sahip olma ile ilgili null altında kritik …

10 power-analysis 

Büyük sayıların (zayıf / güçlü) yasasına göre, bir dağıtımın bazı x xbb math , örnek ortalamaları , olasılık boyutunda ve örnek boyutu olarak dağıtım ortalamasına yakınsar. sonsuzluğa gider.{xi∈Rn,i=1,…,N}{xi∈Rn,i=1,…,N}\{x_i \in \mathbb{R}^n, i=1,\ldots,N\}f∗({xi,i=1,…,N}):=1N∑Ni=1xif∗({xi,i=1,…,N}):=1N∑i=1Nxif^*(\{x_i, i=1,\ldots,N\}):=\frac{1}{N} \sum_{i=1}^N x_i NNN Örneklem büyüklüğü sabit olduğunda, LLN tahmincisi bir anlamda en iyi tahmin edicidir mi acaba? Örneğin,NNNf∗f∗f^* …

10 estimation  expected-value  law-of-large-numbers