İstatistikler ve Büyük Veri

Anladığım kadarıyla, analiz ettiğimiz veri kümesine, Bayesian analizinde önceki dağılımların nasıl göründüğünü tanımlamak / tanımlamak için izin vermemeliyiz. Özellikle, bir Bayes analizi için önceki dağılımları tanımlamak, daha sonra bir modele uymak için öncekileri kullanacağınız aynı veri kümesinden özet istatistiklere dayanarak tanımlamak uygun değildir. Herkes bunu uygunsuz olarak özel olarak tartışan …

9 bayesian  prior 

Araştırdığımız çeşitli veri-vizyon tekniklerini test etmek için kullanabileceğimiz mevcut veri kümelerini arıyorum. R dahil olanlar gibi çeşitli kaynaklar biliyorum (deneyin plot(Orange)veya bakın burada ). Ama bunu bir adım ileri götürmek istiyorum: Bir görselleştirme aracını test etmek için en iyi gerçek dünya veri kümeleri hangileri? Akademik makalelerde hangi veri kümelerini kullandınız …

9 data-visualization  dataset  teaching 

Bir makine kontrol projesi üzerinde çalışıyorum. Çalışma sırasında motorun akımını ölçebiliriz. İşlemi başarıyla gerçekleştiren iki motordan alınan örnek veriler aşağıdadır. Kırmızı iz bir motordan akımı, mavi iz başka bir akımdan gösterir. Makine davranışı ile ilgili sorunları tanımlamak için bir algoritma bulmaya çalışmak istiyorum. Sorunlar aşırı yüksek motor akımı, sıfıra yakın …

9 time-series 

Temel olarak, grafik kümelemenin ve topluluk algılama yöntemlerinin amacı kümeleri hesaplamaktır. Aralarında fark var mı?

9 clustering 

Kilitli . Bu soru ve cevapları kilitlidir çünkü soru konu dışıdır, ancak tarihsel önemi vardır. Şu anda yeni yanıtları veya etkileşimleri kabul etmiyor. Bildiğim işlevler taban R'den ölçek , ARM'den yeniden ölçeklendirmeyi içerir . Belki de en iyi yol, gruplama değişkenleri olarak kullanılacak bir veya daha fazla değişkeni belirterek bazı …

9 r  standardization  centering 

Küçük coğrafi toplamalarda (Avustralya nüfus sayımı toplama bölgeleri) bireysel düzeyde çok değişkenli analiz yapmak istiyorum. Açıkçası, nüfus sayımı gizlilik nedenleriyle bu küçük toplama seviyelerinde mevcut değildir, bu yüzden diğer alternatifleri araştırıyorum. İlgilenilen hemen hemen tüm değişkenler kategoriktir. Elimde iki veri seti var: % 1 nüfus sayımı örneği çok daha yüksek …

9 distributions  sampling  simulation  spatial  census 

Örneğin, erkek ve kız çocuklarının hangi sınıflarda farklılık gösterdiğini bilmek istediğimden cinsiyet ve sınıf arasında bir etkileşim bulan bir ANOVA çalıştırdım, ancak çoğu durumda 0 ve 1 p-değerleri buluyorum (ayarladım). Bu nasıl / neden mümkün? Doğru görünmüyor ... as.factor(gender) 1 16 16.2 2.6377 0.104396 as.factor(grade) 7 50077 7153.9 1165.4184 < …

9 r 

Bu sorular aptalca gelebilir, ancak ... rastgele etkilerin yalnızca kategorik değişkenlere (bireysel kimlik, nüfus kimliği, ... gibi) uygulanabileceği doğru mu?xixix_i kategorik bir değişkendir: yiyiy_i ~ βxiβxi\beta_{x_i} βxiβxi\beta_{x_i} ~ Norm(μ,δ2)Norm(μ,δ2)Norm(\mu, \delta^2) ancak prensipten rastgele etki sürekli değişkene (yükseklik, kütle ... gibi) uygulanamaz.ziziz_i: yiyiy_i ~ α+β⋅ziα+β⋅zi\alpha + \beta \cdot z_{i} çünkü o …

9 mixed-model  categorical-data  continuous-data  random-effects-model 

İstatistik konusunda acemi biriyim ve istatistiksel testler için bağımsızlık varsayımı konusunda biraz karışıklığım var. İnterneti araştırdım ve bazı bilgiler t-testi için iki gruptaki gözlemlerin bağımsız olması gerektiğini söylüyor (örnek 1'deki ölçümler ve örnek 2'deki ölçümler farklı olmalı). Diğer bazı bilgiler tüm gözlemlerin (aynı grupta bile) bağımsız olması gerektiğini söylüyor. Hangisi …

9 independence  assumptions 

Farklı ödül koşullarının görev performansını etkileyip etkilemeyeceğini araştırıyorum. Her biri n = 20 olan iki gruptan oluşan küçük bir çalışmadan verilerim var. 3 farklı "ödül" koşulunda performans içeren bir görevle ilgili veri topladım. Görev, 3 koşulun her birinde iki kez ancak rastgele sırada performans içeriyordu. Farklı "ödül" koşullarının her birinde, …

9 anova  spss  repeated-measures  assumptions 

Aşağıdaki deney düzeneği göz önüne alındığında: Bir denekten birden fazla numune alınır ve her numune birden fazla yolla tedavi edilir (bir kontrol tedavisi dahil). Esas olarak ilginç olan, kontrol ve her tedavi arasındaki farktır. Bu veriler için iki basit model düşünebilirim. Örnek , tedavi , tedavi 0 kontrol olduğunda, veri …

9 regression  anova  linear-model  ancova 

Daha önceki yayınlarımdan sonra, anlayabildiğim kadarıyla, üç korelasyon katsayım varsa, aralarında önemli bir fark olup olmadığını görmek için bunları çiftler halinde test etmem gerekecek. Bu, r'nin z skorunu ve sonra z'nin p değerini (önceki yazılarda önerilen hesap makinelerinin neyse ki yaptığı) çalışmak için Fishers dönüşümünü kullanmam ve daha sonra p …

9 correlation 

Ben, bağımsız değişken vektörleri gözlemlemek varsayalım ve ve bağımlı değişken . Formun bir modelini sığdırmak istiyorum: burada pozitif değerli iki farklılaştırılabilir bir işlevdir, bilinmeyen bir ölçeklendirme parametresidir ve sıfır ortalama, birim varyanslı Gauss rastgele değişkenidir ( ve ). Bu aslında Koenker'in heteroskedastisite testinin kurulumudur (en azından anladığım kadarıyla).x⃗ x→\vec{x}z⃗ z→\vec{z}yyyy=x⃗ …

9 regression  hypothesis-testing  heteroscedasticity  generalized-least-squares 

Kütle fonksiyonlu ayrık dağılım p ( x ; k ) =k( x + k ) ( x + k - 1 ),x = 1 , 2 , …p(x;k)=k(x+k)(x+k−1),x=1,2,…p(x;k) = \frac{k}{(x+k)(x+k-1)},\quad x = 1,2,\ldots bu makalenin 9. sayfasında yer almaktadır . İçin k = 1k=1k=1bir Yule-Simon dağılımıdır .ρ = 1ρ=1\rho=1, ancak …

9 distributions 

Pozitif bir parametre hakkında çıkarım yapmam gerekiyor . Olumlu olanı benimsemek için parametresini yeniden yapılandırdım . MLE rutin I kullanarak puan hesaplaması ve için se . MLE'nin değişmezlik özelliği doğrudan için bir nokta tahmini verir , ancak için se nasıl hesaplanacağından emin değilim . Herhangi bir öneri veya referans için …

9 maximum-likelihood  standard-error  delta-method