İstatistikler ve Büyük Veri

İntertidal topluluklarla ilgili bir veri setini analiz ediyorum. Veriler kuadratlarda yüzde örtüsü (deniz yosunu, kıskaç, midye, vb.) Tür sayısı açısından yazışma analizi (CA) ve doğrusal çevresel (tür değil) eğilimler için daha yararlı bir şey olarak temel bileşen analizi (PCA) hakkında düşünmeye alışkınım . PCA veya CA'nın yüzde kapak için daha …

9 r  pca  multivariate-analysis  correspondence-analysis 

Ben iki sütun ile cep telefonu müşteri bilgi veri bir veri kümesi var. İlk sütun, bir hesabın (A, B veya C) dahil olduğu belirli kategoriyi içerir ve ikinci sütun, bu hesabın iptal edilip edilmediğine ilişkin ikili değerlidir. Örneğin A | cancelled C | active B | active A | cancelled …

9 hypothesis-testing  equivalence 

Ölçeklenebilir makine öğrenme algoritmaları bu günlerde vızıltı gibi görünüyor. Her şirket büyük veriden kısa bir şey yapmıyor . Map-Reduce gibi paralel mimariler kullanılarak hangi makine öğrenme algoritmalarının ölçeklendirilebileceğini ve hangi algoritmaların yapılamayacağını tartışan bir ders kitabı var mı? Veya ilgili bazı makaleler?

9 machine-learning  large-data 

Bu sorunun daha önce sorulduğunu biliyorum: Ekolojik çalışmalar için referans kitabı ama aradığım şey bu değil. Ne aradığım kimse istatistiksel ekoloji hakkında iyi bir kitap (veya kanonik bir referans) tavsiye eğer? İstatistikleri çok iyi anlıyorum, böylece kitap gerçekten herhangi bir seviyede olabilir. Kitabı kendime ekolojide istatistiğin uygulanması hakkında her şeyden …

9 self-study  references  ecology 

Son zamanlarda araştırma makalem için bir revizyon aldım ve aşağıdaki incelemenin makalemdeki yorumu: bir modelden elde edilen sonuçlar oldukça ikna edici değildir, özellikle doğrusal regresyon genellikle aykırı değerlerle başa çıkmada eksikliklere sahiptir. Yazarların lojistik regresyonu denemelerini ve ilgili sonuçları güncel sonuçlarla karşılaştırmasını öneriyorum. Benzer gözlemler elde edilirse, sonuçlar daha katı …

9 regression  logistic  multiple-regression 

Burada aşağıdaki veriler var . Hidrokarbon yüzdesi 1.0 olduğunda ortalama saflıkta% 95 güven aralığını hesaplamaya çalışıyorum. R harfine şunu giriyorum. > predict(purity.lm, newdata=list(hydro=1.0), interval="confidence", level=.95) fit lwr upr 1 89.66431 87.51017 91.81845 Ancak, bu sonucu kendim nasıl elde edebilirim? Aşağıdaki denklemi kullanmaya çalıştım. sn e w=s2( 1 +1N-+(xn e w-x¯)2∑ …

9 r  regression  confidence-interval  prediction-interval 

Aşağıdaki gibi bir örnek veri kümesi var: Volume <- seq(1,20,0.1) var1 <- 100 x2 <- 1000000 x3 <- 30 x4 = sqrt(x2/pi) H = x3 - Volume r = (x4*H)/(H + Volume) Power = (var1*x2)/(100*(pi*Volume/3)*(x4*x4 + x4*r + r*r)) Power <- jitter(Power, factor = 1, amount = 0.1) plot(Volume,Power) Şekilde, …

9 r  hypothesis-testing  nonlinear-regression  goodness-of-fit  heteroscedasticity 

Bayesian eğri uydurma hakkında bir makale okuyordum ( Dimatteo ve ark., Serbest düğüm kamaları ile Bayes eğri uydurma, 2001 ) ve sembolü ile . Kağıt boyunca birkaç kez kullanılır, ancak asla açıkça tanımlanmaz. Birkaç google ve stackexchange aramasından sonra, simge ne yaygın olarak kullanılmıyor ne de geleneksel olarak tanımlanıyor gibi …

9 notation  definition 

Keman parsellerini kullanarak farklı grupların dağılımını karşılaştırıyorum, ancak bulduğum çevrimiçi kaynakların çoğu sadece parsellerin nasıl yapılacağı ve sonuçların çok temel yorumlanmasıyla ilgili (medyan varyasyon, veriler kümelenmiş veya değil). Keman grafiklerini doğru bir şekilde yorumlamak için rehberim olarak izleyebileceğim ayrıntılı örnekler arıyorum.

9 data-visualization 

Aşağıda bu tür bir grafik için bir isim var mı ( çalıştığım Yeni Zelanda İşletme, Yenilik ve İstihdam Bakanlığı'ndan alınmış , ancak bu arsa oluşturmakla ilgilenmedim)? Alanın bir değişkenle orantılı olduğu dikdörtgenlerden oluşur ve bir pasta grafik, mozaik bir arsa ve bir mekko arsası arasında bir tür çaprazlamaya benzer. Belki …

9 data-visualization  pie-chart 

Birden fazla sınıflandırıcı kullanarak sınıflandırma yaptığım 2 sınıf etiketli veri var. Ve veri kümeleri dengelidir. Sınıflandırıcıların performansını değerlendirirken, sınıflandırıcının sadece gerçek pozitifleri değil, aynı zamanda gerçek negatifleri de belirlemede ne kadar doğru olduğunu göz önünde bulundurmam gerekir. Bu nedenle, doğruluk kullanırsam ve sınıflandırıcı pozitiflere karşı önyargılıysa ve her şeyi pozitif …

9 classification  roc  model-evaluation  sensitivity-specificity 

Bu sonbaharda birinci sınıfımı öğretiyorum (Biyoistatistiğe Giriş). İstatistikleri daha iyi öğretmek için önerisi olan var mı? Belki de ilk öğretmeninizin kullanmasını istediğiniz bir örnek? Pagano ve Gauvreau'nun Biyoistatistik İlkelerini kullanıyorum. DETAYLARI DÜZENLE Bu sınıf, haftada iki kez 1,5 saat boyunca toplanan çevrimiçi bir sınıftır. Öğrenciler küçük bir tablet / kalem …

9 biostatistics  teaching 

Verilerimde, olarak belirtilen bir sınıf değişkenim var . Bu sınıf değişkeni değerleri (ikili) şeklindedir. neredeyse tüm gözlemleri 0'dır (% 100'e yakın, daha kesin olarak% 97). Farklı sınıflandırma modelleri üzerinde bir "performans" testi istiyorum (doğruluk olabilir). Olmaktan korktuğum, gözlemleri her zaman sınıf 0'da sınıflandıran bir sınıflandırma modelim varsa, o zaman bu …

9 classification  binary-data  model-evaluation 

Deneysel tasarımın uygulanabileceği fenomenler, alternatif geçerli tasarım stratejilerinden daha fazladır. Bu doğru olmalıdır, ancak bir deneyi düzgün bir şekilde tasarlamanın birçok yolu vardır. Farklı tipteki en uygun deney tasarımları için değeri ve nüansı gerçekten gösteren en iyi "problemler" nelerdir? (A, D, E, C, V, phi, ....) Kitaplar, bağlantılar, makaleler, referanslar …

9 experiment-design  references  optimal 

Doğrusal regresyon kullanarak bir müşterinin günlüğünü (harcamasını) öngören bir sorun düşünüyorum. Hangi özellikleri girdi olarak kullanacağımı düşünüyor ve değişkenin yüzdelik değerini girdi olarak kullanmanın uygun olup olmadığını merak ediyorum. Mesela şirketlerin gelirini girdi olarak kullanabilirim. Merak ettiğim şey bunun yerine şirketin gelir yüzdelik dilimini kullanıp kullanamayacağım. Başka bir örnek kategorik …

9 regression  linear-model  quantiles  predictor