İstatistikler ve Büyük Veri

Matematik destek yazılımı kullanan 30 kişilik bir tedavi grubum var (Kaliforniya'da 30 okul). Basit bir analizde, öğrencilerin tedavi grubumuzla karşılaştırılabilir bir kontrol grubu arasındaki ortalama Matematik büyümesini karşılaştırmak istiyorum. CA'da yazılımı kullanmayan birçok okul var. Kontrol grubunun benzer performans gösteren okulları içermesini istiyorum (temel puanları makul bir hata payı olan …

11 mathematical-statistics  descriptive-statistics  computational-statistics 

Bilgi teorik CLT'nin en basit şekli şudur: Let ortalama ile istatistiksel bağımsız olması ve varyansı . Let normalleştirilmiş toplam yoğunluğu olması ve standart Gauss yoğunluğu. Daha sonra bilgi teorisi CLT, bazı n için sonlu olduğunu , sonra D (f_n \ | \ phi) \ 'nin n olarak 0 olduğunu belirtir. …

11 mathematical-statistics  information-theory  central-limit-theorem 

Lojistik regresyon modeline sahip bazı özelliklere dayanarak öğrencilerin başarı veya başarısızlıklarını tahmin etmeye çalışıyorum. Modelin performansını artırmak için, öğrencileri bariz farklılıklara dayanarak farklı gruplara ayırmayı ve her grup için ayrı modeller oluşturmayı düşündüm. Ancak bu grupları sınavla tanımlamanın zor olabileceğini düşünüyorum, bu yüzden öğrencileri özellikleri üzerinde kümelenerek ayırmayı düşündüm. Bu, …

11 clustering  data-mining  logistic 

Bilgisayar grafiklerinde son derece yaygın olan bir durum, bazı piksellerin renginin, bazı gerçek değerli fonksiyonların integraline eşit olmasıdır. Genellikle işlev analitik olarak çözmek için çok karmaşıktır, bu nedenle sayısal yaklaşımla bırakılmıştır. Ancak, işlevin hesaplanması da genellikle çok pahalıdır, bu nedenle kaç örnek hesaplayabileceğimiz konusunda büyük ölçüde kısıtlanmıştır. (Örneğin, sadece bir …

11 estimation  monte-carlo  function  quasi-monte-carlo 

de ile (gözlenen) bir zaman serisi , (yani markov özelliği)?XtXtX_tXt∈ { 1 , . . . , n }Xt∈{1,...,n}X_t\in\{1,...,n\}P( Xt|Xt - 1, Xt - 2, . . . , X1) = P( Xt|Xt - 1)P(Xt|Xt-1,Xt-2,...,X1)=P(Xt|Xt-1)P(X_t|X_{t-1},X_{t-2},...,X_1)=P(X_t|X_{t-1})

11 time-series  hypothesis-testing  markov-process 

Akarların fonksiyonel tepkisi alanında araştırma yapıyorum. Rogers tip II fonksiyonunun parametrelerini (saldırı hızı ve işleme süresi) tahmin etmek için bir gerileme yapmak istiyorum. Bir ölçüm veri setim var. Aykırı değerleri en iyi nasıl belirleyebilirim? Regresyonum için R'de (doğrusal olmayan bir regresyon) aşağıdaki komut dosyasını kullanıyorum: (tarih seti, değerler (ilk av …

11 r  outliers  nonlinear-regression 

Gençlere istatistiklerle ilgili bir saatlik bir ders vermek niyetindeyim. Muhtemelen onları sadece bir kez göreceğim. Bu senaryo tekrar tekrar meydana gelebilir. İstatistikleri deneyimlemeleri için onlara biraz aktivite vermek istiyorum. Ama bunu olasılık, istatistiksel çıkarım, keşif analizi vb. Hakkında hiçbir şey bilmeyen insanlarla yapmak zorundayım. Benim düşüncem medyanın bazen kullandığı bazı …

11 teaching 

Başlık ilerledikçe, genel olarak veri önişlemini ve özellikle aykırı algılama tekniklerini kapsayan iyi, güncel bir kitap biliyor mu? Kitabın sadece buna odaklanması gerekmiyor, ancak yukarıda belirtilen konularla kapsamlı bir şekilde ilgilenmeli - bir başlangıç ​​noktası olan ve kağıtların bir listesini alıntılayan bir şeyden memnun olmazdım, çeşitli tekniklerin açıklamaları görünmelidir kitabın …

11 dataset  data-mining  references  outliers 

Sadece dizeleri alabilen giriş nöronları ile sigmoid nöronların bazı sabit tekrarlayan olmayan (DAG) topolojisi (sabit düğüm ve kenar kümesi, ancak öğrenme algoritması kenarlardaki ağırlığı değiştirebilir) varsa girdi olarak ve bir çıkışa yol açar (0'dan uzakta belirli bir sabit eşikse 1'e veya -1'e yuvarladığımız gerçek bir değer üretir). Bu ağın VC …

11 machine-learning  neural-networks  algorithms  vc-dimension 

Hiyerarşik öncelikler nelerdir? Önceliklerin genel konseptinden nasıl farklıdırlar?

11 bayesian  multilevel-analysis 

Neuralnet R'de 14 giriş ve bir çıkış ile bir NN oluşturmak için kullanıyorum. Aynı giriş eğitimi verilerini ve aynı ağ mimarisini / ayarlarını kullanarak ağı birkaç kez oluşturur / eğitirim. Her ağ üretildikten sonra, tahmin edilen bazı değerleri hesaplamak için tek başına test verileri kümesinde kullanıyorum. Ağı her kurduğumda tüm …

11 r  machine-learning  neural-networks 

Kurutmanın tortu mikrobiyal aktiviteleri üzerindeki etkisini değerlendirmek için bir veri seti üzerinde çalışıyorum. Amaç, kurutmanın etkisinin tortu türleri ve / veya tortu içindeki derinlik arasında değişip değişmediğini belirlemektir. Deneysel tasarım aşağıdaki gibidir: İlk faktör Sediment üç tip tortuya karşılık gelir (kodlu Sed1, Sed2, Sed3). Her bir Sediment tipi için örnekleme …

11 mixed-model  interaction  post-hoc  lme4-nlme 

Varsayalım ki, Ocak'05'ten Aralık'11'e kadar aylık 20.000'den fazla zaman serisi var. Bunların her biri farklı bir ürün için küresel satış verilerini temsil eder. Ya, her biri için tahminleri hesaplamak yerine, yalnızca "gerçekten önemli" olan az sayıda ürüne odaklanmak isteseydim? Bu ürünleri toplam yıllık gelire göre sıralayabilir ve klasik Pareto kullanarak …

11 time-series  forecasting  forecastability 

Her zaman noktasında N = 14 sayımı olan bir veri serisi var ve her zaman noktasında Gini katsayısını ve bu tahmin için standart bir hatayı hesaplamak istiyorum. Jackknife varyansını, yani hesaplayarak ilerlediğim her zaman noktasında sadece N = 14 sayım olduğundan Tomson Ogwang ' denklem 7'den ' Gini indeksini ve …

11 r  variance  econometrics  resampling  gini 

Neden bir genetik birliktelik çalışmasında yaş ve yaş karesi eş değişken olarak kullanılır? Önemli bir eş değişken olarak tanımlandıysa yaş kullanımını anlayabilirim, ancak yaş karesi kullanımı konusunda kayıp yaşıyorum.

11 multiple-regression  polynomial  predictor  bioinformatics  genetics