İstatistikler ve Büyük Veri

Dağılımın olmasını istediğim ortalama ve varyansı biliyorsanız, bir Beta dağılımı için ve β parametrelerini nasıl hesaplayabilirim ? Bunu yapmak için bir R komutu örnekleri en yararlı olacaktır.αα\alphaββ\beta

66 r  distributions  estimation  beta-distribution 

Sorularım Rastgele Ormanlarla ilgili. Bu güzel sınıflandırıcı kavramı bana açık, ama yine de birçok pratik kullanım sorusu var. Ne yazık ki, RF için pratik bir rehber bulamadım (Geoffrey Hinton tarafından "Kısıtlı Boltzman Makineleri İçin Pratik Bir Rehber" gibi bir şey aradım ama Geoffrey Hinton! Bir kişi pratikte RF'yi nasıl ayarlayabilir? …

65 random-forest  cart 

'Link function' ve 'canonical link function' terimleri arasındaki fark nedir? Ayrıca, birini üst üste kullanmanın (teorik) avantajları var mı? Örneğin, bir ikili tepki değişkeni gibi birçok bağlantı işlevleri kullanarak modellenebilir logit , probit , vb Ama, logit burada "canonical" bağlantısı fonksiyonu olarak kabul edilir.

65 logistic  generalized-linear-model  link-function 

Bazı istatistikler (ve olasılık, sanırım) en temelden en ileri seviyeye kadar olan sorularla röportaj soruları arıyorum. Cevaplar gerekli değildir (bu sitedeki belirli sorulara bağlantılar iyi yapsa da).

65 intuition  careers 

Momentlerin ne olduğunu ve nasıl hesaplanacağını ve moment oluşturma fonksiyonunu daha yüksek dereceli momentler elde etmek için nasıl kullanacağımı biliyorum. Evet, matematiği biliyorum. Şimdi istatistik bilgilerimi iş için yağlamam gerektiğine göre, bu soruyu sorabilirim diye düşündüm - birkaç yıldan beri beni rahatsız ediyordu ve üniversiteye geri döndüğümde hiçbir profesör cevabı …

65 distributions  terminology  moments  intuition 

Bir sinir ağında bırakma katmanlarının nereye yerleştirileceği hakkında genel bir kılavuz var mı?

65 neural-networks  dropout 

Bir dizi nesneyi n sınıflarına ayırmak için sinir ağını eğitiyorum. Her nesne aynı anda birden fazla sınıfa ait olabilir (çoklu sınıf, çoklu etiket). Çok sınıflı problemlerde genellikle mse yerine kayıp fonksiyonu olarak softmax ve kategorik çapraz entropinin kullanılması önerildiğini ve nedenini az çok anladığımı okudum. Çoklu etiket problemim için, her …

64 neural-networks  python  loss-functions  keras  cross-entropy 

2 yaşından küçük bir çocuk, renk, marka vb. Ne olursa olsun makul bir doğrulukla tanımlayabilmesi için bir otomobilin yaklaşık 5 örneğine ihtiyaç duyar. sadece birkaç tane. Genellikle birbiriyle kafasını karıştırdığından, görünüşe göre sinir ağı yeterince eğitilmemişti, ama yine de. Yapay sinir ağlarının eksik olup, daha hızlı öğrenmelerini engelleyen nedir? Transfer …

64 neural-networks  neuroscience 

Aşağıdaki üç fenomeni düşünün. Stein'ın paradoksu: çok değişkenli normal dağılımdan bazı veriler verilen Rn,n≥3Rn,n≥3\mathbb R^n, \: n\ge 3 , örnek ortalama, gerçek ortalamanın çok iyi bir tahmincisi değildir. Örnek ortalamanın tüm koordinatlarını sıfıra doğru [veya ortalamalarına doğru ya da doğru bir şekilde anlıyorsam, aslında herhangi bir değere doğru daraltırsa], daha …

64 regression  mixed-model  ridge-regression  shrinkage  steins-phenomenon 

Ben yakın zamanda R'ye çok tanınmış diğer istatistiksel paketlerden R'ye dönüşen ekonomi alanında yüksek lisans öğrencisiyim (özellikle SPSS kullanıyordum). Şu andaki küçük sorunum sınıfımdaki tek R kullanıcısı olduğum. Sınıf arkadaşlarım Stata ve Gauss kullanıyor ve profesörümden biri R'nin mühendislik için mükemmel olduğunu ancak ekonomi için mükemmel olmadığını söyledi. Pek çok …

64 r  software  econometrics 

Başlıktaki sorum kendiliğinden açıklayıcı, ancak ona bir bağlam vermek istiyorum. ASA, bu haftanın başlarında “ p-değerleri üzerine: bağlam, süreç ve amaç ”, p-değerine ilişkin çeşitli yanlış anlaşılmaların altını çizen ve bunu bağlam ve düşünce olmadan kullanmamaya dikkat çağıran bir açıklama yaptı. Herhangi bir istatistiksel yöntem, gerçekten). ASA’ya cevaben, profesör Matloff …

64 hypothesis-testing  bayesian  p-value  inference  frequentist 

Poisson regresyonundaki ana etkileri (yapay kodlanmış faktör katsayıları) nasıl yorumlayabilirim? Aşağıdaki örneği varsayın: treatment <- factor(rep(c(1, 2), c(43, 41)), levels = c(1, 2), labels = c("placebo", "treated")) improved <- factor(rep(c(1, 2, 3, 1, 2, 3), c(29, 7, 7, 13, 7, 21)), levels = c(1, 2, 3), labels = c("none", "some", …

64 r  generalized-linear-model  interpretation  poisson-distribution  regression-coefficients 

Kimsenin beni, konsantrasyon matrisi veya hassasiyet matrisi olarak da bilinen ters kovaryans matrisinin elemanlarının yorumunu tartışan bazı referanslara yönlendirebileceğini merak ediyordum. Cox ve Wermuth'un Çok Değişkenli Bağımlılıklarına erişebiliyorum , ancak aradığım şey ters matristeki her bir öğenin yorumlanması. Vikipedi şöyle diyor : “Hassas matrisin elemanları kısmi korelasyonlar ve kısmi varyanslar …

64 interpretation  covariance-matrix 

Muhtemelen basit bir soru olan bir şeye sahibim, ama şu anda beni şaşırtıyor, bu yüzden bana yardım edebileceğini umuyorum. Bir bağımsız değişken ve bir bağımlı değişken içeren en küçük kareler regresyon modelim var. İlişki anlamlı değil. Şimdi ikinci bir bağımsız değişken ekliyorum. Şimdi ilk bağımsız değişken ve bağımlı değişken arasındaki …

64 regression  multiple-regression  power  suppressor 

Ölçü teorisi çerçevesinde koşullu beklentilerde alt notasyonunun tam anlamı nedir ? Bu abonelikler şartlı beklentinin tanımında görünmemektedir, ancak örneğin bu tür Wikipedia'yı görebiliriz . ( Birkaç ay önce her zaman aynı sayfa olduğuna dikkat edin ).EX[f(X)]EX[f(X)]\mathbb{E}_X[f(X)] Örneğin, ile ve anlamı ne olmalıdır ?EX[X+Y]EX[X+Y]\mathbb{E}_X[X+Y]X∼N(0,1)X∼N(0,1)X\sim\mathcal{N}(0,1)Y=X+1Y=X+1Y=X+1

64 conditional-expectation  notation