İstatistikler ve Büyük Veri

İstatistik, makine öğrenmesi, veri analizi, veri madenciliği ve veri görselleştirmesi ile ilgilenen kişiler için soru cevap



2
Sıralı ve sürekli rasgele değişken arasındaki ilişkinin parametrik olmayan ölçüsü
Sorunu aldığım gibi buraya atıyorum. İki rastgele değişkenim var. Bunlardan biri sürekli (Y) diğeri ayrık olan ve sıra (X) olarak yaklaşılacaktır . Sorgu ile birlikte aldığım arsanın altına koydum. Bana veri gönderen kişi , X ve Y arasındaki ilişkinin gücünü ölçmek istiyor. Verileri hangi işlemin ürettiği hakkında varsayımlarla öne çıkmayacak …

1
Olabilirlik Oranı testi için düzenlilik koşulları nelerdir
Herkes bana Olabilirlik Oranı testinin asimptotik dağılımı için düzenlilik koşullarının neler olduğunu söyleyebilir mi? Baktığım her yerde, 'Düzenlilik koşulları altında' veya 'olasılıklı düzenlilikler altında' yazılır. Koşullar tam olarak nedir? Birinci ve ikinci log olabilirlik türevlerinin var olduğunu ve Bilgi matrisinin sıfır olmadığını? Yoksa tamamen başka bir şey mi?

1
Uzamsal korelogramda U şekilli bir desene ne sebep olur?
Kendi çalışmamda , değişen mesafelerde uzamsal bir korelogramı incelerken bu örüntüyü fark ettim , korelasyonlarda U şeklinde bir desen ortaya çıkıyor. Daha spesifik olarak, küçük mesafe kutularındaki güçlü pozitif korelasyonlar mesafeyle azalır, daha sonra belirli bir noktada bir çukura ulaşır ve sonra yukarı tırmanır. İşte Koruma Ekolojisi blogundan bir örnek, …

1
PR için yalnızca bir değere sahip olduğumda Hassas Geri Çağırma eğrisi nasıl oluşturulur?
İçeriğe dayalı görüntü alma sistemi yaptığım veri madenciliği görevim var. 5 hayvandan 20 görüntüm var. Yani toplam 100 görüntü. Sistemim en alakalı 10 görüntüyü giriş görüntüsüne döndürür. Şimdi sistemimin performansını bir Hassas-Geri Çağırma eğrisi ile değerlendirmem gerekiyor. Ancak, Hassas-Geri Çağırma eğrisi kavramını anlamıyorum. Diyelim ki sistemim bir goril görüntüsü için …


1
Büyük veri kümesinin normallik açısından test edilmesi - nasıl ve güvenilirdir?
Veri setimin 1'den 1690'a kadar 46840 çift değer içeren bir bölümünü iki grupta inceliyorum. Bu gruplar arasındaki farkları analiz edebilmek için doğru testi seçmek amacıyla değerlerin dağılımını inceleyerek başladım. Normallik testi için bir kılavuzun ardından qqplot, histogram ve boxplot yaptım. Bu normal bir dağılım gibi görünmüyor. Kılavuz, tamamen grafiksel bir …

3
Geçen ayki kayda göre satışları tahmin etmek için uygun bir zaman serisi modeli geliştirmek
Şu anda üst üste iki yıldır çevrimiçi bir işletme işletiyorum, bu yüzden yaklaşık iki yıldır aylık satış verilerim var. Her ay için işim kesinlikle mevsimsel salınımdan (Noel'de daha iyi performans gösterir, vb.) Ve muhtemelen farkında olmadığım diğer bazı faktörlerden etkilenir. Gelecekteki satışları daha iyi tahmin etmek ve satış kampanyamın etkinliğini …

2
Ana bileşenlerin sayısını belirlemek için PCA için çapraz doğrulama nasıl yapılır?
Temel bileşen analizi için kendi fonksiyonumu yazmaya çalışıyorum, PCA (tabii ki zaten yazılmış çok şey var ama sadece kendi başıma bir şeyler uygulamakla ilgileniyorum). Karşılaştığım temel sorun çapraz doğrulama adımı ve öngörülen karelerin toplamının (PRESS) hesaplanmasıdır. Hangi çapraz doğrulamayı kullandığım önemli değil, esasen arkasındaki teori ile ilgili bir soru, ancak …


2
MCMC yöntemleri - yanan örnekler?
In MCMC yöntemlerle, ben yaklaşık okumaya devam burn-inzaman veya numune sayısına "burn". Bu tam olarak nedir ve neden gereklidir? Güncelleme: MCMC dengelendiğinde, stabil kalıyor mu? burn-inZaman kavramı , karıştırma zamanı ile nasıl ilişkilidir?
12 sampling  mcmc 

4
Sadece mesafe matrisi ile PCA gerçekleştirmek
Sadece çift mesafelere sahip olduğum büyük bir veri kümesini kümelemek istiyorum. Bir k-medoid algoritması uyguladım, ancak çalışması çok uzun sürüyor, bu yüzden PCA'yı uygulayarak sorunumun boyutunu azaltarak başlamak istiyorum. Ancak, bu yöntemi gerçekleştirmenin tek yolu benim durumumda olmayan kovaryans matrisini kullanmaktır. PCA'yı sadece çift mesafeleri bilerek uygulamak için bir yol …


2
'Düzenli Veri' Oluşturmaya İlişkin En İyi Uygulamalar
Hadley Wickham geçen sene JSS'de veri manipülasyonu ve analiz yapmak için verileri "optimal" duruma getirme hakkında "Düzenli Veri" ( link ) adlı yıldız bir makale yazdı . Ancak, bir çalışma ortamında tablo verilerinin sunulması açısından en iyi uygulamaların neler olduğunu merak ediyordum? İş arkadaşınızın sizden ona bazı veriler vermenizi istediğini …
12 dataset  tables 

Sitemizi kullandığınızda şunları okuyup anladığınızı kabul etmiş olursunuz: Çerez Politikası ve Gizlilik Politikası.
Licensed under cc by-sa 3.0 with attribution required.