«roc» etiketlenmiş sorular

Neden ROC eğrisinin altındaki alan, bir sınıflandırıcının rasgele seçilen bir "pozitif" örneği (alınan tahminlerden) rastgele seçilen "pozitif" olandan (orijinal pozitif sınıftan) daha yüksek sıraya koyma olasılığıdır? Gerçek pozitif ve negatif sınıf dağılımlarının CDF'lerini ve PDF'lerini vererek integrali kullanarak bu ifadeyi matematiksel olarak nasıl kanıtlayabiliriz?

14 probability  roc  auc 

Genellikle lojistik regresyonda, bir modele uyuyoruz ve eğitim seti hakkında bazı tahminler alıyoruz. Daha sonra bu eğitim tahminlerini ( burada olduğu gibi ) çapraz doğrular ve ROC eğrisi gibi bir şeye dayanarak optimum eşik değerine karar veririz . Neden gerçek modele INT eşiğinin çapraz doğrulamasını dahil etmiyoruz ve her şeyi …

13 logistic  cross-validation  optimization  roc  threshold 

İki veya daha fazla sınıflandırma modelini karşılaştırmak için kullanılan yaygın bir önlem, ROC eğrisi (AUC) altındaki alanı, performanslarını dolaylı olarak değerlendirmenin bir yolu olarak kullanmaktır. Bu durumda, daha büyük bir AUC'ye sahip bir model genellikle daha küçük bir AUC'ye sahip bir modelden daha iyi performans olarak yorumlanır. Ancak, Vihinen, 2012'ye …

13 machine-learning  classification  roc  auc  model-evaluation 

Bir lojistik regresyon modeli (yoluyla elde ettik trainbir ikili yanıt için), ve ile lojistik karışıklık matrisi elde ettik confusionMatrixiçinde caret. Bana lojistik modeli karışıklık matrisi veriyor, ancak bunu elde etmek için hangi eşiğin kullanıldığından emin değilim. Nasıl kullanarak belirli eşik değerleri için karışıklık matrisi elde do confusionMatrixin caret?

13 r  classification  roc  caret  confusion-matrix 

Lojistik bir model üzerinde çalışıyorum ve sonuçları değerlendirmede bazı zorluklar yaşıyorum. Modelim bir binom logit. Açıklayıcı değişkenlerim: 15 seviyeli kategorik bir değişken, iki değişkenli ve 2 sürekli değişken. N harfim büyük> 8000. Firmaların yatırım yapma kararlarını modellemeye çalışıyorum. Bağımlı değişken yatırımdır (evet / hayır), 15 seviye değişkenleri yöneticiler tarafından bildirilen …

13 r  logistic  goodness-of-fit  roc 

puan kartı modellemesi için iyi ve kötü yüzdesi yardımıyla oluşturulan asansörü kullanarak GINI eğrisi oluşturduk. Ama ben inceledim ne ROC eğrisi x ekseni olarak özgüllük (1- gerçek negatif) ve Y ekseni olarak hassasiyet (gerçek pozitif) ile karışıklık matrisi kullanılarak oluşturuldu. Dolayısıyla GINI ve ROC'nin sonuçları bir farkla aynıdır, ikincisi de …

13 roc  gini 

Normalde karar ağaçları gibi ayrı sınıflandırıcılar için bir ROC eğrisi çizemeyiz. Haklı mıyım? Dtrees için bir ROC eğrisi çizmenin bir yolu var mı?

13 roc  cart 

Bir alıcı operatör özelliği (ROC) altındaki alanın p değerini hesaplamanın bir yolunu bulmak için mücadele ediyorum. Sürekli bir değişkenim ve bir tanısal test sonucum var. AUROC'un istatistiksel olarak anlamlı olup olmadığını görmek istiyorum. ROC eğrileri ile ilgili birçok paket buldum: pROC, ROCR, caTools, doğrulama, Epi. Ancak belgeleme ve testleri okumak …

13 r  p-value  roc 

Makine öğreniminde , bir sistemin iki kategori arasında ne kadar iyi ayrım yapabileceğini özetlemek için ROC eğrisinin altındaki alanı (genellikle AUC veya AUROC olarak kısaltılır ) kullanabiliriz. Sinyal algılama teorisinde genellikle (hassasiyet indeksi) benzer bir amaç için kullanılır. İkisi yakından bağlantılıdır ve bazı varsayımların karşılanması durumunda birbirlerine eşdeğer olduklarına inanıyorum …

13 machine-learning  roc  auc  signal-detection  d-prime 

Hacim benzerliği ( https://en.wikipedia.org/wiki/S%C3%B8rensen%E2%80%93Dice_coefficient ) ve doğruluk ( https://en.wikipedia.org/wiki/Accuracy_and_precision ) için Zar katsayısına rastlarım ). Bana öyle geliyor ki bu iki önlem aynı. Düşüncesi olan var mı?

13 descriptive-statistics  roc  accuracy  precision-recall  auc 

Şu anda bir ikili sınıflandırıcı çalıştırıyorum. ROC eğrisini çizdiğimde, başlangıçta iyi bir kaldırma elde ederim, sonra yönü değiştirir ve diyagonalden sonra elbette yukarı doğru çaprazlanır ve eğriyi eğimli bir S şekline dönüştürür. Bu etki için bir yorum / açıklama ne olabilir? Teşekkürler

12 roc 

Bazı ölçümlerin bir sonuç üzerindeki tahmin yeteneğini belirlemek için ne zaman diğer bazı testlerde ROC eğrilerini kullanmaya eğilimlisiniz? Ayrık sonuçlarla (canlı / ölü, şimdiki / yok) uğraşırken, ROC eğrilerini ki-kare gibi bir şeyden daha fazla veya daha az güçlü yapan nedir?

12 regression  roc 

Eski ve yeni öğeleri tespit etmeyi içeren bir bellek görevi için d üssü hesaplamak istiyorum . Sahip olduğum problem, bazı deneklerin isabet oranının 1 ve / veya yanlış alarm oranının 0 olması, bu da olasılıkları sırasıyla% 100 ve% 0 yapar. Formülü d asal olan d' = z(H) - z(F), burada …

11 roc  excel  signal-detection  d-prime 

1000 pozitif ile 100.000 gözlemim (9 kukla gösterge değişkeni) var. Bu durumda Lojistik Regresyon iyi çalışmalıdır, ancak kesim olasılığı beni şaşırtıyor. Ortak literatürde, 1 ve 0'ları tahmin etmek için% 50 kesme seçiyoruz. Modelim ~% 1 maksimum değer verdiğinden bunu yapamam. Yani bir eşik 0,007'de veya onun etrafında bir yerde olabilir. …

11 regression  logistic  classification  generalized-linear-model  roc 

Büyük eğitim veri kümeleri kullanan çok sınıflı bir metin sınıflandırma sorunu için 2 farklı sınıflandırıcıyı karşılaştırmak istiyorum. 2 sınıflandırıcıyı karşılaştırmak için ROC eğrilerini mi yoksa öğrenme eğrilerini mi kullanmam gerektiğinden şüpheliyim. Bir yandan, öğrenme eğrileri, eğitim veri kümesinin boyutuna karar vermek için yararlıdır, çünkü sınıflandırıcının öğrenmeyi durdurduğu (ve belki de …

11 machine-learning  classification  roc  accuracy