«accuracy» etiketlenmiş sorular

Bu, dolaylı olarak burada defalarca sorulan genel bir sorudur, ancak tek bir yetkili cevaptan yoksundur. Referans için bu konuda ayrıntılı bir cevap almak çok iyi olurdu. Tüm sınıflandırmalar arasında doğru sınıflandırmaların oranı olan doğruluk , çok basit ve “sezgisel” bir önlemdir, ancak dengesiz veriler için zayıf bir ölçü olabilir . …

107 machine-learning  classification  accuracy  model-evaluation  scoring-rules 

Bu şartları 502847894789 kez görmüş olmama rağmen, yaşamım boyunca hassasiyet, özgüllük, kesinlik, kesinlik ve hatırlama arasındaki farkı hatırlayamıyorum. Oldukça basit kavramlar, ancak isimler benim için son derece sezgisel değil, bu yüzden birbirleriyle karıştırılmaya devam ediyorum. Bu kavramları düşünmenin iyi bir yolu nedir, böylece isimler anlamlı olmaya başlar? Başka bir deyişle, …

49 terminology  accuracy  sensitivity-specificity 

Veri madenciliğinde yeniyim ve dengesiz bir veri setine karşı bir karar ağacı yetiştirmeye çalışıyorum. Ancak, zayıf tahmin doğruluğu ile ilgili sorunlar yaşıyorum. Veriler ders okuyan öğrencilerden oluşur ve sınıf değişkeni iki değeri olan ders durumudur - Çekilmiş veya Akım. Yaş Etnik köken Cinsiyet Elbette ... Kurs Durumu Veri setinde, Akım …

43 classification  cart  unbalanced-classes  accuracy 

Karar ağacım için% 100 doğruluk elde ediyorum. Neyi yanlış yapıyorum? Bu benim kodum: import pandas as pd import json import numpy as np import sklearn import matplotlib.pyplot as plt data = np.loadtxt("/Users/Nadjla/Downloads/allInteractionsnum.csv", delimiter=',') x = data[0:14] y = data[-1] from sklearn.cross_validation import train_test_split x_train = x[0:2635] x_test = x[0:658] y_train …

38 machine-learning  python  cart  accuracy 

Ortalama Mutlak Yüzde Hata ( mape ), zaman serisi veya diğer tahminler için ortak bir doğruluk veya hata ölçüsüdür MAPE=100n∑t=1n|At−Ft|At%,MAPE=100n∑t=1n|At−Ft|At%, \text{MAPE} = \frac{100}{n}\sum_{t=1}^n\frac{|A_t-F_t|}{A_t}\%, buradaki , ve tahminlere veya tahminlere karşılık gelir.AtAtA_tFtFtF_t MAPE bir yüzdedir, bu yüzden seriyi kolayca karşılaştırabiliriz ve insanlar yüzdeleri kolayca anlayabilir ve yorumlayabilir. Ancak MAPE'nin sakıncaları olduğunu …

29 accuracy  mape 

Bir modelin eğitim verilerinde% 100, ancak test verilerinde% 70 kesinliğe sahip olduğunu varsayalım. Aşağıdaki model bu model hakkında doğru mu? Bunun çok şık bir model olduğu açıktır. Test doğruluğu, aşırı takmayı azaltarak arttırılabilir. Ancak, bu model test verileri için kabul edilebilir bir doğruluğa sahip olduğundan hala faydalı bir model olabilir.

25 model  accuracy  overfitting 

F1 skoru, Dice skoru ve IoU (sendika kesişme) arasındaki farklar konusunda kafam karıştı. Şimdiye dek F1 ve Dice'in aynı anlama geldiğini öğrendim (doğru?) Ve IoU'nun diğer ikisine çok benzer bir formülü var. F1 / Zar:2 TP2 TP+ FP+ FN-2TP2TP+FP+FN-\frac{2TP}{2TP+FP+FN} IoU / Jaccard: kırıkTPTP+ FP+ FN-TPTP+FP+FN-\frac{TP}{TP+FP+FN} F1'in gerçek-pozitifleri daha da arttırması …

24 terminology  accuracy  precision-recall 

Ortalama mutlak ölçekli hata (MASE), Koehler ve Hyndman (2006) tarafından önerilen tahmin doğruluğunun bir ölçüsüdür . MASE=MAEMAEin−sample,naiveMASE=MAEMAEin−sample,naiveMASE=\frac{MAE}{MAE_{in-sample, \, naive}} burada gerçek durumunu ürettiği ortalama mutlak hatadır; ise MAE_ {in örnek, \, naif} (bir örneğin herhangi bir değiştirme durumu entegre saf bir tahmini ürettiği ortalama mutlak hata I (1) zaman serileri), …

22 time-series  forecasting  accuracy  mase 

İlk olarak, sonuçların olasılığını verir. Örneğin ABD seçimleri için tahminleri şu anda% 82 Clinton vs% 18 Trump. Şimdi, Trump kazansa bile, kazanması gereken zamanın sadece% 18'i olmadığını nasıl bilebilirim? Diğer sorun ise olasılıklarının zaman içinde değişmesidir. 31 Temmuz'da Trump ve Clinton arasında neredeyse 50-50 idi. Sorum şu, aynı sonuca sahip …

19 forecasting  prediction  validation  accuracy  scoring-rules 

K = 10 kat ile K-kat çapraz doğrulaması yaptığımı varsayalım. Her kat için bir karışıklık matrisi olacaktır. Sonuçları bildirirken ortalama karışıklık matrisinin ne olduğunu hesaplamalı mıyım yoksa sadece karışıklık matrislerini toplamalı mıyım?

18 machine-learning  cross-validation  accuracy 

Bir teşhis sistemi için bir ROC eğrisi oluşturdum. Daha sonra eğrinin altındaki alanın parametrik olmayan bir şekilde AUC = 0.89 olduğu tahmin edildi. En uygun eşik ayarında doğruluğu hesaplamaya çalıştığımda (noktaya en yakın nokta (0, 1)), teşhis sisteminin doğruluğunu 0.8 olarak aldım, bu da AUC'den daha az! Hassasiyeti optimum eşikten …

16 roc  reliability  accuracy  auc 

Basit bir sinir ağı ikili sınıflandırıcısının eğitimi sırasında çapraz entropi kullanarak yüksek bir kayıp değeri elde ederim. Buna rağmen, doğrulama setindeki doğruluk değeri oldukça iyi. Bunun bir anlamı var mı? Kayıp ve doğruluk arasında katı bir ilişki yok mu? Bu değerleri eğitim ve onaylama üzerine aldım: 0.4011 - acc: 0.8224 …

15 neural-networks  accuracy 

40. sayfadaki "Aptallar için biyoistatistik" kitabında okudum: Standart hata (SE kısaltması), bir şeyin tahmini veya ölçümünün ne kadar kesin olduğunu göstermenin bir yoludur. ve Güven aralıkları, bir tahminin kesinliğini veya bir şeyin ölçümünü belirtmek için başka bir yol sağlar. Ancak ölçümün doğruluğunu nasıl belirleyeceği konusunda hiçbir şey yazılı değildir. Soru: …

15 confidence-interval  standard-error  measurement-error  accuracy 

F1 skoru, hassasiyet ve hatırlamanın harmonik ortalamasıdır. Geri çağırmanın y ekseni gerçek pozitif orantır (aynı zamanda hatırlamadır). Öyleyse, bazen sınıflandırıcılar düşük hatırlama oranına ancak çok yüksek AUC değerine sahip olabilir, bunun anlamı nedir? AUC ve F1 skorları arasındaki farklar nelerdir?

14 machine-learning  precision-recall  auc  accuracy 

Bu çok açık bir soru olsa özür dilerim, ama çeşitli yazıları okuyorum ve iyi bir onay bulamıyorum. Sınıflandırma durumunda, bir sınıflandırıcının doğruluğu = 1- test hata oranı var mı? Bu doğruluk , ama sorum tam olarak ne kadar doğruluk ve test hata oranı ile ilgilidir. TP+TNP+NTP+TNP+N\frac{TP+TN}{P+N}

14 classification  terminology  accuracy