Başka bir deyişle, iki sınıf problemi yerine 4 dersle uğraşıyorum ve hala AUC kullanarak performansı değerlendirmek istiyorum.
Yanıtlar:
Görünüşe göre ICML’04’deki bir derste kapsanan çok amaçlı bir optimizasyon türü olan çok sınıflı bir ROC analizi arıyorsunuz. Birkaç çok sınıflı problemde olduğu gibi, fikir genellikle ikili karşılaştırma yapmaktır (bir sınıf diğer tüm sınıflara karşı, bir sınıf diğerine sınıf, bkz. (1) veya İstatistiksel Öğrenmenin Öğeleri ) ve Landgrebe ve Duin tarafından konuyla ilgili makale, Çok dereceli ROC'nin ikili analiz ile yaklaşıklandırılması , Örüntü Tanıma Mektupları 2007 28: 1747-1758. Şimdi, görselleştirme amacıyla, bir süre önce ROC yüzeyinde (VUS) veya Örümcek Ağı şemasında birimin etrafında dönerek bazı kağıtlar gördüm .
Ancak, bu yöntemlerin bir R uygulaması varsa, stars()fonksiyonun örümcek ağı grafiği için kullanılabileceğini düşünmeme rağmen bilmiyorum . Az önce çok sınıflı ROC analizi, PRSD Studio gibi görünen bir Matlab araç kutusuna rastladım .
Görselleştirme / hesaplama için ilk başlangıç olarak yararlı olabilecek diğer makaleler:
Kaynaklar:
1. Allwein, EL, Schapire, RE ve Singer, Y. (2000). Çoklu sınıfın ikiliye düşürülmesi: Marj sınıflandırıcıları için birleştirici bir yaklaşım. Makine Öğrenimi Araştırmaları Dergisi , 1 : 113–141.
Yakın zamanda bu pROC paketini Hand ve Till (2001) tarafından belirtilen tekniği kullanarak çok sınıflı bir ROC alan R'de buldum . Multiclass.roc işlevini kullanabilirsiniz.
Matematik benden öteye giderken, bu genel derleme makalesinde ilginizi çekebilecek bazı referanslar ve çok sınıflı ROC grafiklerinin kısa bir açıklaması vardır.
Tom Fawcett Örüntü Tanıma Mektupları tarafından ROC analizine giriş Cilt 27, Sayı 8, Haziran 2006, Sayfa 861-874
Bağlantı pdf gd047- sayesinde tarafından sağlanan
