ImageNet: İlk beş hata ne anlama geliyor?

9

ImageNet Yarışması için değerlendirme yöntemlerinden biri (1000 kategori resmi sınıflandırın) ilk 5 hatasıdır, bu ne anlama gelir?

Bkz. Http://www.image-net.org/challenges/LSVRC/

machine-learning classification computer-vision

— RockTheStar
kaynak

8

Rank-5 hatası olarak da bilinen Top-5 hatası, yalnızca Sıra-N hata metriğinin bir örneğidir $(N=5)$ .

rütbe $N$ hata test örneklerinin oranıdır $x_i$ nerede doğru etiket $y_i$ üstte görünmüyor $N$ sonuçlar azalan güven sırasına göre sıralandığında modelin tahmin edilen sonuçları veya $P(y_i|x_i)$ .

In ILSVRC 2014 , sınıflandırma için hata metrik oldu:

e = \frac{1}{n} \cdot \underset{k}{Σ} min_{ben} d (c_{ben}, C_{k})

$e = \tfrac{1}{n} \cdot \sum_k \min_{i} d(c_i, C_k)$

nerede

d (bir, b) = {\begin{cases} 0 & Eğer bir = b \\ 1 & aksi takdirde \end{cases}

$d(a, b) = \begin{cases} 0 & \text{if } a = b \\ 1 & \text{otherwise} \end{cases}$

$c_i$ tahmin edilen etiket ve $C_k$ temel gerçek etiketidir. Orada $n$ mümkün etiketler $k=1, ..., n$ .

— sabalaba
kaynak

Harika! Bir açıklama, c ve büyük harf C ne anlama geliyor?

— RockTheStar

Burada büyük C, yer gerçeği etiketlerinden biridir ve küçük c, tahmin edilen etiketlerden biridir.

— sabalaba

1

sabalaba - bu bilgiyi cevabınıza ekleyebilir misiniz?

— Glen_b -Manica

3

ilk 5 hata oranı (bir modelin), doğru etiketin model tarafından en muhtemel olduğu düşünülen beş etiket arasında olmadığı test görüntülerinin oranıdır [ 1 ]

— Debvrat Varshney
kaynak

1

Bence şartlı değerlendirme $d(A_i, B_k)$ okumalı: $d(Ai, Bk) = 0$ , Eğer $A_i$ verilen bir gerçek doğruluk sınıfı Bk için ilk N olası sınıflandırmada meydana gelir. = 1, eğer değilse.

Burada k 0 ile N-1 arasındaki değerleri alır. Burada N, sınıf sayısıdır. Her biri için $B_k$ , var $A_i$ i değerlerini aldığı olası sınıflamalar [0, N-1]

— RM Nair
kaynak