"Permütasyon değişmez" görüntü tanıma yapan sinir ağları bağlamında ne anlama gelir?

MNIST basamak tanıma görevinin "permütasyon değişmez" terimini gördüm. Bu ne demek?

— RockTheStar
kaynak

Yanıtlar:

Bu bağlamda bu, modelin özellikler arasında herhangi bir uzamsal ilişki üstlenmemesi anlamına gelir. Örneğin çok katmanlı algılayıcı için piksellere izin verebilirsiniz ve performans aynı olacaktır. Komşuluk ilişkilerini üstlenen evrişimsel ağlar için durum böyle değildir.

— bayerj
kaynak

evet, bu kafa karıştırıcı kısım. Rakamların sınıflandırılmasında mekânsal ilişki olması gerekmez mi?

— RockTheStar

MNIST, sinir ağlarında bir kıyaslama (veya akıl sağlığı kontrolü) olarak yaygın olarak kullanılmaktadır. Modeliniz permütasyon değişmez MNIST'de <% 1 hata alabilirse, bir şey içindesiniz.

— bayerj

Evet, yani rakamlarda mekânsal ilişki yok mu? Rakam piksellerine izin verirseniz, esas olarak performansı etkileyen piksel sırası değişir !?

— RockTheStar

Sadece model böyle varsayar. mlps yapmaz, convnets yapar. Bu yüzden bir konveksiyonu mnist'teki bir mlp ile karşılaştırmak biraz haksızdır.

— bayerj

Anlıyorum! Yani, mnist veri kümesinde, mlps daha iyi performans mı yoksa konvnet mi?

— RockTheStar

Bir fonksiyon için bir vektör argüman değeri, eğer permütasyon değişmez biz bileşenlerini permute halinde değişmez olan, örneğin, için, : $f$ $x=(x_1, \dots,x_n)$ $f$ $x$ $n=3$

f ((x_{1}, x_{2}, x_{3})) = f ((x_{2}, x_{1}, x_{3})) = f ((x_{3}, x_{1}, x_{2}))

$f((x_1, x_2, x_3))=f((x_2, x_1,x_3))=f((x_3,x_1,x_2))$

— kjetil b halvorsen
kaynak

Bu cevap biraz yanıltıcıdır, çünkü öğrenen makinede öğrenme algoritması genellikle permütasyon değişmezken, döndürdüğü işlev değildir.

— bayerj

@bayerj: Bu ilginç bir bilgi parçası, ama yanıltıcı verdiğim tanımı yaptığını göremiyorum, doğru bir tanım, ama belki de bu bağlamda tam bir cevap değil.

— kjetil b halvorsen

Haklısın, tanım doğru. Ancak yazdığınız şekilde uygulanmaz. OP'nin sorduğu permütasyon değişmez MNIST bağlamında, yazdığınız formun işlevleri gerçekleşmez.

— bayerj