«gradient» etiketlenmiş sorular

Gradient Boosting hakkında bilgi edinirken, metodun model oluşturmak ve birleştirmek için kullandığı "zayıf bir sınıflandırıcı" nın özellikleriyle ilgili herhangi bir kısıtlama duymadım. Ancak, doğrusal regresyon kullanan bir GB uygulamasının hayal bile edemedim ve aslında bazı testler yaptığımda, işe yaramadı. En standart yaklaşımı toplam kare artıkları gradyanı ile test ediyordum ve …

35 regression  machine-learning  boosting  ensemble  gradient 

Enterprise miner kullanarak olay oranı yaklaşık% 1 ile bir veri kümesinde degrade artırmayı deniyorum, ancak herhangi bir çıktı üretmek için başarısız. Sorum şu ki, karar ağacı temelli bir yaklaşım olduğu için, bu kadar düşük bir olayla gradyan artırmayı kullanmak doğru mu?

14 boosting  unbalanced-classes  rare-events  gradient 

Problem şu: Çapraz entropi kaybı ile giriş -> gizli, gizli -> çıkış için sigmoid kullanarak tek bir gizli katman sinir ağı için giriş katmanına göre degradeyi türetin. Zincir kuralını kullanarak türetmenin çoğunu geçebilirim ama onları nasıl "zincirleyeceğimiz" konusunda emin değilim. Bazı gösterimleri tanımlayın r=xW1+b1r=xW1+b1 r = xW_1+b_1 h=σ(r)h=σ(r) h = …

9 neural-networks  gradient