Bir şeyin iyi frekansçı özelliklere sahip olması ne anlama gelir?


12

Bu ifadeyi sık sık duydum, ama ne anlama geldiğini asla tam olarak anlamadım. "İyi sıklık mülkleri" ifadesi şu anda google'da yaklaşık 2750, scholar.google.com'da 536 ve stats.stackexchange.com'da 4 isabet aldı .

Ben net bir tanım bulundu yakın şey geliyor nihai slayt içinde bu Stanford Üniversitesi sunumu hangi devletler,

[%]% 95 güven aralığı rapor etmenin anlamı, farklı tahmin problemlerinde bile yaptığınız iddiaların% 95'inde gerçek parametreyi “tuzağa düşürmeniz” dir. Bu, iyi sıklık özellikleri olan tahmin prosedürlerinin belirleyici özelliğidir: tekrar tekrar kullanıldıklarında incelemeye devam ederler.

Bunu biraz yansıtarak, "iyi frekansçı özellikler" ifadesinin Bayes yönteminin ve özellikle Bayes aralıklı inşaat yönteminin bazı değerlendirmelerini ima ettiğini varsayıyorum. Bayes aralıklarının parametresinin gerçek değerini içermesi gerektiğini anlıyorum . Frekansçı aralıklar, aralık oluşturma işlemi birçok kez tekrarlanırsa, aralıkların yaklaşık tekrarlanması durumunda parametrenin gerçek değerini içerecek şekilde yapılandırılmalıdır . Bayes aralıkları genel olarak aralıkların% 'sinin parametrenin gerçek değerini kapsayacağı konusunda herhangi bir söz vermemektedir. Bununla birlikte, bazı Bayesian yöntemleri, birçok kez tekrarlanırsa, hakkında gerçek değeri kapsadıkları özelliğine sahiptir.p % 100 p % 100pp100%p100%zaman. Bu özelliğe sahip olduklarında, "iyi frekansçı özelliklere" sahip olduklarını söylüyoruz.

Bu doğru mu? İfade İyi frequentist atıfta beri, bundan daha fazla olması gerektiğini ben rakam özelliklerinin oldukça iyi bir frequentist olmasındansa özelliği .


1
Bu soruyu düşünme şeklinizi gerçekten çok seviyorum. İlk günlerde Sir Harold Jeffreys, olasılık işlevleri gibi davranan ve dolayısıyla iyi sıklık özellikleri olan Bayesci posterior dağılımlar inşa etmeye çalıştı. Dolayısıyla, bir "tekdüze" ön dağıtımın oluşturulması anlamına gelir. Fikir, böyle bir önceki aracı kullanmanın öncekinin nötr olduğu ve çıkarımı etkilemediğidir. Bu, güvenilir aralıkları güven aralıkları gibi göstermekten daha fazlası için geçerlidir. Ancak Jeffreys bazı sorunlar yaşadı çünkü daha önce "üniforma" nın uygun olmadığı durumlar vardı.
Michael R. Chernick

1
Uygun olmayan, önceki yoğunluğun 1 ile bütünleşmediği anlamına gelir. Jeffreys, Bayes yönteminin sıkça kullanılan yöntemle anlaşarak gerekçelendirilmesi gerektiğine inanıyor gibi görünüyor. Bayesliler sonunda bu görüşü reddetti çünkü iddia ettikleri yaklaşımın değeri, çıkarımı etkileyen önceden bilgi olması ve bu nedenle uygun "bilgilendirici" öncelikleri kullanmayı tercih etmeleridir.
Michael R. Chernick

2
@MichaelChernick: Bayes tahmincileri için sıkça emlak arayan Jeffreys hakkında kesin bir referans verebilir misiniz? Bu hikayeyi hiç duymadım. Ve ayrıca Jeffreys'in uygunsuz öncelikleri kullanmaktan endişe duyduğundan şüpheliyim, hepsi Olasılık Teorisinin üzerindedir .
Xi'an

Ben SEVİYORUM bu soruyu!
Alexis

1
@ Xi'an, aslında Beta-Binom modeli için, önceki Haldane'dir (bu yanlıştır), Jeffreys'den önce (bu durumda uygun olan), frekansçı tahminlere götüren odur. Ayrıca Jeffreys'in iyi frekansçı özellikler aradığını hiç duymadım: Objektif öncelikler aradığını düşündüm ve objektif olarak yeniden ölçüm altında değişmez anlamına geliyordu.
DeltaIV

Yanıtlar:


3

İyi sıklık özellikleri ile ilgili zor bir şey, belirli bir sonucun veya çıkarımın özellikleri yerine bir prosedürün özellikleri olmasıdır. İyi bir sıklık prosedürü, uzun vadede belirtilen vaka oranlarında doğru çıkarımlar sağlar, ancak iyi bir Bayes prosedürü genellikle söz konusu davada doğru çıkarımlar sağlayan prosedürdür.

Örneğin, genel anlamda "iyi" bir Bayes prosedürünü düşünün, çünkü kanıtların (olasılık fonksiyonu) önceki olasılık dağılımı ile kombinasyonunu doğru bir şekilde temsil eden posterior olasılık dağılımı veya güvenilir bir aralık sağlar. Öncek doğru bilgi içeriyorsa (örneğin, boş görüş veya daha önce bilgilendirici olmayan bir biçimden ziyade), bu posterior veya aralık, aynı verilerden sık görülen bir sonuçtan daha iyi çıkarımla sonuçlanabilir. Bu özel durum hakkında daha doğru bir çıkarım veya daha dar bir tahmin aralığı sağlama açısından daha iyidir, çünkü prosedür, önceden doğru bilgiler içeren özelleştirilmiş bir yöntem kullanır. Uzun vadede aralıkların kapsama yüzdesi ve çıkarımların doğruluğu her bir öncekinin kalitesinden etkilenir.

Prosedürün öncekinin nasıl elde edileceğini belirtmediğine ve bu nedenle uzun dönem performans muhasebesinin, muhtemelen her vaka için özel olarak tasarlanmış bir önceki yerine eski olanı kabul edeceğine dikkat edin.

Bir Bayes prosedür olabilir iyi frequentist özellikleri vardır. Örneğin, birçok durumda, önceden tarif edilmiş bilgi vermeyen bir Bayes prosedürü oldukça iyi ila mükemmel sıklık özelliklerine sahip olacaktır. Bu iyi özellikler, tasarım özelliğinden ziyade bir kaza olur ve sıkça uygulanan prosedürlere benzer aralıklar veren böyle bir prosedürün doğrudan bir sonucu olur.

Böylece Bayesci prosedür, uzun vadede zayıf frekansçı özelliklere sahipken, bireysel bir deneyde üstün çıkarımsal özelliklere sahip olabilir. Eşdeğer olarak, iyi uzun dönem frekanslı özelliklere sahip sıkça uygulanan prosedürler, bireysel deneyler durumunda genellikle düşük performansa sahiptir.


2
Takip etmiyorum. Ampirik Bayes hariç, tüm Bayesci prosedürlerde öncekinin verilerden bağımsız olarak seçildiğini gördüm . Dolayısıyla, böyle bir prosedür aynı veri oluşturma işleminden gelen (bu frekansçı çerçevedir) birden çok veri kümesine uygulanırken Bayesyan aynı olasılık işlevini (veri oluşturma işlemi aynıdır) ve aynı önceliği (önceki çoğu Bayes prosedüründeki verilerden bağımsız olarak). Tabii ki veriler her seferinde değiştiğinden, olasılığın değeri değişir, ancak formu aynıdır. Şimdi, eğer her birey [1/2]
DeltaIV

2
[2/2] tahmin daha doğru, tüm prosedür nasıl daha az doğru olabilir? Bu sadece Bayes tahmini her zaman daha doğru değilse mümkündür. Ancak, öncekiler gözlemlenen veriler için özelleştirilmediğinden, her bir durum için ve / veya "ortalama" için neyi daha az veya daha doğru kılan şeyden emin değilim.
DeltaIV

@DeltaV Sanırım yanlış referans seti ile uğraşıyorsunuz. Bir prosedürün sık özellikleri, sadece belirli deneyin tekrarları için değil, tüm yeni durumlarda uygulanan prosedürün uzun dönem performansıyla ilgilidir. Bu yüzden binom orantıları için güven aralığı prosedürleri, sadece prosedürün kullanıldığı herhangi bir belirli örnekle ilgili değer için değil, parametrenin tüm değerleri için çalışmak zorundadır. Bu 'uzun dönem' türü, söz konusu duruma uygun olandan önce özelleştirilmiş olanların uzun dönem için uygun olmayacağı anlamına gelir.
Michael Lew

bilinmeyen parametrenin tüm değerleri için sık sık bir güven prosedürünün nominal kapsama sahip olması gerektiği konusunda haklısınız. Bu Newman & Pearson tarafından açıkça belirtildi ve bugün genellikle göz ardı ediliyor. Ancak, öncekini seçtiğinizde, parametrenin "gerçek" değerinin hangisi olduğunu bilmezsiniz. Sadece örneğiniz var ve önceki örnekten bağımsız olmalıdır. Bu nedenle, örneğe dayalı olarak öncekini nasıl özelleştirebileceğinizi hala net olarak göremiyorum. Pratik bir örnek verebilir misiniz?
DeltaIV

@DeltaIV Bir önceki çalışmada mevcut ilgilenilen parametrenin tahmin edildiğini biliyorsanız, bu tahmine dayanarak önceden bilgilendirici bir şekil oluşturabilirim. Önceden bu mevcut analiz için uygun olacaktır, ancak uzun vadede yöntemin kavramsal uygulamaları için önceden eşdeğer bir uygun bilgilendirici mevcut değildir. Dolayısıyla, analiz izole edilmiş gerçek durumda, sık sık uzun vadede göründüğünden çok daha iyi özelliklere sahip olabilir.
Michael Lew

2

Analizinizin doğru olduğunu cevaplayacağım. Birkaç öngörü sağlamak için, eşleşen önceliklerden bahsedeceğim.

Eşleşen öncelikler, tipik olarak, frekansçı bir özelliğe sahip Bayes modelleri oluşturmak için tasarlanan önceliklerdir. Özellikle, elde edilen hpd aralıkları sık sık güven aralığı kapsamını karşılayacak şekilde tanımlanır (böylece% 95 hpd'nin% 95'i uzun vadede gerçek değerleri içerir). 1d'de analitik çözümlerin bulunduğuna dikkat edin: Jeffreys önceliği eşleşen önceliğe sahiptir. Daha yüksek boyutta, bu gerekli değildir (bildiğim kadarıyla, bunun asla böyle olmadığını kanıtlayan bir sonuç yoktur).

Pratikte, bu eşleştirme prensibi bazen bir modelin bazı parametrelerinin değerini ayarlamak için de uygulanır: zemin gerçeği verileri, değerlerinin ilgili parametre için ortaya çıkan güvenilir aralıkların sık sık kapsamını en üst düzeye çıkarması anlamında bu parametreleri optimize etmek için kullanılır. . Kendi deneyimlerime göre, bu çok ince bir görev olabilir.


0

Yapabileceğim herhangi bir katkı varsa, önce bir açıklama eklememe izin verin ve ardından sorunuzu doğrudan cevaplayın. Konuyla ilgili çok fazla kafa karışıklığı var (bayes prosedürünün en sık özellikleri) ve hatta uzmanlar arasında anlaşmazlık var. İlk yanlış anlama, "Bayes aralıkları, olasılıklı parametrenin gerçek değerini içermesi içindir ." Eğer saf Bayesian iseniz (Bayesci prosedürü değerlendirmek için herhangi bir sıklık kavramını benimsemeyen), "gerçek parametre" diye bir şey yoktur. Frekansçı dünyada sabit parametreler olan ilgilenilen temel miktarlar Bayes dünyasında rastgele değişkenlerdir. Bir Bayesci olarak, parametrelerin gerçek değerini değil, "parametrelerin" dağılımını veya momentlerini kurtarırsınız.p

Şimdi, sorunuzu cevaplamak için: hayır, Bayes yönteminin herhangi bir değerlendirmesini ima etmez. Nüansları atlamak ve basit tutmak için tahmin prosedürüne odaklanmak: istatistiklerde sıklık, bilinmeyen bir sabit miktarı tahmin etmek veya bir hipotezi test etmek ve bu prosedürü varsayımsal bir tekrarlamaya karşı değerlendirmek. Bir prosedürü değerlendirmek için birçok kriter kabul edebilirsiniz. Onu sık sık bir kriter yapan şey, aynı prosedürü tekrar tekrar uygularsa ne olacağına önem vermesidir. Bunu yaparsanız, sık görülen özellikleri önemsersiniz. Başka bir deyişle: "sıklık özellikleri nelerdir?" "prosedürü defalarca tekrarlarsak ne olur?" Şimdi, bu tür frekansçı özellikleri iyi yapan şeybaşka bir ölçüt katmanıdır. İyi özellikler olarak kabul edilen en sık rastlanan frekans özellikleri, tutarlılıktır (bir tahminde, eğer tahmin ediciyi tahmin edeceğiniz sabit değere yaklaşacaksa), verimlilik (örneklemeyi tutarsanız, tahmin edicinin varyansı sıfıra gider) , böylece daha doğru olacaksınız), kapsama olasılığı(prosedürün birçok tekrarında,% 95'lik bir güven aralığı, zamanın% 95'indeki gerçek değeri içerecektir). İlk ikisi büyük örnek özellikleri olarak adlandırılır, üçüncüsü ise asimptotik sonuçları mutlaka kullanması gerekmediği için Neyman-gerçekten frekansçı özelliktir. Özetle, sıkça yapılan çerçevede gerçek ve bilinmeyen bir değer vardır. Bunu tahmin edersiniz ve tahminte her zaman (nadir bir şanslı kaza hariç) yanılıyorsunuz, ancak en azından tahmininizin varsayımsal olarak süresiz olarak tekrarlanmasının altında, daha az ve daha az yanlış olmanızı isteyerek kendinizi kurtarmaya çalışıyorsunuz veyabelli bir zamanlar haklı olacağını biliyorsun. Sorularınız olmadığı göz önüne alındığında, bunun mantıklı olup olmadığını veya gerekçelendirilmesi için gereken ek varsayımları tartışmayacağım. Kavramsal olarak, bu sıklıksal özellikler neyi ifade eder ve bu bağlamda genel olarak hangi iyi anlama gelir.

Size bu makaleyi işaret ederek kapatacağım, böylece mantıklı olup olmadığını ve iyi bir frekansçı özelliklere sahip olmanın bir Bayes prosedürünün ne anlama geldiğine karar vereceksiniz (orada daha fazla referans bulacaksınız):

  • Little, R. ve arkadaşları, (2011). Genel olarak istatistikler ve özel olarak eksik veriler için kalibre edilmiş bayes. İstatistik Bilimi, 26 (2), 162-174.
Sitemizi kullandığınızda şunları okuyup anladığınızı kabul etmiş olursunuz: Çerez Politikası ve Gizlilik Politikası.
Licensed under cc by-sa 3.0 with attribution required.