3 boyutlu Çoklu Doğrusal Regresyon en uygun düzlem mi yoksa en uygun çizgi mi?


11

Profimiz, çoklu doğrusal regresyonun matematiğine, hatta geometrik temsilini ele geçirmiyor ve bu beni biraz karıştırdı.

Bir yandan , daha yüksek boyutlarda bile, hala çoklu doğrusal regresyon denir . Öte yandan, örneğin ve ve için istediğimiz değerleri ekleyebilirsek , bu bize olası çözümlerin bir düzlemini vermez mi? ve bir çizgi değil?x1x2Y^=b0+b1X1+b2X2X1X2

Genelde, bir olacak tahmin eden yüzeyi değil için boyutsal hiperdüzlem bağımsız değişkenler?kkk

Yanıtlar:


12

Haklısın, çözüm yüzeyi genel olarak bir hiper düzlem olacak. Sadece hiper düzlem kelimesi bir ağız dolusu, düzlem daha kısa ve çizgi daha da kısadır. Matematikte devam ettikçe, tek boyutlu vaka daha nadiren tartışılıyor, böylece

Big words for high dimensional, Small words for small dimensional

geriye bakmaya başlar.

Örneğin, gibi bir denklem gördüğümde , burada A bir matris ve x , b vektörler, buna doğrusal denklem diyorum . Hayatımın daha önceki bir bölümünde, buna tek boyutlu durum için doğrusal denklem ayıran doğrusal denklemler sistemi diyebilirim . Ama sonra tek boyutlu durumun çok sık ortaya çıkmadığı bir noktaya geldim, çok boyutlu durum ise her yerdeydi.Ax=bAx,b

Bu, gösterimde de olur. Hiç birinin yazdığını gördüm

fx=2x

Soldaki sembol bir fonksiyonun adıdır, bu yüzden resmi ve bilgiç olmak için yazmalısınız

fx(x)=2x

Çok boyutlu boyutlarda daha da kötüleşir, türev iki argüman aldığında, biri türevi aldığınız yer, diğeri ise türevi hangi yönde değerlendirdiğinize benziyor.

xf(v)

ancak insanlar çok hızlı bir şekilde tembelleşir ve bir veya diğer argümanları bırakmaya başlar ve onları bağlamla anlaşılır.

Profesyonel matematikçiler, sıkıca yanaktaki diller, bu gösterimi kötüye kullanırlar . Notasyonu kötüye kullanmadan kendini ifade etmenin esasen imkansız olacağı konular var, sevgili diferansiyel geometrim bu konuda bir örnek. Büyük Nicolas Bourbaki bu noktayı çok etkili bir şekilde ifade etti

Mümkün olduğunca metinde, herhangi bir matematiksel metnin bilgisizlik riskini taşıdığı, okunamazlık dememek yerine dilin kötüye kullanılmasına dikkat çektik.

- Bourbaki (1988)

Hatta kendimi fark etmeden yukarıdan düştüğüm gösterimin kötüye kullanılması hakkında yorum yapıyorsunuz!

Teknik olarak df / dx'i kısmi bir türev olarak yazdığınız için, diğer zımni değişkenler sabit tutulsa bile, kısmi türev teknik olarak hala df / dx'de olduğu gibi orijinal fonksiyonun tüm değişkenlerinin bir fonksiyonu olmayacaktır ( x, y, ...)?

Mükemmel bir şekilde haklısın ve bu, burada ne aldığımı iyi (kasıtsız) bir örnek veriyor.

dfdx

Sanırım bunu "terimlerin sayısı sonsuza yaklaşırken toplamın sınırı" yerine "sonsuz toplam" dediğimiz zaman düşünüyorum. Düşünme şeklim, kavramsal fark açık olduğu sürece bunun iyi olması. Bu durumda (çoklu regresyon), ilk başta ne hakkında konuştuğumuzdan gerçekten emin değildim.

Σ

Tembel insanlar olarak sık karşılaşılan durumlarda tasarruf etmek istiyoruz.

(*) Tarihsel olarak, sonsuz meblağlar bu şekilde gelişmedi. Kısmi toplamların tanımının sınırı, matematikçiler çok doğru bir şekilde mantıklı olmanın gerekli olduğu durumlarla karşılaşmaya başladığında bir posteriori geliştirildi.


Kısmi türevler örneğini vermeniz komik çünkü her zaman bunu merak ederdim (kendi kendine çalışmanın sevinçleri ...). Bu arada (ilgisiz ve ben bilgiçlik yapmıyorum ama sadece olabildiğince anladığımdan emin olmak istiyoruz) teknik olarak df / dx'i kısmi bir türev olarak yazdığınız için, diğer zımni değişkenler sabit tutulacak olsa bile, kısmi türev teknik olarak hala df / dx (x, y, ...) 'de olduğu gibi orijinal fonksiyonun tüm değişkenlerinin bir fonksiyonu olabilir mi? Sanırım sorum şu: Kısmi türev hala tüm değişkenlerin bir fonksiyonu değil mi?
jeremy radcliff

Ayrıca, tüm bunları açıkladığınız için teşekkürler. Sanırım bunu "terim sayısı sonsuzluğa yaklaşırken toplamın limiti" yerine "sonsuz toplam" dediğimiz zaman sanırım. Düşünme şeklim, kavramsal fark açık olduğu sürece bunun iyi olması. Bu durumda (çoklu regresyon), ilk başta ne hakkında konuştuğumuzdan gerçekten emin değildim. 3D'de bir çizgi hayal etmeye çalıştım ve sonra birkaç bağımsız değişkenin serbestçe değişmesine izin vermenin mantıklı olmadığını fark ettim, bu yüzden emin olmak istedim.
jeremy radcliff

+1 harika cevap. Bazen insanlar tembeldir ve birçok karışıklığa neden olur. Bu yüzden bu yazıda gösterim istemeye çalışıyordum. stats.stackexchange.com/questions/216286/…
Haitao Du

@jeremyradcliff Bazı yorumlarda editörlük yaptım.
Matthew Drury

@MatthewDrury, yorumlarımı ele almak için zaman ayırdığınız için teşekkür ederiz. Benim için çok yararlı çünkü bildiğim matematiğin büyük çoğunluğunu kendi kendime inceliyorum ve çevreleyen kültürün eksikliği ve matematikçilere erişim, stackexchange ve sizinki gibi cevapları benim için çok değerli kılıyor.
jeremy radcliff

5

"Doğrusal" bu bağlamda ne düşündüğünüz anlamına gelmez - biraz daha genel

Birincisi, bu gerçekten x'lerde doğrusallığa değil, * parametrelerine ("parametrelerde doğrusal") bir referanstır.

E(Y|X)=Xββ

Yani en uygun düzlem (veya daha genel olarak hiper düzlem) hala "doğrusal regresyon" dur.

1XβXβ

Sitemizi kullandığınızda şunları okuyup anladığınızı kabul etmiş olursunuz: Çerez Politikası ve Gizlilik Politikası.
Licensed under cc by-sa 3.0 with attribution required.