Bir sayfayı indirmek için Wget'i kullanmaya çalışıyorum , ancak giriş ekranını geçemiyorum.
Oturum açma sayfasındaki posta verilerini kullanarak kullanıcı adını / şifreyi nasıl gönderirim ve ardından asıl sayfayı kimliği doğrulanmış kullanıcı olarak nasıl indiririm?
Yanıtlar:
Kılavuz sayfasına göre:
# Log in to the server. This only needs to be done once.
wget --save-cookies cookies.txt \
--keep-session-cookies \
--post-data 'user=foo&password=bar' \
--delete-after \
http://server.com/auth.php
# Now grab the page or pages we care about.
wget --load-cookies cookies.txt \
http://server.com/interesting/article.php
--post-dataParametrenin uygun şekilde yüzde olarak kodlandığından (özellikle ve işaretleri!) Emin olun, aksi takdirde istek muhtemelen başarısız olur. Ayrıca userve passwordanahtarlarının doğru olduğundan emin olun ; giriş sayfasının HTML kodunu kullanarak doğru tuşları öğrenebilirsiniz (tarayıcınızın “inceleme öğesi” özelliğine bakın ve namekullanıcı adı ve şifre alanlarındaki özelliği bulun ).
-p( --page-requisites) gerekmez .
--delete-afterİlk girişe de eklemeye değer , böylece sonuç sayfasını giriş yapmaktan kurtarmazsınız.
WGET64: missing URLTüm wget komutunu bir satıra koydum ve kaldırdım ``
Bir kerelik kullanım için ihtiyacınız varsa, tarayıcı aracılığıyla giriş yapabilir ve daha sonra gerekli başlıkları kopyalayabilirsiniz:
Geliştirici Araçları Ağ sekmesinde Kullanım "cURL olarak Kopyala" (açıldıktan sonra sayfayı yeniden) ve curl en başlık bayrağını değiştirmek -Hve --datawget en ile --headerve --post-data.
wget, doğru çerezle işe yaramadı; Web hizmetinin "Kullanıcı-Aracı" veya "Önbellek Kontrolü" gibi önemsiz görünen birden fazla farklı GET başlığı olup olmadığını kontrol ettiğinden şüpheleniyorum.
wgetverileri yanlış bir şekilde sağladığından şüpheleniyorum .
--No-cookies ve Cookie HTTP istek başlığı ile wget yapmak için mevcut bir bağlantının çerezlerini doğrudan verdim. Benim durumumda, giriş yapmanın daha karmaşık göründüğü bir Moodle üniversitesi girişiydi (giriş bileti ile birden fazla istek kullanarak). POST isteği olduğu için --post-data ekledim. Örneğin, tüm Moodle kullanıcıları listesini alın:
wget --no-cookies --header "Cookie: <name>=<value>" --post-data 'tab=search&name=+&personsubmit=Rechercher&keywords=&keywordsoption=allmine' https://moodle.unistra.fr/message/index.php
Ben de aynı problemi yaşadım. Benim çözümüm Chrome üzerinden giriş yapmak ve çerez verilerini bir metin dosyasına kaydetmekti. Bu, şu Chrome uzantısı ile kolayca yapılır: Chrome cookie.txt dışa aktarma uzantısı .
Çerez verilerini aldığınızda, bunları wget ile nasıl kullanacağınıza dair bir örnek vardır. Size basit bir kopyala yapıştır komut satırı sağlanır.
Herhangi bir dosya indirmeyen bir astar istedi; burada çerez çıktısını bir sonraki talebe borulama örneği verilmiştir. Yalnızca Gentoo'da aşağıdakileri test ettim, ancak çoğu * nix ortamında çalışmalıdır:
wget -q -O /dev/null --save-cookies /dev/stdout --post-data 'u=user&p=pass' 'http://example.com/login' | wget -q -O - --load-cookies /dev/stdin 'http://example.com/private/page'
(bu bir satırdır, ancak tarayıcınıza sarılır)
İsterseniz çıktı, bir dosyaya değişikliği kaydettikten -O -için-O /some/file/name
Temel kimlik doğrulaması kullanıyorlarsa:
wget http://username:password@www.domain.com/page.html
POSTed form verileri kullanıyorlarsa, bunun yerine cURL gibi bir şey kullanmanız gerekir .
Not: Lynx'in çalışması için --enable-persistent-cookies bayrağıyla derlenmiş olması gerekir
Giriş gerektiren bir siteden bazı dosyaları indirmek için wget kullanmak istediğinizde, sadece bir çerez dosyasına ihtiyacınız vardır. Çerez dosyasını oluşturmak için vaşak seçiyorum. lynx bir metin web tarayıcısıdır. İlk olarak, lynx'in çerezi kaydetmesi için bir yapılandırma dosyasına ihtiyacınız var. Bir dosya oluşturun lynx.cfg. Bu yapılandırmayı dosyaya yazın.
SET_COOKIES:TRUE
ACCEPT_ALL_COOKIES:TRUE
PERSISTENT_COOKIES:TRUE
COOKIE_FILE:cookie.file
Ardından lynx'i şu komutla başlatın:
lynx -cfg=lynx.cfg http://the.site.com/login
Kullanıcı adını ve şifreyi girdikten sonra 'beni bu bilgisayarda koru'yu veya benzer bir şeyi seçtikten sonra. Başarılı bir şekilde giriş yaparsanız, sitenin güzel bir metin web sayfasını görürsünüz. Ve çıkış yapıyorsun. Geçerli dizinde, cookie.file adında bir çerez dosyası bulacaksınız. Uyanmak için ihtiyacımız olan şey bu.
Daha sonra wget bu komutla siteden dosya indirebilir.
wget --load-cookies ./cookie.file http://the.site.com/download/we-can-make-this-world-better.tar.gz
Sunucuda wget ile indirmek için örnek tarayıcınızda elde edilebilecek büyük bir dosya bağlantısı.
Örneğin, Google Chrome'u kullanma.
İhtiyacınız olan yere giriş yapın ve indir tuşuna basın. Bağlantınızı indirip kopyalayın.
Sonra açık DevTools oturum açma, gidin bir sayfada Konsolundan ve Şunu girerek, çerezlerinizi olsundocument.cookie
Şimdi sunucuya gidin ve dosyanızı indirin: wget --header "Cookie: <YOUR_COOKIE_OUTPUT_FROM_CONSOLE>" <YOUR_DOWNLOAD_LINK>
