Kayıp bir web sitesini yedeklemesiz kurtarma?

Ne yazık ki, hosting sağlayıcımız% 100 veri kaybı yaşadı, bu yüzden barındırılan iki blog web sitesinin tüm içeriğini kaybettim:

• http://blog.stackoverflow.com
• http://www.codinghorror.com

(Evet, evet, kesinlikle şirket dışı yedeklemeler yapmalıydım . Ne ​​yazık ki, tüm yedeklemelerim sunucunun kendisindeydi. O yüzden dersi kaydet;% 100 kesinlikle haklısın, ama bu şu anda bana yardımcı olmuyor. burada soruya odaklanın!)

Web sitesini web tarayıcısı önbelleklerinden kurtarma işleminin yavaş ve acı bir sürecine başlıyorum.

Warrick gibi bir web sitesini internet örümcek ağından (Yahoo, Bing, Google vb.) Önbellekten kurtarmak için otomatikleştirilmiş birkaç araç var , ancak bunu kullanarak bazı kötü sonuçlar aldım:

• IP adresim Google’dan kullanması nedeniyle hızla yasaklandı
• Çok sayıda 500 ve 503 hata alıyorum ve "5 dakika bekliyor ..."
• Sonuçta, metin içeriğini elle daha hızlı bir şekilde kurtarabilirim

Tüm blog yayınlarının bir listesini kullanarak, Google önbelleğini tıklatarak ve her dosyayı HTML olarak kaydederken çok daha fazla şansım oldu. Çok fazla blog yazısı varken, o kadar da yok, ve daha iyi bir yedekleme stratejisine sahip olamadığım için biraz kendini beğenmeyi hak ettiğimi düşünüyorum. Neyse, önemli olan şu ki, blog yazı metnini bu şekilde alma konusunda iyi şanslar yaşadım ve kesinlikle web sayfalarının metnini İnternet önbelleklerinden çıkarabiliyorum. Şimdiye kadar yaptıklarım temelinde, tüm kayıp blog yazısı metinlerini ve yorumlarını kurtarabileceğime eminim .

Ancak, her blog gönderisiyle birlikte gelen resimler kanıtlanıyor… daha zor.

Web sitesi sayfalarını Internet önbelleklerinden kurtarmak için genel ipuçları ve özellikle arşivlenmiş görüntüleri web sitesi sayfalarından kurtarmak için yerler ?

(Ve yine, lütfen, yedekleme dersi yok. Tamamen, tamamen, tamamen haklısın! Ama haklı olmak, benim acil sorunumu çözmüyor… Bir zaman makinen olmadığı sürece ...)

İşte karanlıktaki vahşi bıçağım: web sunucunuzu her resim isteği için 304 döndürecek şekilde yapılandırın, daha sonra bir yere bir URL listesi yayınlayarak ve tüm okuyucularınızdan her URL'yi yükleyip herhangi bir resim toplamasını isteyecek şekilde podcast'i isteyerek kurtarma işlemini kalabalıklaştırın yerel önbelleklerinden yüklenenler. (Bu, yalnızca HTML sayfalarını kendileri geri yükledikten sonra <img ...>, sorunuzun yapabileceğinizi ima ettiği etiketlerle tamamlandıktan sonra çalışabilir .)

Bu temelde "okuyucularınızın web tarayıcısı önbelleklerinden al" demenin harika bir yoludur. Çok sayıda okuyucunuz ve podcast dinleyiciniz olduğundan, web sitenizi yakın zamanda görüntülemiş olabilecek çok sayıda kişiyi etkin bir şekilde harekete geçirebilirsiniz. Ancak, çeşitli web tarayıcılarının önbelleklerinden görüntüleri manuel olarak bulmak ve çıkarmak zordur ve çoğu insanın deneyip başarılı olacağı kadar kolaysa, tüm yaklaşım en iyi şekilde çalışır. Böylece 304 yaklaşımı. Okuyucuların tek istediği bir dizi bağlantıyı tıklamaları ve web tarayıcılarına yüklenen (veya sağ tıklayıp farklı kaydetme vb.) Görüntüleri sürükleyip bırakmaları ve ardından size e-postayla göndermeleri ya da kurduğunuz merkezi konum, ya da her neyse. Bu yaklaşımın ana dezavantajı, web tarayıcı önbelleklerinin zaman içinde geri dönmemesidir. Ancak, son birkaç günde 2006'dan çok eski bir görüntüyü bile kurtarmak için bir gönderi yükleyen tek bir okuyucuyu alır. Yeterince büyük bir kitleyle, her şey mümkün.

Bazılarımız sizi bir RSS okuyucu ile takip ediyor ve önbellekleri temizlemiyor. 2006’ya geri dönecek gibi görünen blog yayınlarım var. Gördüğümden hiçbir resim yok, ancak şimdi yaptığınızdan daha iyi olabilir.

(1) Tüm eksik görüntülerin dosya adlarının bir listesini HTML yedeklerinden çıkarın. Gibi bir şey ile kalacaksınız:

• kal-puft-hatmi man.jpg
• internet özellikleri-dialog.png
• yahoo-anasayfa-Small.png
• şifre show-animated.gif
• tivo2.jpg
• Michael-Abrash grafik programı

(2) Bu dosya adları için bir Google Görsel Arama yapın. Görünüşe bakılırsa, diğer blogcular tarafından “yansıtılmış” olan MANY , aynı dosya adına sahip oldukları için alma konusunda olgunlaşmıştır .

(3) Örneğin 10'dan fazla görüntü için başarılı olduğunu kanıtlarsa bunu otomatik olarak yapabilirsiniz.

Giderek, Google Görsel arama ve yazarak site:codinghorror.comen azından tüm resimlerinizin bir minyatür versiyonlarını bulabilirsiniz. Hayır, mutlaka yardımcı olmuyor, ancak bu binlerce görüntüyü almak için size bir başlangıç ​​noktası veriyor.

Google bazı durumlarda daha büyük bir küçük resim saklar gibi görünmektedir:

Google solda, Bing sağda.

Bloglar için duyduğuma üzüldüm. Ders vermeyeceğim. Fakat Imageshack'teki resimlerin gibi görünen şeyleri buldum. Gerçekten sizin mi, yoksa birileri etraflarında bir kopyasını saklıyor mu?

http://profile.imageshack.us/user/codinghorror

Tam boy 456 imge gibi görünüyorlar. Her şeyi kurtarmak için en iyi bahis bu olabilir. Belki sana bir çöplük bile sağlayabilirler.

Jeff, senin için buraya bir şey yazdım

Kısacası size önerdiğim şey:

1. Web sunucusunu, her görüntü isteği için 304 döndürecek şekilde yapılandırın. 304, dosyanın değiştirilmediği ve bu, tarayıcının dosyayı varsa önbelleğinden alacağı anlamına gelir. (kredi: bu Süper Kullanıcı cevabı )

2. Web sitesindeki her sayfada, görüntü verilerini yakalamak ve sunucuya göndermek için küçük bir komut dosyası ekleyin.

3. Görüntü verilerini sunucuya kaydedin.

4. İşte bu kadar!

Komut dosyalarını verilen linkten alabilirsiniz.

Wayback Makinesi'nde bu sorguyu deneyin :

http://web.archive.org/web/*sa_re_im_/http://codinghorror.com/*

Bu, size archive.org tarafından arşivlenen codinghorror.com adresinden gelen tüm görüntüleri sağlayacaktır. Bu, bazıları kopya olan 3878 görüntüyü döndürür. Tamamlanmış olmayacak, ama iyi bir başlangıç ​​daha az değil.

Kalan görüntüler için, bir arama motoru önbelleğindeki küçük resimleri kullanabilir ve ardından bunları http://www.tineye.com/ adresinde kullanarak geriye doğru bakabilirsiniz . Küçük resim görüntüsünü verirsiniz ve size web üzerinde bulunan görüntülerle yakından eşleşen bir önizleme ve işaretçi verir.

ddÖneri üzerine +1 (1) işlenmemiş disk bir yerde mevcutsa; ve (2) görüntüler basit dosyalardı. Ardından, JPG / PNG / GIF gibi görünen tüm güvenilir aralıkları (örneğin) çıkarmak için adli bir 'veri oyma' aracı kullanabilirsiniz. Bu şekilde silinen bir iPhone'daki fotoğrafların% 95'ini + kurtardım.

Açık kaynak araçları 'her şeyden önce' ve onun ardılı 'neşter' bunun için kullanılabilir:

http://foremost.sourceforge.net/

http://www.digitalforensicssolutions.com/Scalpel/

Neyse ki, gelecek nesiller iyi olacak.

Bilim adamları / dilbilimciler bu büyük kayanın sadece bir kısmıyla bile çok şey keşfettiler.

Birkaç resim eksikse, birkaç bin yıl içinde anlaması için bir başkasına bırakın.

Umarım, biraz gülüyorsunuz. :)

Archive.org'u da her zaman deneyebilirsiniz. Geri bildirim makinesini kullanın. Bunu web sitelerimdeki görüntüleri kurtarmak için kullandım.

Yani, mutlak en kötü durum, bir şeyi kurtaramazsın. Lanet olsun.

Küçültülmüş google olanları kapmayı ve bunları ters görüntü arama motoru TinEye'den geçirmeyi deneyin . Umarım insanların yaptıkları kopyaları veya rehost'ları almalıdır.

Uzun bir atış, ama şunları düşünebilirsiniz:

• Eksik olan resmin tam listesini gönderme
• tüm okuyucularınızın internet önbellekleri aracılığıyla geri alım sürecini kalabalıklaştırıyor.

Örneğin, Nirsoft Mozilla Cache Görüntüleyicisine bakın :

_{(kaynak: nirsoft.net )}

Basit bir komut satırıyla sahip olabilecek herhangi bir "blog.stackoverflow.com" resmini hızla kazabilir:

MozillaCacheView.exe -folder "C:\Documents and Settings\Administrator\Local Settings\Application Data\Mozilla\Firefox\Profiles\acf2c3u2.default\Cache" 
/copycache "http://blog.stackoverflow.com" "image" /CopyFilesFolder "c:\temp\blogso" /UseWebSiteDirStructure 0

Not: Chrome için aynı önbellek gezginine sahipler .

_{(kaynak: nirsoft.net )}

(15 günlük blog.stackoverflow.com fotoğraflarına değer vermem gerekiyor)

Ve Internet Explorer veya Opera .

Ardından, okuyucuların önbellekte bulduklarını bildirmek için genel listeyi güncelleyin.

Geçmişte http://www.archive.org/ önbelleğe alınmış görüntüleri almak için kullandım. Bir nevi isabet görmüş ya da özledim ama benim için çalıştı.
Ayrıca, eski bir sitede kullandığım stok fotoğrafları kurtarmaya çalışırken, www.tineye.com yalnızca küçük resimlerim olduğunda ve tam boyutlu resimlere ihtiyacım olduğunda harika.

Umarım bu sana yardımcı olur. İyi şanslar.

Bu muhtemelen en kolay veya en tam çözüm değildir, ancak Evernote gibi hizmetler genellikle uygulama içinde depolandıklarında hem metni hem de görüntüleri kaydederler. ?

Archive.org ile ilgili harika deneyimlerim oldu . Tüm blog yayınlarınızı siteden çıkaramasanız bile , düzenli olarak anlık görüntüler tutar:

Bu şekilde her sayfayı kontrol edebilir ve yaptığınız blog yazılarını görebilirsiniz. Tüm yayınların adları ile eğer archive.org yoksa, onları Google'ın önbelleğinde kolayca bulabilirsiniz. Arşiv, görüntü tutmaya çalışır, Google önbelleği görüntülere sahip olur ve yakın zamanda önbelleğimi boşaltmadım, bu yüzden daha yeni blog gönderilerinde size yardımcı olabilirim :)

Kendi yerel tarayıcı önbelleğinizi denediniz mi? Son zamanlarda bazı şeyler hala orada oldukça iyi bir şans. http://lifehacker.com/385883/resurrect-images-from-my-web-browser-cache

(Ya da tüm eksik resimlerin bir listesini derleyebilirsiniz ve herkes boşlukları doldurup doldurmayacağımızı görmek için önbelleklerini kontrol edebilir)

Gelecek için bir öneri: Blog yazmak için Windows Live Writer kullanıyorum ve blogumda yayınlamanın yanı sıra makinemdeki yazıların yerel kopyalarını da kaydediyor.

Yaklaşık beş yıl önce, tüm dijital fotoğraflarımı sakladığım harici bir sabit sürücünün enkarnasyonu kötü bir şekilde başarısız oldu. Sabit diskin bir görüntüsünü kullanarak ddJPEG görüntüsüne benzeyen herhangi bir şeyi kurtarmak için ilkel bir araç kullandım. Fotoğraflarımın çoğunu çıkardım.

Öyleyse asıl soru, görüntüleri tutan sanal makine disk görüntüsünün bir kopyasını alabilir misiniz?

Web arşivi görüntüleri önbelleğe alır. Şu anda ağır yük altında, 2008 yılına kadar iyi durumda olmalısınız.

http://web.archive.org/web/20080618014552rn%5F2/www.codinghorror.com/blog/

Archive.org ve [Tor] [2] gibi bir istek anonimleştiricisinin kombinasyonunu öneririm. Anonimleştiriciyi kullanmanızı öneririm, çünkü bu şekilde isteklerinizin her biri rastgele bir IP ve konuma sahip olacak ve bu şekilde çok fazla sayıda istek için bir archive.org (Google gibi) tarafından yasaklanmayı önleyebilirsiniz.

İyi Şanslar, bu blogda bir sürü mücevher var.

Wayback makine bazı olacaktır. Google önbelleği ve benzeri önbelleklerin bazıları olacaktır.

Yapabileceğiniz en etkili şeylerden biri, asıl posterleri e-postayla göndererek yardım istemektir.

Aslında bazı altyapı önerileri var, çünkü bunların hepsi temizlendikten sonra. Temel sorun aslında yedekler değil, site çoğaltması ve denetim eksikliği. Özel e-posta alanının içeriğinde bana e-posta gönderirseniz, daha sonra ayağa kalktığınızda, konuyu sizinle görüşmek isterim.

Resimleriniz Flickr veya CDN gibi harici bir serviste saklandıysa (podcast'larınızdan birinde belirtildiği gibi), yine de oradaki resim kaynaklarına sahip olabilirsiniz.

Resimlerden bazıları Google Görseller’de arama yaparak bulunabilir ve "Benzer görselleri bul" u tıklayabilir , belki başka sitelerde de kopyalar vardır.

archive.org bazen görüntüleri gizler. Her URL'yi manuel olarak alın (veya kısa bir komut dosyası yazın) ve bu şekilde sorgulayın:

string.Format ("GET / * / {0}", nextUri)

Tabii ki aramak için bir acı olacak.

Tarayıcı önbelleğimde bir miktar olabilir. Eğer yaparsam onları bir yerde barındırırım.

Kullanıcıların önbelleklerini kazımaya çalışmayı umuyorsanız, sunucuyu 304 Not Modified, tarayıcıların kullandığı tüm koşullu GET ('If-Modified-Since' veya 'If-None-Match') isteklerine yanıt verecek şekilde ayarlamak isteyebilirsiniz . önbelleğe alınmış materyallerini yeniden doğrulayın.

Görüntüler gibi statik içerikteki ilk önbelleğe alma başlıklarınız oldukça liberalse - şeylerin günlerce veya aylarca önbelleğe alınmasına izin veriyorsa - bir süre için yeniden doğrulama istekleri almaya devam edebilirsiniz. Bu isteklere bir çerez ayarlayın ve bu kullanıcılara, sahip oldukları görüntüleri ayıklamak için önbelleklerine karşı bir komut dosyası çalıştırmalarını söyleyin.

Yine de dikkat edin: Herhangi bir metin içeriğini henüz mevcut olmayan satır içi kaynaklarla hazırlamaya başladığınız anda, yeniden önleyiciler 404'lere çarptığında önbelleğe alınmış sürümleri siliyor olabilirsiniz.

Sen kullanabilirsiniz TinEye için resimlerinizin çiftleri bulmak tarafından google önbelleği ile küçük resimleri arama . Bu, ancak başka sitelerden çektiğiniz resimlere yardımcı olacaktır.

Açıkça görülme riski altında , görüntüler için kendi bilgisayarınızın yedeklerini çıkarmaya çalışın . Yedekleme stratejimin, harici sürücülerde, yanık disklerde ve zip / tar dosyalarında takılan çok sayıda dosyanın birden fazla kopyasına sahip olduğum için yeterince tehlikeli olduğunu biliyorum. İyi şanslar!

Bu dosyaları Snow Leopard'daki Safari önbelleğimden kurtarmayı başardım:

bad-code-offset-back.jpg
bad-code-offset-front.jpg
code-whitespace-invisible.png
code-whitespace-visible.png
coding-horror-official-logo-small.png
coding-horror-text.png
codinghorror-search-logo1.png
crucial-ssd-128gb-ct128m225.jpg
google-microformat-results-forum.png
google-microformat-results-review.png
kraken-cthulhu.jpg
mail.png
powered-by-crystaltech-web-hosting.png
ssd-vs-magnetic-graph.png

Başkasının denemek istiyor, ben ~ / codinghorror / dosya adı, onları ayıklamak için bir Python komut dosyası yazdık burada çevrimiçi koyduk .

Umarım bu yardımcı olur.

Barındırma sağlayıcınızın herhangi bir yedeğinin olup olmadığını görme şansınız oldu mu (bazı eski sürümler)?

Bu veriler sizin için değer nedir? Önemli bir miktar (binlerce dolar) tutarsa, barındırma sağlayıcınızdan web sitenizin verilerini depolamak için kullanılan sabit sürücüden (donanım arızası nedeniyle veri kaybı olması durumunda) isteyin. Daha sonra sürücüyü ne çıkarabileceğinizi görmek için sürücüyü izlemeye veya başka bir veri kurtarma servisine götürebilirsiniz. Bu, sürücüdeki diğer kişilerin de kurtarılmamış verilerinin olasılığı nedeniyle pazarlık yapmakta zor olabilir, ancak gerçekten umursuyorsanız, muhtemelen çalışabilirsiniz.

Bunu duyduğuma çok üzüldüm ve size çok kızgınım ve zamanlama - Gönderilerinizden birkaçının çevrimdışı bir kopyasını almak istedim ve tüm sitenize HTTrack yaptım ancak dışarı çıkmak zorunda kaldım (bu birkaç hafta önceydi) ve Onu durdurdum.

Eğer ana bilgisayar yarıya iniyorsa - ve aslında, iyi bir müşteri olduğunuzu tahmin ediyorum ... onlardan size sabit diskleri göndermelerini (tahmin ediyorum ki RAID kullanmaları gerektiğini tahmin ediyorum) ya da bir miktar kurtarma yapmalarını isterim.

Bu hızlı bir süreç olmasa da, bunu bir müşteri için bir ana bilgisayarla yaptım ve tüm veritabanlarını sağlam bir şekilde kurtarabildim (... temelde, ana bilgisayar kullandıkları kontrol paneli için bir yükseltme denedi ve bozdu .. ama hiçbir şeyin üzerine yazılmadı).

Ne olursa olsun - SO sitelerinde tüm hayranlarınızdan iyi şanslar!