UnicodeDecodeError: 'charmap' kodek Y konumunda X baytının kodunu çözemiyor: karakter <defined> ile eşleşiyor

Bilgi dolu bir metin dosyası ile bazı manipülasyonlar yapmak için bir Python 3 programı almaya çalışıyorum. Ancak, dosyayı okumaya çalışırken aşağıdaki hatayı alıyorum:

 Traceback (most recent call last):  
     File "SCRIPT LOCATION", line NUMBER, in <module>  
     `text = file.read()`  
     File "C:\Python31\lib\encodings\cp1252.py", line 23, in decode  
     `return codecs.charmap_decode(input,self.errors,decoding_table)[0]`  
     UnicodeDecodeError: 'charmap' codec can't decode byte 0x90 in position 2907500: character maps to `<undefined>`  

Söz konusu dosya CP1252kodlamayı kullanmıyor . Başka bir kodlama kullanıyor. Hangisini bulmalısın. Ortak olanlar Latin-1ve UTF-8. Yana 0x90 aslında ortalama bir şey yapmaz Latin-1, UTF-8( 0x90 devamı byte) olasılığı daha fazladır.

Kodlamayı dosyayı açtığınızda belirtirsiniz:

file = open(filename, encoding="utf8")

Sadece file = open(filename, encoding="utf8")işe yaramazsa eklemek için deneyinfile = open(filename, errors='ignore')

@ LennartRegebro'nun cevabının bir uzantısı olarak :

Dosyanızın hangi kodlamasını kullandığını söyleyemiyorsanız ve yukarıdaki çözüm işe yaramazsa (işe yaramazsa utf8) ve kendinizi sadece tahmin ederken bulduysanız - hangi kodlamanın olduğunu tanımlamak için kullanabileceğiniz çevrimiçi araçlar vardır. Mükemmel değiller ama genellikle gayet iyi çalışıyorlar. Kodlamayı anladıktan sonra yukarıdaki çözümü kullanabilmeniz gerekir.

EDIT: (Yorumdan kopyalandı)

Oldukça popüler bir metin düzenleyicisinin Sublime Text, ayarlanmışsa kodlamayı görüntüleme komutu vardır ...

1. View-> Show Console(veya Ctrl+ `) öğesine gidin

2. Alttaki alana yazın view.encoding()ve en iyisini umun (bir şey alamadım Undefinedama belki daha iyi şansınız olacak ...)

Alternatif olarak, dosyayı bir web sitesine yüklemek gibi kodu çözmeniz gerekmiyorsa open(filename, 'rb'). r = okuma, b = ikili

TLDR? Deneyin:file = open(filename, encoding='cp437)

Neden? Biri kullanıldığında:

file = open(filename)
text = file.read()

Python, dosyanın geçerli ortamla aynı kod sayfasını kullandığını varsayar (açılış yazısı durumunda cp1252) ve kendi varsayılan UTF-8 kodunu çözmeye çalışır. Dosya bu kod sayfasında tanımlanmamış değer karakterleri içeriyorsa (0x90 gibi) UnicodeDecodeError alırız. Bazen dosyanın kodlamasını bilmiyoruz, bazen dosyanın kodlaması Python tarafından işlenmeyebilir (örneğin cp790 gibi), bazen dosya karışık kodlamalar içerebilir.

Bu tür karakterler gereksiz ise, bunları soru işaretleriyle değiştirmeye karar verebilirsiniz:

file = open(filename, errors='replace')

Başka bir geçici çözüm kullanmaktır:

file = open(filename, errors='ignore')

Karakterler daha sonra bozulmadan kalır, ancak diğer hatalar da maskelenir.

Oldukça iyi bir çözüm , kodlamayı belirtmek, ancak herhangi bir kodlamayı (cp1252 gibi) değil, TÜM karakterleri tanımlanmış olanı (cp437 gibi) belirtmektir:

file = open(filename, encoding='cp437')

Kod sayfası 437 özgün DOS kodlamasıdır. Tüm kodlar tanımlanmıştır, bu yüzden dosyayı okurken hiçbir hata yoktur, hiçbir hata maskelenmez, karakterler korunur (oldukça sağlam değil, ancak yine de ayırt edilebilir).

Windows'da Anaconda'da çalışanlar için de aynı problem vardı. Notepad ++ çözmem için bana yardım et.

Dosyayı Notepad ++ ile açın. Sağ altta size geçerli dosya kodlamasını söyleyecektir. Üst menüde, "Görünüm" ün yanında "Kodlama" yı bulun. "Kodlama" da "karakter kümeleri" ne gidin ve orada sabırlı ile ihtiyacınız olan bakıma bakın. Benim durumumda "Windows-1252" kodlaması "Batı Avrupa" altında bulundu

Zamanınızı boşa harcamayın, hem okuma hem de yazma işleminde aşağıdakileri encoding="cp437"ve errors='ignore'kodunuza eklemeniz yeterlidir:

open('filename.csv', encoding="cp437", errors='ignore')
open(file_name, 'w', newline='', encoding="cp437", errors='ignore')

Yolun açık olsun

benim kodumla aynı kodlama Mysql karakteri değiştirmek için çözüm sıralamak için yardımcı oldu. `photo = açık ('pic3.png', kodlama = latin1), güçlü metin