“For line in…”, UnicodeDecodeError ile sonuçlanır: 'utf-8' codec bileşeni bayt kodunu çözemez

İşte kodum,

for line in open('u.item'):
#read each line

ne zaman bu kodu çalıştırmak aşağıdaki hatayı verir:

UnicodeDecodeError: 'utf-8' codec can't decode byte 0xe9 in position 2892: invalid continuation byte

Bunu çözmek ve open () ekstra bir parametre eklemek için çalıştı, kod gibi görünüyor;

for line in open('u.item', encoding='utf-8'):
#read each line

Ama yine aynı hatayı veriyor. o zaman ne yapmalıyım! Lütfen yardım et.

Mark Ransom'un önerdiği gibi, bu sorun için doğru kodlamayı buldum. Kodlama böylece yerine "ISO-8859-1" idi open("u.item", encoding="utf-8")ile open('u.item', encoding = "ISO-8859-1")sorunu çözecektir.

Benim için de çalıştı, ISO 8859-1 çok tasarruf edecek, hahaha, özellikle Konuşma Tanıma API'lerini kullanıyorsa

Misal:

file = open('../Resources/' + filename, 'r', encoding="ISO-8859-1");

Dosyanız gerçekten utf-8 kodlanmış veriler içermiyor, başka kodlamalar içeriyor. Bu kodlamanın ne olduğunu bulun ve opençağrıda kullanın .

Örneğin Windows-1252 kodlamasında 0xe9karakter olur é.

Pandaları kullanarak okumak için bunu deneyin

pd.read_csv('u.item', sep='|', names=m_cols , encoding='latin-1')

Eğer kullanıyorsanız Python 2şunları olacak çözüm:

import io
for line in io.open("u.item", encoding="ISO-8859-1"):
    # do something

Çünkü encodingparametre ile çalışmaz open(), aşağıdaki hatayı elde edilecektir:

TypeError: 'kodlama' bu işlev için geçersiz bir anahtar kelime bağımsız değişkenidir

Sorunu şu şekilde çözebilirsiniz:

for line in open(your_file_path, 'rb'):

'rb' dosyayı ikili modda okuyor. Daha fazlasını buradan okuyun . Umarım bu yardımcı olur!

Bu çalışıyor:

open('filename', encoding='latin-1')

veya:

open('filename',encoding="IS0-8859-1")

Bunları arayan biri varsa, bu Python 3'te bir CSV dosyasını dönüştürmek için bir örnektir:

try:
    inputReader = csv.reader(open(argv[1], encoding='ISO-8859-1'), delimiter=',',quotechar='"')
except IOError:
    pass

Bazen zaman open(filepath)hangi filepathdeğil aslında bir dosya var açık çalışıyoruz emin dosya yapmak o kadar öncelikle aynı hatayı alacağı:

import os
assert os.path.isfile(filepath)

umarım bu yardımcı olur.

bu şekilde deneyebilirsiniz:

open('u.item', encoding='utf8', errors='ignore')