«utf-8» etiketlenmiş sorular

Java kullanarak CSV dosyalarını okumaya çalışıyorum. Bazı dosyaların başında bayt sırası işareti olabilir, ancak hepsinde değil. Varsa, bayt sırası ilk satırın geri kalanıyla birlikte okunur ve bu da dizge karşılaştırmalarında sorunlara neden olur. Bayt sırası işaretini varken atlamanın kolay bir yolu var mı? Teşekkürler!

107 java  utf-8  byte-order-mark 

Standart olmayan% uxxxx şemasını biliyorum, ancak bu plan W3C tarafından reddedildiği için akıllıca bir seçim gibi görünmüyor. Bazı ilginç örnekler: Kalp karakteri. Bunu tarayıcıma yazarsam: http://www.google.com/search?q=♥ Sonra kopyalayıp yapıştırın, bu URL'yi görüyorum http://www.google.com/search?q=%E2%99%A5 Firefox (veya Safari) bunu yapıyor gibi görünmesini sağlar. urllib.quote_plus(x.encode("latin-1")) '%E2%99%A5' Bu, üçlü nokta karakteri gibi Latin-1'de kodlanamayan …

107 unicode  utf-8  character-encoding  urlencode  web-standards 

İçinde bazı standart olmayan karakterler bulunan çok büyük bir veri kümesiyle çalışmaya çalışıyorum. İş özelliklerine göre unicode kullanmam gerekiyor, ancak şaşkınım. (Ve muhtemelen her şeyi yanlış yapmak.) CSV'yi şunu kullanarak açıyorum: 15 ncesReader = csv.reader(open('geocoded_output.csv', 'rb'), delimiter='\t', quotechar='"') Sonra onu şu şekilde kodlamaya çalışıyorum: name=school_name.encode('utf-8'), street=row[9].encode('utf-8'), city=row[10].encode('utf-8'), state=row[11].encode('utf-8'), zip5=row[12], zip4=row[13],county=row[25].encode('utf-8'), …

107 python  django  utf-8 

Bir dizeyi UTF-8 olarak kodlamaya çalışırken birkaç sorun yaşıyorum. Kullandığım dahil çok sayıda şeyleri, denedim string.encode('utf-8')ve unicode(string)ama hata alıyorum: UnicodeDecodeError: 'ascii' codec bileşeni, 1 konumundaki bayt 0xef kodunu çözemiyor: ordinal aralıkta değil (128) Bu benim dizim: (｡･ω･｡)ﾉ Neyin yanlış gittiğini anlamıyorum, herhangi bir fikriniz var mı? Düzenleme: Sorun, dizeyi olduğu …

106 python  unicode  utf-8 

Varsayılan olarak, bir komutun çıktısını bir dosyaya yönlendirdiğinizde veya PowerShell'de başka bir şeye yönlendirdiğinizde, kodlama UTF-16'dır ve bu kullanışlı değildir. UTF-8 olarak değiştirmek istiyorum. >foo.txtSözdizimini ile değiştirerek duruma göre yapılabilir, | out-file foo.txt -encoding utf8ancak bunun her seferinde tekrarlanması gariptir. Bir şeyleri PowerShell'de ayarlamanın kalıcı yolu onları yerleştirmektir \Users\me\Documents\WindowsPowerShell\profile.ps1; Bu …

105 powershell  utf-8  character-encoding 

Bu konuyu Google'da araştırdım ve her cevaba baktım, ancak yine de anlamıyorum. Temel olarak UTF-8 dizesini ISO-8859-1'e dönüştürmem gerekiyor ve bunu aşağıdaki kodu kullanarak yapıyorum: Encoding iso = Encoding.GetEncoding("ISO-8859-1"); Encoding utf8 = Encoding.UTF8; string msg = iso.GetString(utf8.GetBytes(Message)); Kaynak dizem Message = "ÄäÖöÕõÜü" Ama ne yazık ki sonuç dizim msg = …

104 c#  .net  encoding  utf-8  iso-8859-1 

Kategorilerimin Yunan harfleriyle adlandırılması gerekiyor. Ben kullanıyorum ggplot2ve verilerle çok güzel çalışıyor. Ne yazık ki bu Yunan sembollerini x eksenine (çentik işaretlerine) nasıl yerleştireceğimi ve aynı zamanda efsanede görünmelerini sağlayamıyorum. Bunu yapmanın bir yolu var mı? GÜNCELLEME: Bağlantıya bir göz attım , ancak yapmak istediğim şeyi başarmak için açıklanmış iyi …

102 r  graphics  unicode  utf-8  ggplot2 

Dün sorduğum bir soruya verilen yanıtlardan biri, veritabanımın UTF-8 karakterlerini doğru şekilde işleyebildiğinden emin olmam gerektiğini önerdi. Bunu MySQL ile nasıl yapabilirim?

102 mysql  utf-8 

PHP'de " \u00ed" - " í" gibi Unicode kaçış dizilerinin ve diğer tüm benzer oluşumların kodunu çözebilen bir işlev var mı ? Burada benzer bir soru buldum ama işe yaramadı.

100 php  unicode  utf-8  escaping  decoding 

UTF-8'in 8 bit olması, en fazla 256 farklı karakter olabileceği anlamına gelmez mi? İlk 128 kod noktası ASCII'deki ile aynıdır. Ancak UTF-8'in milyon karaktere kadar destekleyebileceğini söylüyor? Bu nasıl çalışıyor?

100 utf-8  character-encoding  ascii 

Şu anda nesneleri seri hale getirmenin kolay bir yolunu arıyorum (C # 3'te). Google'da bazı örnekler inceledim ve şöyle bir şey buldum: MemoryStream memoryStream = new MemoryStream ( ); XmlSerializer xs = new XmlSerializer ( typeof ( MyObject) ); XmlTextWriter xmlTextWriter = new XmlTextWriter ( memoryStream, Encoding.UTF8 ); xs.Serialize ( …

99 c#  sql-server  xml  utf-8  xml-serialization 

Bazı kodumun kötü verileri nasıl işlediğini test ediyorum ve geçersiz UTF-8 olan birkaç bayta ihtiyacım var. Bazılarını ve ideal olarak, neden kötü olduklarına / onları nereden aldığınıza dair bir açıklama gönderebilir misiniz?

99 unit-testing  utf-8 

text/plainİnternetteki bir dosyadan satır satır okumaya çalışıyorum . Şu anda sahip olduğum kod: URL url = new URL("http://kuehldesign.net/test.txt"); BufferedReader in = new BufferedReader(new InputStreamReader(url.openStream())); LinkedList<String> lines = new LinkedList(); String readLine; while ((readLine = in.readLine()) != null) { lines.add(readLine); } for (String line : lines) { out.println("> " + line); …

97 java  utf-8  inputstream 

Hata ayıklama amacıyla, UTF-8 bayt sıra işareti (BOM) ile başlayan tüm dosyalar için yinelemeli olarak bir dizinde arama yapmam gerekiyor. Mevcut çözümüm basit bir kabuk betiğidir: find -type f | while read file do if [ "`head -c 3 -- "$file"`" == $'\xef\xbb\xbf' ] then echo "found BOM in: $file" …

94 php  utf-8  shell  text-editor 

Python ile aksanlı karakterler içeren bir CSV dosyası okumaya çalışıyorum (sadece Fransızca ve / veya İspanyolca karakterler). Csvreader ( http://docs.python.org/library/csv.html ) için Python 2.5 belgelerine dayanarak , csvreader yalnızca ASCII'yi desteklediğinden, CSV dosyasını okumak için aşağıdaki kodu buldum. def unicode_csv_reader(unicode_csv_data, dialect=csv.excel, **kwargs): # csv.py doesn't do Unicode; encode temporarily as …

94 python  utf-8  csv  character-encoding