MySQL'de ASCII olmayan karakterleri nasıl bulabilirim?

Excel'den içe aktarılan bazı verilerin bulunduğu bir MySQL veritabanıyla çalışıyorum . Veriler, ASCII olmayan karakterler (uzun çizgiler, vb.) İle gizli satır başları veya satır beslemeleri içerir. MySQL kullanarak bu kayıtları bulmanın bir yolu var mı?

Bu tam olarak neyi "ASCII" olarak tanımladığınıza bağlıdır, ancak bunun gibi bir sorgunun varyantını denemenizi öneririm:

SELECT * FROM tableName WHERE columnToCheck NOT REGEXP '[A-Za-z0-9]';

Bu sorgu, columnToCheck'in alfanümerik olmayan karakterleri içerdiği tüm satırları döndürür. Kabul edilebilir başka karakterleriniz varsa, bunları normal ifadedeki karakter sınıfına ekleyin. Örneğin, nokta, virgül ve kısa çizgi uygunsa, sorguyu şu şekilde değiştirin:

SELECT * FROM tableName WHERE columnToCheck NOT REGEXP '[A-Za-z0-9.,-]';

MySQL belgelerinin en alakalı sayfası muhtemelen 12.5.2 Normal İfadeler'dir .

MySQL, bu tür sorunlara yardımcı olabilecek kapsamlı karakter seti yönetimi sağlar.

SELECT whatever
  FROM tableName 
 WHERE columnToCheck <> CONVERT(columnToCheck USING ASCII)

CONVERT(col USING charset)Fonksiyon değiştirme karakterleri içine unconvertable karakterleri döner. Ardından, dönüştürülen ve dönüştürülmeyen metin eşit olmayacaktır.

Daha fazla tartışma için buna bakın. https://dev.mysql.com/doc/refman/8.0/en/charset-repertoire.html

ASCII yerine istediğiniz herhangi bir karakter seti adını kullanabilirsiniz. Örneğin, 1257 kod sayfasında (Litvanyaca, Letonca, Estonca) hangi karakterlerin doğru şekilde işlenmediğini öğrenmek istiyorsanız şunu kullanın:CONVERT(columnToCheck USING cp1257)

ASCII'yi ondalık değeri 0 - 127 (0x00 - 0x7F) olan tüm karakterler olarak tanımlayabilir ve aşağıdaki sorguyu kullanarak ASCII olmayan karakterler içeren sütunları bulabilirsiniz.

SELECT * FROM TABLE WHERE NOT HEX(COLUMN) REGEXP '^([0-7][0-9A-F])*$';

Bu bulabildiğim en kapsamlı sorguydu.

Muhtemelen aradığınız şey bu:

select * from TABLE where COLUMN regexp '[^ -~]';

SÜTUN'un ASCII olmayan karakterler (veya yeni satır gibi yazdırılamayan ASCII karakterleri) içerdiği tüm satırları döndürmelidir.

Yukarıdaki herkesin örneklerinde eksik olan bir karakter, sonlandırma karakteridir (\ 0). Bu, MySQL konsol çıktısı için görünmezdir ve daha önce bahsedilen sorguların hiçbiri tarafından keşfedilemez. Bulma sorgusu basitçe:

select * from TABLE where COLUMN like '%\0%';

Doğru cevaba dayanarak, ancak ASCII kontrol karakterlerini de hesaba katarak benim için işe yarayan çözüm şudur:

SELECT * FROM `table` WHERE NOT `field` REGEXP  "[\\x00-\\xFF]|^$";

Aynı şeyi yapar: bir sütunda ASCII aralığı ihlallerini arar, ancak kod noktaları için onaltılı gösterim kullandığından kontrol karakterlerini de aramanıza izin verir. Karşılaştırma veya dönüştürme olmadığından (@ Ollie'nin cevabının aksine), bu da önemli ölçüde daha hızlı olmalıdır. (Özellikle MySQL regex sorgusunda erken sonlandırma yapıyorsa, ki kesinlikle yapması gerekir.)

Ayrıca sıfır uzunluklu alanların döndürülmesini de önler. Daha iyi performans gösterebilecek biraz daha uzun bir sürüm istiyorsanız, bunun yerine şunu kullanabilirsiniz:

SELECT * FROM `table` WHERE `field` <> "" AND NOT `field` REGEXP  "[\\x00-\\xFF]";

Sıfır uzunluklu sonuçlardan kaçınmak için, bunları normal ifade geçişi için dikkate almadan ayrı bir uzunluk kontrolü yapar. Sahip olduğunuz sıfır uzunluklu girişlerin sayısına bağlı olarak, bu önemli ölçüde daha hızlı olabilir.

0x00-0xFF değerlerinin ASCII ile aynı değerlerle eşleşmediği varsayılan karakter kümeniz tuhaf bir şeyse (herhangi bir yerde böyle bir karakter kümesi var mı?), Bu yanlış bir pozitif döndürecektir. Aksi takdirde, keyfini çıkarın!

Özel karakter kayıtlarını aramak için bu sorguyu kullanmayı deneyin

SELECT *
FROM tableName
WHERE fieldName REGEXP '[^a-zA-Z0-9@:. \'\-`,\&]'

@ zende'nin yanıtı, sütunları ascii ve ascii olmayan karakterlerin karışımıyla kaplayan tek cevaptı, ama aynı zamanda sorunlu hex şeyine de sahipti. Bunu kullandım:

SELECT * FROM `table` WHERE NOT `column` REGEXP '^[ -~]+$' AND `column` !=''

Oracle'da aşağıda kullanabiliriz.

SELECT * FROM TABLE_A WHERE ASCIISTR(COLUMN_A) <> COLUMN_A;

bu soru için şu yöntemi de kullanabiliriz:

Sql hayvanat bahçesinden soru:
PETER GRÜNBERG tarafından kazanılan ödülün tüm ayrıntılarını bulun

ASCII olmayan karakterler

ans: nobel'den * seçin; kazanan 'P% GR% _% berg' gibi;