Bir dosyanın üzerinde değişiklik yapmadan CRLF veya LF kullanıp kullanmadığı nasıl test edilir?

Bazı metin dosyalarının Linux modunda tutulmasını sağlayan bir komutu düzenli aralıklarla çalıştırmam gerekiyor . Ne yazık ki, dos2unixher zaman dosya ve klasörün zaman damgalarını bozan ve gereksiz yazmalara neden olan dosyayı değiştirir.

Yazdığım senaryo Bash'de, bu yüzden Bash'e dayalı cevapları tercih ediyorum.

dos2unixFiltre olarak kullanabilir ve çıktısını orijinal dosyayla karşılaştırabilirsiniz:

dos2unix < myfile.txt | cmp -s - myfile.txt

Amaç sadece zaman damgasını etkilemekten kaçınmaksa, zaman damgasını aynı tutacak dos2unixbir -kveya --keepdateseçeneğine sahiptir. Geçici dosyayı oluşturmak ve yeniden adlandırmak için yine de bir yazı yazması gerekecek, ancak zaman damgalarınız bundan etkilenmeyecek.

Dosyanın herhangi bir şekilde değiştirilmesi kabul edilemez ise, bu cevabı aşağıdaki çözümü kullanabilirsiniz .

find . -not -type d -exec file "{}" ";" | grep CRLF

Sen deneyebilirsiniz grepCRLF kodu, sekizli için:

grep -U $'\015' myfile.txt

veya altıgen:

grep -U $'\x0D' myfile.txt

Versiyon yana 7.1dos2unix bir vardır -i, --infoseçenek satır sonları hakkında bilgi almak için. Hangi dosyaların dönüştürülmesi gerektiğini test etmek için dos2unix'i kullanabilirsiniz.

Örnek:

dos2unix -ic *.txt | xargs dos2unix

İlk yöntem ( grep):

Satır başı içeren satırları say:

[[ $(grep -c $'\r' myfile.txt) -gt 0 ]] && echo dos

Satır başı biten satırları say :

[[ $(grep -c $'\r$' myfile.txt) -gt 0 ]] && echo dos

Bunlar tipik olarak eşdeğer olacaktır; Bir çizginin içinde (yani sonunda değil) bir taşıt dönüşü nadirdir.

Daha verimli:

grep -q $'\r' myfile.txt && echo dos

Bu daha verimli

1. çünkü sayımı bir ASCII dizgisine dönüştürmeye ve daha sonra bu dizgiyi bir tamsayıya dönüştürmeye ve sıfıra dönüştürmeye gerek duymadığından ve
2. çünkü grep -c, tüm dosyanın okunması gerekiyor, desenin tüm oluşumlarını saymak için, desenin grep -qilk oluşumunu görünce çıkabilirsiniz.

Notlar:

• Yukarıdakiler boyunca, -Useçeneği eklemeniz gerekebilir (örneğin, -cUveya kullanın -qU), çünkü GNU grep, dosyanın bir metin dosyası olup olmadığını tahmin eder. Dosyanın metin olduğunu düşünüyorsa, $normal ifadelerin "doğru" çalışmasını sağlamak için satırların sonundaki satırbaşlarını dikkate almaz - normal ifade olsa bile \r$! Belirtme -U(veya --binary), bu tahmin çalışmasını geçersiz kılar; bu grep, dosyalara ikili olarak davranma ve verileri CR uçları bozulmadan, eşleşme mekanizmasına aktarmalarına neden olur.
• Yapmayın grep … $'\r\n' myfile.txt, çünkü bir desen sınırlayıcı olarak grepdavranır \n. Tıpkı grep -E 'foo|'satırlar fooveya boş bir dize arar, satırlar veya boş bir dize grep $'\r\n'arar \rve her satır bir boş dize ile eşleşir.

İkinci yöntem ( file):

[[ $(file myfile.txt) =~ CRLF ]] && echo dos

çünkü fileşöyle bir şey rapor ediyor:

myfile.txt: UTF-8 Unicode text, with CRLF line terminators

Daha güvenli değişken:

[[ $(file -b - < myfile.txt) =~ CRLF ]] && echo dos

nerede

• file -bdosya adını değil, yalnızca dosya türünü verir. Bu olmadan, bir dosya kimin adı karakterleri dahilCRLF yanlış Pozitif tetikleyecektir.
• file - < filenamefilenameile başlasa bile çalışır -.  ^{Bash komut dosyasına bakın : bir dosyanın metin dosyası olup olmadığını kontrol edin .}

Çıktısını kontrol etmenin file ingilizce olmayan bir yerel ayarda çalışmayabileceğini unutmayın.

kullanım cat -A

$ cat file
hello
hello

Şimdi, eğer bu dosya * NIX sistemlerinde yapılmış olsaydı,

$ cat -A file
hello$
hello$

Ancak bu dosya Windows'ta yapılmışsa,

$ cat -A file
hello^M$
hello

^Mtemsil eder CRve $temsil eder LF. Windows'un son satırı kaydetmediğine dikkat edin.CRLF

Bu, dosya içeriğini de değiştirmez.

sizin için bir bash işlevi:

# return 0 (true) if first line ends in CR
isDosFile() {
    [[ $(head -1 "$1") == *$'\r' ]]  
}

Sonra gibi şeyler yapabilirsiniz

streamFile () {
    if isDosFile /tmp/foo.txt; then
        sed 's/\r$//' "$1"
    else
        cat "$1"
    fi
}

streamFile /tmp/foo.txt | process_lines_without_CR

Bir dosyada DOS / Windows tarzı CR-LF satır sonları varsa, o zaman Unix tabanlı bir araç kullanarak bakarsanız, her satırın sonunda CR ('\ r') karakterleri görürsünüz.

Bu komut:

grep -l '^M$' filename

yazdırılacaktır filenamedosyası Windows tarzı satır sonları ile bir veya birden fazla satır içeriyorsa ve bunları yapmazsa hiçbir şey yazdırılır. Bunun dışında ^M, genellikle yazarak terminali girilen bir hazır taşıyıcı dönüş karakteri olmak zorunda Ctrl+ Vardından Enter (veya Ctrl+ Vve sonra Ctrl+ M). Bash kabuğu, değişmez bir satır başı $'\r'( burada belgelenen ) gibi yazmanızı sağlar , böylece:

grep -l $'\r$' filename

Diğer kabuklar da benzer bir özellik sağlayabilir.

Bunun yerine başka bir araç kullanabilirsiniz:

awk '/\r$/ { exit(1) }' filename

Bu durumuyla çıkılacak 1(ayar $?için 1dosya herhangi bir Windows tarzı satır sonları içeriyorsa) ve durumuyla 0bir kabuk içinde yararlı hale yapmazsa ifaçıklamada (eksikliğini not [parantez ]):

if awk '/\r$/ { exit(1) }' filename ; then
    echo filename has Unix-style line endings
else
    echo filename has at least one Windows-style line ending
fi

Bir dosya, Unix ve Windows tarzı çizgi sonlarının bir karışımını içerebilir. Sana sahip dosyaları algılamak istiyorum burada tahmin ediyorum herhangi Windows stili satır sonları.

Kullanım file:

$ file README.md
README.md: ASCII text, with CRLF line terminators

$ dos2unix README.md
dos2unix: converting file README.md to Unix format...

$ file README.md
README.md: ASCII text

Kullanıyorum

cat -v filename.txt | diff - filename.txt

bu iş gibi görünüyor. Çıktıyı okumaktan biraz daha kolay buluyorum

dos2unix < filename.txt | diff - filename.txt

dos2unixBazı nedenlerden dolayı kuramazsanız da kullanışlıdır .