Bir metin dosyasından, belirli bir dize içeren tüm satırları nasıl silebilirim?

Sed dosyasını belirli bir dize içeren bir metin dosyasındaki tüm satırları silmek için nasıl kullanabilirim?

Çizgiyi kaldırmak ve çıktıyı standart çıkışa yazdırmak için:

sed '/pattern to match/d' ./infile

Dosyayı doğrudan değiştirmek için - BSD sed ile çalışmaz:

sed -i '/pattern to match/d' ./infile

Aynı, ancak BSD sed (Mac OS X ve FreeBSD) için - GNU sed ile çalışmaz:

sed -i '' '/pattern to match/d' ./infile

Doğrudan dosyayı değiştirmek (ve bir yedek oluşturmak) - BSD ve GNU sed ile çalışır:

sed -i.bak '/pattern to match/d' ./infile

Ayrıca, belirli bir dizeye sahip satırları silmenin birçok yolu vardır sed:

AWK

awk '!/pattern/' file > temp && mv temp file

Yakut (1.9+)

ruby -i.bak -ne 'print if not /test/' file

Perl

perl -ni.bak -e "print unless /pattern/" file

Kabuk (bash 3.2 ve üstü)

while read -r line
do
  [[ ! $line =~ pattern ]] && echo "$line"
done <file > o
mv o file

GNU grep

grep -v "pattern" file > temp && mv temp file

Ve elbette sed(tersi yazdırma gerçek silme işleminden daha hızlıdır):

sed -n '/pattern/!p' file

Bir dosyada yer alan satırları değiştirmek için sed komutunu kullanabilirsiniz. Bununla birlikte, tersine grep'i ikinci bir dosyaya kullanmaktan ve daha sonra ikinci dosyayı orijinalin üzerine taşımaktan çok daha yavaş görünüyor.

Örneğin

sed -i '/pattern/d' filename      

veya

grep -v "pattern" filename > filename2; mv filename2 filename

İlk komut yine de makinemde 3 kat daha uzun sürüyor.

GNU ile bunu yapmanın kolay yolu sed:

sed --in-place '/some string here/d' yourfile

Kullanmayı düşünebilirsiniz ex(standart Unix komut tabanlı bir düzenleyicidir):

ex +g/match/d -cwq file

nerede:

• +Ex komutunu ( man ex) -cçalıştırır wq( çalıştır ve çık)
• g/match/d- Ex komutu verilen satırları silmek için matchbkz .

Yukarıdaki örnek, Unix.SE ve POSIX spesifikasyonlarındaex bu gönderiye göre bir dosyayı yerinde düzenlemek için POSIX uyumlu bir yöntemdir .

Aradaki fark sedşudur:

sedBir olan S Team, ED in- değil, bir dosya editörü. ^BashFAQ

Kaydedilemeyen kod, G / Ç ek yükü ve diğer bazı kötü yan etkilerin tadını çıkarmazsanız. Temel olarak bazı parametreler (yerinde / gibi -i) standart olmayan FreeBSD uzantılarıdır ve diğer işletim sistemlerinde mevcut olmayabilir.

Mac'te bununla mücadele ediyordum. Ayrıca, değişken değiştirme kullanarak yapmam gerekiyordu.

Ben de kullandım:

sed -i '' "/$pattern/d" $file

burada $filesilme işleminin gerekli olduğu dosya ve silme işlemi $patterniçin eşleştirilecek modeldir.

Ben ''bu yorumdan aldı .

Burada dikkat edilmesi gereken şey kullanılmasıdır çift tırnak içinde "/$pattern/d". Tek tırnak kullandığımızda değişken çalışmaz.

Yaklaşık 345 000 satır içeren bir dosya ile küçük bir karşılaştırma yaptım. İle yolu grepyaklaşık 15 kat daha hızlı daha gibi görünüyor sedbu durumda yöntemin.

Hem ve ayar LC_ALL = C olmadan denedim, önemli ölçüde zamanlamaları değiştirmek görünmüyor. Arama dizesi (CDGA_00004.pdbqt.gz.tar), dosyanın ortasında bir yerdedir.

İşte komutlar ve zamanlamalar:

time sed -i "/CDGA_00004.pdbqt.gz.tar/d" /tmp/input.txt

real    0m0.711s
user    0m0.179s
sys     0m0.530s

time perl -ni -e 'print unless /CDGA_00004.pdbqt.gz.tar/' /tmp/input.txt

real    0m0.105s
user    0m0.088s
sys     0m0.016s

time (grep -v CDGA_00004.pdbqt.gz.tar /tmp/input.txt > /tmp/input.tmp; mv /tmp/input.tmp /tmp/input.txt )

real    0m0.046s
user    0m0.014s
sys     0m0.019s

Bunu da kullanabilirsiniz:

 grep -v 'pattern' filename

Burada -vsadece deseninizden başka bir şey yazdıracak (tersine eşleşme anlamına gelir).

grepSizinle benzer bir sonuç almak için bunu yapabilirsiniz:

echo "$(grep -v "pattern" filename)" >filename

SED:

• '/James\|John/d'
• -n '/James\|John/!p'

AWK:

• '!/James|John/'
• /James|John/ {next;} {print}

GREP:

• -v 'James\|John'

perl -i    -nle'/regexp/||print' file1 file2 file3
perl -i.bk -nle'/regexp/||print' file1 file2 file3

İlk komut dosya (ları) yerinde (-i) düzenler.

İkinci komut aynı şeyi yapar, ancak dosya adlarına .bk ekleyerek orijinal dosyaların bir kopyasını veya yedeklemesini saklar (.bk herhangi bir şeyle değiştirilebilir).

echo -e "/thing_to_delete\ndd\033:x\n" | vim file_to_edit.txt

Birisinin dizelerin tam eşleşmeleri için bunu yapmak istemesi durumunda, -wbayrağı bütün olarak grep - w'de kullanabilirsiniz . Örneğin, 11 numaralı satırları silmek, ancak 111 numaralı satırları tutmak istiyorsanız:

-bash-4.1$ head file
1
11
111

-bash-4.1$ grep -v "11" file
1

-bash-4.1$ grep -w -v "11" file
1
111

Aynı -fanda birkaç kesin deseni hariç tutmak istiyorsanız bayrakla da çalışır . "Kara liste", her satırda "dosya" dan silmek istediğiniz çeşitli desenlere sahip bir dosyaysa:

grep -w -v -f blacklist file

cat filename | grep -v "pattern" > filename.1
mv filename.1 filename

işlenen metni konsolda göstermek için

cat filename | sed '/text to remove/d' 

işlenen metni bir dosyaya kaydetmek için

cat filename | sed '/text to remove/d' > newfile

işlenen metin bilgilerini mevcut bir dosyaya eklemek için

cat filename | sed '/text to remove/d' >> newfile

önceden işlenmiş metni işlemek için, bu durumda, kaldırılanların daha fazla satırını kaldırın

cat filename | sed '/text to remove/d' | sed '/remove this too/d' | more

| moreher seferinde bir sayfanın parçalar metni gösterecektir.

Eski iyi kullanabilirsiniz edbenzer bir şekilde düzenlemek için bir dosya cevap kullanımları olduğunu ex. Bu durumda en büyük fark ed, komutlarını exkutu gibi komut satırı argümanları olarak değil, standart girdi yoluyla almasıdır . Bir komut dosyasında kullanırken, bunu kabul etmenin genel yolu printfkomutları borulamak için kullanmaktır :

printf "%s\n" "g/pattern/d" w | ed -s filename

veya bir yorumlu metinle:

ed -s filename <<EOF
g/pattern/d
w
EOF