Ben merak ediyordum nasıl bunlardan bazıları (bazı alternatifler +) hız-bilge oldukça büyük bir dosya ile çalışma ( 163MiB
bir IP
satıra ~ 13 milyon satır):
wc -l < iplist
13144256
Sonuçlar ( sync; echo 3 > /proc/sys/vm/drop_caches
her komuttan sonra; testleri - ters sırada - birkaç saat sonra tekrarladım, ancak farklar ihmal edilebilir; ayrıca kullandığımı da unutmayın gnu sed
):
steeldriver :
Çok yavaş. İki dakika bekledikten sonra iptal edildi ... bu yüzden sonuç yok.
cuonglm :
awk 'FNR!=1{print l}{l=$0};END{ORS="";print l}' ORS=' | ' iplist
real 0m3.672s
perl -pe 's/\n/ | / unless eof' iplist
real 0m12.444s
mikeserv :
paste -d\ /dev/null iplist /dev/null | paste -sd\| -
real 0m0.983s
jthill :
sed 'H;1h;$!d;x;s/\n/ | /g' iplist
real 0m4.903s
Avinash Raj :
time python2.7 -c'
import sys
with open(sys.argv[1]) as f:
print " | ".join(line.strip() for line in f)' iplist
real 0m3.434s
ve
val0x00ff :
while read -r ip; do printf '%s | ' "$ip"; done < iplist
real 3m4.321s
anlamına gelir 184.321s
. Şaşırtıcı olmayan bir şekilde, bu mikeserv'in çözümünden 200 kat daha yavaş .
İşte
awk ile başka yollar :
awk '$1=$1' RS= OFS=' | ' iplist
real 0m4.543s
awk '{printf "%s%s",sep,$0,sep=" | "} END {print ""}' iplist
real 0m5.511s
perl:
perl -ple '$\=eof()?"\n":" | "' iplist
real 0m9.646s
xargs:
xargs <iplist printf ' | %s' | cut -c4-
real 0m6.326s
kafa + macun + tr + cat kombinasyonu:
{ head -n -1 | paste -d' |' - /dev/null /dev/null | tr \\n \ ; cat ; } <iplist
real 0m0.991s
GNU coreutils
IP adresiniz varsa ve IP listeniz gerçekten büyük değilse (diyelim ki 50000 IP'ye kadar) bunu da yapabilirsiniz pr
:
pr -$(wc -l infile) -tJS' | ' -W1000000 infile >outfile
nerede
-$(wc -l infile) # no. of columns (= with no. of lines in your file)
-t # omit page headers and trailers
-J # merge lines
-S' | ' # separate columns by STRING
-W1000000 # set page width
6 satırlık bir dosya için:
134.28.128.0
111.245.28.0
109.245.24.0
128.27.88.0
122.245.48.0
103.44.204.0
komuta:
pr -$(wc -l <infile) -tJS' | ' -W1000 infile
çıktılar:
134.28.128.0 | 111.245.28.0 | 109.245.24.0 | 128.27.88.0 | 122.245.48.0 | 103.44.204.0
tr
Yeni satırları|
borulara eklemek mi istiyorsunuz ? Gibi<ipfile tr \\n \| >outfile
mi?