«xargs» etiketlenmiş sorular

xargsYaklaşık 30 milyon küçük dosyayı işlemek için bir python betiği çağırmak için kullanıyorum . xargsSüreci paralelleştirmek için kullanmayı umuyorum . Kullanıyorum komut: find ./data -name "*.json" -print0 | xargs -0 -I{} -P 40 python Convert.py {} > log.txt Temel olarak, Convert.pyküçük bir json dosyasında (4kb) okur, biraz işlem yapar ve …

9 xargs  parallelism 

Aşağıdaki komutu çalıştırdığımda: > mkdir some_dir > find /foo/bar/ -name '*.csv' -print0 | xargs -0 mv {} some_dir Yüzlerce satır alıyorum: mv: target `/foo/bar/XX.csv` is not a directory Neden? Ben xargs yürütmek düşündüm: mv /foo/barXX.csv some_dir findbulduğu her dosya için . Neler oluyor? Bu arada, bu zsh ile Güncelleme: Update1: …

9 find  xargs 

Diyelim ki içinde bir sürü dosya var /tmp/. Yaparım find . -type f | xargs -iFILES Ve md5sumher dosyada aynı ada sahip, ancak .md5uzantısı olan bir dosyaya çıktı almak istiyorum . find . -type f | xargs -iFILES md5sum FILES > FILES.md5 Bunun find komutuyla bulunan her dosya için bir …

9 find  io-redirection  xargs 

Bu bir akışı izlemem gereken bir durum gibi görünüyor (stdin), bir satır gelirse, bir dakika bekle, sonra emri başlat ve biraz daha bekle. Pyinotify veya fswatch gibi bir araç kullanarak, değişiklikler için bir klasörü izleyebiliriz ve biri bulunduğunda, onu dışkılayabilir. fswatch --recursive --latency 2 src/ | xargs make build veya …

3 xargs  inotify