Linux dizinindeki dosyaları yinelemeli olarak sayma

Linux dizinindeki dosyaları yinelemeli olarak nasıl sayabilirim?

Bunu buldum:

find DIR_NAME -type f ¦ wc -l

Ama bunu çalıştırdığımda aşağıdaki hatayı döndürür.

find: yollar ifadeden önce gelmelidir: ¦

Bu çalışmalı:

find DIR_NAME -type f | wc -l

Açıklama:

• -type f yalnızca dosyaları dahil etmek için.
• |( ve değil¦ ) findkomutun standart çıktısını wckomutun standart girdisine yönlendirir.
• wc(kelime sayımı kısaltması) girdisindeki satır, kelime ve baytları sayar ( dokümanlar ).
• -l sadece yeni satırları saymak için.

Notlar:

• Geçerli klasördeki komutu yürütmek için DIR_NAMEile değiştirin ..
• Ayrıca -type fsayıya dahil edilecek dizinleri (ve sembolik bağlantıları) kaldırabilirsiniz .
• Dosya adları yeni satır karakterleri içeriyorsa bu komutun üzerine çıkması mümkündür.

Örneğinizin neden çalışmadığının açıklaması:

Gösterdiğiniz komutta, |iki komutu bağlamak için "Boru" ( ) kullanmazsınız, ancak ¦kabuğun komut veya benzeri bir şey olarak tanımadığı kırık çubuk ( ) kullanılır. Bu yüzden bu hata mesajını alıyorsunuz.

Geçerli dizin için:

find -type f | wc -l

Geçerli dizinin altındaki her bir dizinde kaç dosya bulunduğunu görmek istiyorsanız:

for i in */ .*/ ; do 
    echo -n $i": " ; 
    (find "$i" -type f | wc -l) ; 
done

Tabii ki bu tek bir çizgide olabilir. Parantez, çıktının kimin wc -lizlemesi gerektiğini netleştirir ( find $i -type fbu durumda).

Kullanabilirsiniz

$ tree

ağaç paketini kurduktan sonra

$ sudo apt-get install tree

(Debian / Mint / Ubuntu Linux makinesinde).

Komut yalnızca dosya sayısını değil, aynı zamanda dizin sayısını da ayrı ayrı gösterir. -L seçeneği, maksimum görüntüleme düzeyini belirtmek için kullanılabilir (varsayılan olarak dizin ağacının maksimum derinliğidir).

Gizli dosyalar da -aseçenek sağlayarak dahil edilebilir .

Bilgisayarımda, kabul edilen cevaptan rsyncbiraz daha hızlı find | wc -l:

$ rsync --stats --dry-run -ax /path/to/dir /tmp

Number of files: 173076
Number of files transferred: 150481
Total file size: 8414946241 bytes
Total transferred file size: 8414932602 bytes

İkinci satır, yukarıdaki örnekte 150.481 dosya sayısına sahiptir. Bonus olarak toplam boyutu da alırsınız (bayt cinsinden).

Uyarılar:

• ilk satır, bir dizi dosya, dizin, sembol bağlantısı vb., bu yüzden ikinci satırdan daha büyüktür.
• --dry-run(ya da-n kısaca) seçeneğinin gerçekten dosya aktarımı değil önemlidir!
• -x"Dosya sistemi sınırlarını geçme" seçeneğini kullandım , yani onu yürütürseniz /ve harici sabit diskleriniz varsa, yalnızca kök bölümdeki dosyaları sayar.

UNIX'teki dosya adları yeni satırlar içerebileceğinden (evet, yeni satırlar) wc -lçok fazla dosya sayabilir. Her dosya için bir nokta yazdırır ve ardından noktaları sayarım:

find DIR_NAME -type f -printf "." | wc -c

Buradaki cevapların birçoğunu bir araya getirerek, en yararlı çözüm şöyle görünüyor:

find . -maxdepth 1 -type d -print0 |
xargs -0 -I {} sh -c 'echo -e $(find "{}" -printf "\n" | wc -l) "{}"' |
sort -n

Boşluk parantezi ve hatta yeni satırlar içeren dosya adları gibi garip şeyleri işleyebilir. Ayrıca çıktıyı dosya sayısına göre sıralar.

-maxdepthAlt dizinlerin de sayılmasını sağlamak için sonraki sayıyı artırabilirsiniz . Özellikle çok sayıda iç içe geçmiş dizin yapınız varsa, bunun uzun sürebileceğini unutmayın -maxdepth.

Mevcut çalışma dizininde kaç dosya ve alt dizin bulunduğunu bilmek istiyorsanız, bu tek astarı kullanabilirsiniz

find . -maxdepth 1 -type d -print0 | xargs -0 -I {} sh -c 'echo -e $(find {} | wc -l) {}' | sort -n

Bu GNU lezzetinde çalışır ve sadece -e'yi BSD linux (örn. OSX) için echo komutundan çıkarır.

Hata durumlarından kaçınmak istiyorsanız, izin vermeyin wc -l , yeni satır içeren dosyaları görmenize (2+ dosya olarak sayılır)

Örneğin, içinde tek bir EOL karakteri bulunan tek bir dosyamız olduğu bir durumu düşünün

> mkdir emptydir && cd emptydir
> touch $'file with EOL(\n) character in it'
> find -type f
./file with EOL(?) character in it
> find -type f | wc -l
2

En azından gnu wc, boş bir sonlandırılmış listeyi okuma / sayma seçeneğine sahip olmadığından (bir dosya hariç) görünmediğinden, en kolay çözüm sadece dosya adlarını iletmek değil, her dosya bulunduğunda statik bir çıktıdır, örn. yukarıdaki ile aynı dizinde

> find -type f -exec printf '\n' \; | wc -l
1

Veya eğer finddestekliyorsa

> find -type f -printf '\n' | wc -l
1 

Komutu kullanabilirsiniz ncdu. Bir Linux dizininin kaç dosya içerdiğini yinelemeli olarak sayacaktır. İşte çıktı örneği:

Çok sayıda dosyanız varsa kullanışlı olan bir ilerleme çubuğu vardır:

Ubuntu'ya kurmak için:

sudo apt-get install -y ncdu

Benchmark: Dosya sayısını saymak zorunda olduğunuz klasör olarak https://archive.org/details/cv_corpus_v1.tar (380390 dosya, 11 GB) kullandım.

• find . -type f | wc -l: tamamlamak için yaklaşık 1m20s
• ncdu: tamamlamak için yaklaşık 1m20s

tree $DIR_PATH | tail -1

Örnek Çıktı:

5309 dizinler, 2122 dosya

Geçerli dizinde kaç dosya olduğunu belirlemek için girin ls -1 | wc -l. Bu , çıktıdaki wcsatır sayısını saymak için kullanır . Nokta dosyaları sayılmaz. Lütfen bunu not al(-l)ls -1ls -l Aslında sana gerçek sayısından daha bir dosya sayısı bir fazla verecektir bu NASIL önceki sürümlerinde kullanılan ( "L" yerine önceki örneklerde olduğu gibi bir "1" olduğunu). Bu nokta için Kam Nejad'a teşekkürler.

Yalnızca dosyaları saymak ve sembolik bağlantılar İÇERMEMEK istiyorsanız (yalnızca başka ne yapabileceğinize bir örnek), kullanabilirsiniz ls -l | grep -v ^l | wc -l(bu sefer "1" değil "L", burada "uzun" bir liste istiyoruz) . grep"l" ile başlayan (bağlantıyı gösteren) herhangi bir satırı kontrol eder ve o satırı (-v) atar.

Göreceli hız: "ls -1 / usr / bin / | wc -l" yüksüz 486SX25'te yaklaşık 1.03 saniye sürer (bu makinede / usr / bin / 355 dosyaya sahiptir). " ls -l /usr/bin/ | grep -v ^l | wc -l" yaklaşık 1,19 saniye sürer.

Kaynak: http://www.tldp.org/HOWTO/Bash-Prompt-HOWTO/x700.html

İhtiyacınız olan şey belirli bir dosya türünü tekrar tekrar saymaksa , şunları yapabilirsiniz:

find YOUR_PATH -name '*.html' -type f | wc -l 

-l yalnızca çıktıdaki satır sayısını görüntülemektir.

Bash ile:

() İle bir dizi giriş oluşturun ve # ile sayıyı alın.

FILES=(./*); echo ${#FILES[@]}

Tamam bu özyinelemeli dosyaları saymaz ama önce basit seçeneği göstermek istedim. Yaygın bir kullanım durumu, bir dosyanın rollover yedeklemelerini oluşturmak olabilir. Bu logfile.1, logfile.2, logfile.3 vb.

CNT=(./logfile*); mv logfile logfile.${#CNT[@]}

Bash 4+ globstaretkinken yinelenen sayım (@tripleee tarafından belirtildiği gibi)

FILES=(**/*); echo ${#FILES[@]}

Dosya sayısını yinelemeli olarak elde etmek için bulmayı aynı şekilde kullanabiliriz.

FILES=(`find . -type f`); echo ${#FILES[@]}

Adında boşluk bulunan dizinler için ... (yukarıdaki çeşitli yanıtlara dayanarak) - dizin adını, içindeki dosya sayısı ile tekrar tekrar yazdırın:

find . -mindepth 1 -type d -print0 | while IFS= read -r -d '' i ; do echo -n $i": " ; ls -p "$i" | grep -v / | wc -l ; done

Örnek (okunabilirlik için biçimlendirilmiş):

pwd
  /mnt/Vancouver/Programming/scripts/claws/corpus

ls -l
  total 8
  drwxr-xr-x 2 victoria victoria 4096 Mar 28 15:02 'Catabolism - Autophagy; Phagosomes; Mitophagy'
  drwxr-xr-x 3 victoria victoria 4096 Mar 29 16:04 'Catabolism - Lysosomes'

ls 'Catabolism - Autophagy; Phagosomes; Mitophagy'/ | wc -l
  138

## 2 dir (one with 28 files; other with 1 file):
ls 'Catabolism - Lysosomes'/ | wc -l
  29

Dizin yapısı aşağıdakiler kullanılarak daha iyi görselleştirilir tree:

tree -L 3 -F .
  .
  ├── Catabolism - Autophagy; Phagosomes; Mitophagy/
  │   ├── 1
  │   ├── 10
  │   ├── [ ... SNIP! (138 files, total) ... ]
  │   ├── 98
  │   └── 99
  └── Catabolism - Lysosomes/
      ├── 1
      ├── 10
      ├── [ ... SNIP! (28 files, total) ... ]
      ├── 8
      ├── 9
      └── aaa/
          └── bbb

  3 directories, 167 files

man find | grep mindep
  -mindepth levels
    Do not apply any tests or actions at levels less than levels
    (a non-negative integer).  -mindepth 1 means process all files
    except the starting-points.

ls -p | grep -v /(aşağıda kullanılır) /unix/48492/list-only-regular-files-but-not-directories-in-current-directory adresindeki yanıt 2'den alınmıştır.

find . -mindepth 1 -type d -print0 | while IFS= read -r -d '' i ; do echo -n $i": " ; ls -p "$i" | grep -v / | wc -l ; done
./Catabolism - Autophagy; Phagosomes; Mitophagy: 138
./Catabolism - Lysosomes: 28
./Catabolism - Lysosomes/aaa: 1

Applcation: Birkaç yüz dizin arasında maksimum dosya sayısını bulmak istiyorum (tüm derinlik = 1) [aşağıda tekrar çıktı için biçimlendirilmiş çıktı]:

date; pwd
    Fri Mar 29 20:08:08 PDT 2019
    /home/victoria/Mail/2_RESEARCH - NEWS

time find . -mindepth 1 -type d -print0 | while IFS= read -r -d '' i ; do echo -n $i": " ; ls -p "$i" | grep -v / | wc -l ; done > ../../aaa
    0:00.03

[victoria@victoria 2_RESEARCH - NEWS]$ head -n5 ../../aaa
    ./RNA - Exosomes: 26
    ./Cellular Signaling - Receptors: 213
    ./Catabolism - Autophagy; Phagosomes; Mitophagy: 138
    ./Stress - Physiological, Cellular - General: 261
    ./Ancient DNA; Ancient Protein: 34

[victoria@victoria 2_RESEARCH - NEWS]$ sed -r 's/(^.*): ([0-9]{1,8}$)/\2: \1/g' ../../aaa | sort -V | (head; echo ''; tail)

    0: ./Genomics - Gene Drive
    1: ./Causality; Causal Relationships
    1: ./Cloning
    1: ./GenMAPP 2
    1: ./Pathway Interaction Database
    1: ./Wasps
    2: ./Cellular Signaling - Ras-MAPK Pathway
    2: ./Cell Death - Ferroptosis
    2: ./Diet - Apples
    2: ./Environment - Waste Management

    988: ./Genomics - PPM (Personalized & Precision Medicine)
    1113: ./Microbes - Pathogens, Parasites
    1418: ./Health - Female
    1420: ./Immunity, Inflammation - General
    1522: ./Science, Research - Miscellaneous
    1797: ./Genomics
    1910: ./Neuroscience, Neurobiology
    2740: ./Genomics - Functional
    3943: ./Cancer
    4375: ./Health - Disease 

sort -Vdoğal bir çeşittir. ... Yani, (Claws Mail) dizinlerinden herhangi birindeki maksimum dosya sayısı 4375 dosya. Bu dosya adlarını bıraktığımda ( https://stackoverflow.com/a/55409116/1904943 ) bu dosya adları - hepsi sayısal olarak adlandırılır, her dizinde 1 ile başlayarak - ve toplam 5 basamağa kadar doldurulur, tamam olmalıyım .

ek

Bir dizindeki toplam dosya sayısını, alt dizinleri bulun.

$ date; pwd
Tue 14 May 2019 04:08:31 PM PDT
/home/victoria/Mail/2_RESEARCH - NEWS

$ ls | head; echo; ls | tail
Acoustics
Ageing
Ageing - Calorie (Dietary) Restriction
Ageing - Senescence
Agriculture, Aquaculture, Fisheries
Ancient DNA; Ancient Protein
Anthropology, Archaeology
Ants
Archaeology
ARO-Relevant Literature, News

Transcriptome - CAGE
Transcriptome - FISSEQ
Transcriptome - RNA-seq
Translational Science, Medicine
Transposons
USACEHR-Relevant Literature
Vaccines
Vision, Eyes, Sight
Wasps
Women in Science, Medicine

$ find . -type f | wc -l
70214    ## files

$ find . -type d | wc -l
417      ## subdirectories

Ben yazdım ffcntBelirli durumlarda özyinelemeli dosya sayımını hızlandırmak için : döndürme diskleri ve kapsam eşlemesini destekleyen dosya sistemleri.

Bu, daha büyük lsya da findtemelli yaklaşımların büyüklüğünün bir sırası olabilir , ancak YMMV.

Burada birçok doğru cevap var. İşte başka bir tane!

find . -type f | sort | uniq -w 10 -c

nereye .bakılacağı klasör 10ve dizinin gruplandırılacağı karakter sayısıdır.

find -type f | wc -l

VEYA (Dizin geçerli dizinse)

bulmak. tipi f | wc -l

Bu tamamen iyi çalışacaktır. Basit kısa. Bir klasörde bulunan dosya sayısını saymak istiyorsanız.

ls | wc -l

Biçim filtrelemeli bu alternatif yaklaşım, mevcut tüm grup çekirdek modüllerini sayar:

ls -l /boot/grub/*.mod | wc -l

ls -l | grep -e -x -e -dr | wc -l 

1. uzun liste
2. dosyaları ve dizinleri filtrele
3. filtrelenmiş satırı say