Całkowity rozmiar zawartości wszystkich plików w katalogu [zamknięty]

Kiedy używam lslub du, uzyskuję ilość miejsca na dysku zajmowaną przez każdy plik.

Potrzebuję sumy wszystkich danych w plikach i podkatalogach, które otrzymam, gdybym otworzył każdy plik i policzył bajty. Dodatkowe punkty, jeśli mogę to uzyskać bez otwierania każdego pliku i liczenia.

Jeśli chcesz mieć `` pozorny rozmiar '' (czyli liczbę bajtów w każdym pliku), a nie rozmiar zajmowany przez pliki na dysku, użyj opcji -blub --bytes(jeśli masz system Linux z jądrem GNU ):

% du -sbh <directory>

Zastosowanie du -sb:

du -sb DIR

Opcjonalnie dodaj hopcję bardziej przyjaznych dla użytkownika wyników:

du -sbh DIR

cd do katalogu, a następnie:

du -sh

ftw!

Pierwotnie pisałem o tym tutaj: https://ao.gl/get-the-total-size-of-all-the-files-in-a-directory/

Tylko alternatywa:

ls -lAR | grep -v '^d' | awk '{total += $5} END {print "Total:", total}'

grep -v '^d' wykluczy katalogi.

Format „% s” programu stat podaje rzeczywistą liczbę bajtów w pliku.

 find . -type f |
 xargs stat --format=%s |
 awk '{s+=$1} END {print s}'

Możesz zastąpić swoją ulubioną metodę sumowania liczb .

Jeśli używasz "du" busyboxa w systemie emebedded, nie możesz uzyskać dokładnych bajtów z du, tylko KB, które możesz uzyskać.

BusyBox v1.4.1 (2007-11-30 20:37:49 EST) multi-call binary

Usage: du [-aHLdclsxhmk] [FILE]...

Summarize disk space used for each FILE and/or directory.
Disk space is printed in units of 1024 bytes.

Options:
        -a      Show sizes of files in addition to directories
        -H      Follow symbolic links that are FILE command line args
        -L      Follow all symbolic links encountered
        -d N    Limit output to directories (and files with -a) of depth < N
        -c      Output a grand total
        -l      Count sizes many times if hard linked
        -s      Display only a total for each argument
        -x      Skip directories on different filesystems
        -h      Print sizes in human readable format (e.g., 1K 243M 2G )
        -m      Print sizes in megabytes
        -k      Print sizes in kilobytes(default)

Podczas tworzenia folderu wiele systemów plików Linuksa przydziela 4096 bajtów na przechowywanie niektórych metadanych dotyczących samego katalogu. Ta przestrzeń jest zwiększana o wielokrotność 4096 bajtów w miarę rozrastania się katalogu.

Komenda du (z opcją -b lub bez niej) liczy to miejsce , jak widać wpisując:

mkdir test && du -b test

otrzymasz wynik 4096 bajtów dla pustego katalogu. Tak więc, jeśli umieścisz 2 pliki po 10000 bajtów w katalogu, całkowita ilość podana przez du -sb wyniesie 24096 bajtów.

Jeśli uważnie przeczytasz pytanie, nie o to chodzi. Pytający zapytał:

suma wszystkich danych w plikach i podkatalogach, które dostałbym, gdybym otworzył każdy plik i policzył bajty

w powyższym przykładzie powinno to być 20000 bajtów, a nie 24096.

Tak więc poprawna odpowiedź IMHO może być połączeniem odpowiedzi Nelsona i sugestii hlovdal, aby obsłużyć nazwy plików zawierające spacje:

find . -type f -print0 | xargs -0 stat --format=%s | awk '{s+=$1} END {print s}'

Istnieją co najmniej trzy sposoby uzyskania „sumy wszystkich danych w plikach i podkatalogach” w bajtach, które działają zarówno w systemie Linux / Unix, jak i Git Bash dla Windows, wymienione poniżej w kolejności od najszybszego do średnio najwolniejszego. Dla Twojej informacji zostały wykonane w katalogu głównym dość głębokiego systemu plików ( docrootw instalacji Magento 2 Enterprise zawierającej 71 158 plików w 30 027 katalogach).

1.

$ time find -type f -printf '%s\n' | awk '{ total += $1 }; END { print total" bytes" }'
748660546 bytes

real    0m0.221s
user    0m0.068s
sys     0m0.160s

2.

$ time echo `find -type f -print0 | xargs -0 stat --format=%s | awk '{total+=$1} END {print total}'` bytes
748660546 bytes

real    0m0.256s
user    0m0.164s
sys     0m0.196s

3.

$ time echo `find -type f -exec du -bc {} + | grep -P "\ttotal$" | cut -f1 | awk '{ total += $1 }; END { print total }'` bytes
748660546 bytes

real    0m0.553s
user    0m0.308s
sys     0m0.416s

Te dwa również działają, ale opierają się na poleceniach, które nie istnieją w Git Bash dla Windows:

1.

$ time echo `find -type f -printf "%s + " | dc -e0 -f- -ep` bytes
748660546 bytes

real    0m0.233s
user    0m0.116s
sys     0m0.176s

2.

$ time echo `find -type f -printf '%s\n' | paste -sd+ | bc` bytes
748660546 bytes

real    0m0.242s
user    0m0.104s
sys     0m0.152s

Jeśli chcesz tylko sumę dla bieżącego katalogu, dodaj -maxdepth 1do find.

Zwróć uwagę, że niektóre z sugerowanych rozwiązań nie zwracają dokładnych wyników, więc zamiast tego trzymałbym się powyższych rozwiązań.

$ du -sbh
832M    .

$ ls -lR | grep -v '^d' | awk '{total += $5} END {print "Total:", total}'
Total: 583772525

$ find . -type f | xargs stat --format=%s | awk '{s+=$1} END {print s}'
xargs: unmatched single quote; by default quotes are special to xargs unless you use the -0 option
4390471

$ ls -l| grep -v '^d'| awk '{total = total + $5} END {print "Total" , total}'
Total 968133

W przypadku Win32 DOS możesz:

c:> dir / sc: \ katalog \ chcesz \

a przedostatnia linia powie, ile bajtów zajmują pliki.

Wiem, że to czyta wszystkie pliki i katalogi, ale w niektórych sytuacjach działa szybciej.

dujest przydatne, ale findjest przydatne w przypadku, gdy chcesz obliczyć rozmiar tylko niektórych plików (na przykład używając filtru według rozszerzenia). Zauważ również, że findsami mogą wydrukować rozmiar każdego pliku w bajtach. Aby obliczyć całkowity rozmiar, możemy połączyć dcpolecenie w następujący sposób:

find . -type f -printf "%s + " | dc -e0 -f- -ep

Tutaj findgeneruje sekwencję poleceń dla dcpolubienia 123 + 456 + 11 +. Chociaż ukończony program powinien wyglądać jak 0 123 + 456 + 11 + p(pamiętaj o notacji postfiksowej).

Tak więc, aby otrzymać ukończony program, musimy umieścić go 0na stosie przed wykonaniem sekwencji ze standardowego wejścia, a po wykonaniu wypisać najwyższy numer ( ppolecenie na końcu). Osiągamy to poprzez dcopcje:

1. -e0to tylko skrót do -e '0'tego, co stawia 0na stosie,
2. -f-służy do odczytu i wykonywania poleceń ze stdin (wygenerowanego findtutaj),
3. -epsłuży do wypisania wyniku ( -e 'p').

Aby wydrukować rozmiar w MiB, tak jak 284.06 MiBmożemy -e '2 k 1024 / 1024 / n [ MiB] p'zamiast tego użyć w punkcie 3 (większość spacji jest opcjonalna).

To może pomóc:

ls -l| grep -v '^d'| awk '{total = total + $5} END {print "Total" , total}'

Powyższe polecenie zsumuje wszystkie pliki opuszczające rozmiar katalogów.

Posługiwać się:

$ du -ckx <DIR> | grep total | awk '{print $1}'

Gdzie <DIR> to katalog, który chcesz sprawdzić.

Opcja „-c” daje sumaryczne dane, które są wyodrębniane przy użyciu części polecenia „grep total”, a liczba w kilobajtach jest wyodrębniana za pomocą polecenia awk.

Jedynym zastrzeżeniem jest to, że jeśli masz podkatalog zawierający tekst „total”, zostanie on również wypluty.