Найти общий размер определенных файлов в ветви каталога

Предположим, есть каталог хранения изображений, скажем, ./photos/john_doeв котором есть несколько подкаталогов, в которых находится много определенных файлов (скажем, *.jpg). Как я могу рассчитать суммарный размер этих файлов под john_doeветкой?

Я пытался du -hs ./photos/john_doe/*/*.jpg, но это показывает только отдельные файлы. Кроме того, это отслеживает только первый уровень вложенности john_doeкаталога, вроде бы john_doe/june/, но пропускает john_doe/june/outrageous/.

Итак, как я могу пройти всю ветку, суммируя размер определенных файлов?

find ./photos/john_doe -type f -name '*.jpg' -exec du -ch {} + | grep total$

Если требуется более одного вызова из- duза того, что список файлов очень длинный, будет сообщено о нескольких итогах и их необходимо суммировать.

du -ch public_html/images/*.jpg | grep total
20M total

дает мне общее использование моих .jpgфайлов в этом каталоге.

Чтобы иметь дело с несколькими каталогами, вам, вероятно, придется как-то комбинировать это find.

Вы можете найти примеры команд du полезными (они также включают в себя find)

Прежде всего, вам нужно две вещи:

• -cвозможность du, чтобы сказать ему , чтобы произвести итог;
• либо **( инструкции по активации ), либо find( пример ), либо для обхода подкаталогов.

du -ch -- **/*.jpg | tail -n 1

Окончательный ответ:

{ find <DIR> -type f -name "*.<EXT>" -printf "%s+"; echo 0; } | bc

и даже более быстрая версия, не ограниченная оперативной памятью, но требующая GNU AWK с поддержкой bignum:

find <DIR> -type f -name "*.<EXT>" -printf "%s\n" | gawk -M '{t+=$1}END{print t}'

Эта версия имеет следующие особенности:

• все возможности findдля указания файлов, которые вы ищете
• поддерживает миллионы файлов
  • другие ответы здесь ограничены максимальной длиной списка аргументов
• порождает только 3 простых процесса с минимальной пропускной способностью
  • многие ответы здесь порождают процессы C + N, где C - некоторая константа, а N - количество файлов.
• не беспокоит манипуляциями со строками
  • эта версия не выполняет никаких операций поиска или регулярных выражений
  • ну, findделает простой подстановочный знак соответствия имен файлов
• необязательно форматирует сумму в удобочитаемый вид (например. 5.5K, 176.7M...)
  • сделать это добавить | numfmt --to=si

Ответы, данные до сих пор, не учитывают, что список файлов, передаваемый от find к du, может быть настолько длинным, что find автоматически разбивает список на куски, что приводит к множественным вхождениям total.

Вы можете либо grep total(локаль!) ​​Подвести итоги вручную, либо использовать другую команду. AFAIK Есть только два способа получить общую сумму (в килобайтах) всех файлов, найденных с помощью find:
find . -type f -iname '*.jpg' -print0 | xargs -r0 du -a| awk '{sum+=$1} END {print sum}'

Объяснение
find . -type f -iname '*.jpg' -print0: Найти все файлы с расширением jpg независимо от регистра (т. Е. * .Jpg, * .JPG, * .Jpg ...) и вывести их (с нулевым символом в конце).
xargs -r0 du -a: -r: Xargs будет вызывать команду даже без переданных аргументов, что предотвращает -r. -0 означает строки с нулевым символом в конце (не завершенный символом новой строки).
awk '{sum+=$1} END {print sum}': Суммировать размеры файлов, выведенные предыдущей командой

И для справки, другой способ будет
find . -type f -iname '*.jpg' -print0 | du -c --files0-from=-

Если список файлов слишком большой, чтобы его нельзя было передать за один вызов du -c, в системе GNU вы можете сделать:

find . -iname '*.jpg' -type f -printf '%b\t%D:%i\n' |
  sort -u | cut -f1 | paste -sd+ - | bc

(размер выражается в количестве 512 байтных блоков). Как будто duон пытается сосчитать жесткие ссылки только один раз. Если вас не интересуют жесткие ссылки, вы можете упростить их до:

(printf 0; find . -iname '*.jpg' -type f -printf +%b) | bc

Если вы хотите использовать размер вместо использования диска, замените его %bна %s. Размер будет выражен в байтах.

Упомянутые решения пока неэффективны (exec стоит дорого) и требуют дополнительной ручной работы для суммирования, если список файлов длинный или они не работают в Mac OS X. Следующее решение очень быстрое, должно работать в любой системе, и выдает итоговый ответ в ГБ (удалите / 1024, если вы хотите увидеть сумму в МБ): find . -iname "*.jpg" -ls |perl -lane '$t += $F[6]; print $t/1024/1024/1024 . " GB"'

Улучшение SHW - отличный ответ, чтобы он работал с любой локалью, как Zbyszek уже указал в своем комментарии:

LC_ALL=C find ./photos/john_doe -type f -name '*.jpg' -exec du -ch {} + | grep total$

Естественно, du просматривает иерархию каталогов, и awk может выполнять фильтрацию, поэтому может быть достаточно чего-то подобного:

du -ak | awk 'BEGIN {sum=0} /\.jpg$/ {sum+=$1} END {print sum}'

Это работает без GNU.