Можно ли монтировать сжатый gzip образ дд на лету?

Мне нравится создавать резервную копию образа при первом резервном копировании системы. После этого я впервые использую rsync для создания инкрементных резервных копий.

Моя обычная резервная копия образа выглядит следующим образом:

Смонтировать и обнулить пустое пространство:

dd if=/dev/zero of=temp.dd bs=1M

rm temp.dd

Размонтируйте и вставьте диск во время сжатия

dd if=/dev/hda conv=sync,noerror bs=64K | gzip -c > /mnt/sda1/hda.ddimg.gz

чтобы вернуть систему в нормальное состояние, я обычно делаю

gunzip -c /mnt/sda1/hda.img.gz | dd of=/dev/hda conv=sync,noerror bs=64K

Это действительно просто и позволяет мне сохранить «весь диск», но на самом деле просто сэкономить использованное пространство.

Здесь проблема. Допустим, я делаю вышеописанное, но не в чистой системе и не запускаю резервные копии rsync достаточно быстро, и есть файлы, к которым я хочу получить доступ, которые находятся на образе. Допустим, у меня нет места для хранения, чтобы распаковать и скопировать образ на диск, но я хочу смонтировать образ, чтобы извлечь из него отдельные файлы .... Возможно ли это?

Обычно никто не будет сжимать образ dd, что позволит вам просто смонтировать образ, используя -o loop... но это не мой случай ...

Любые предложения по установке сжатого IMG на лету?

Будет ли использование AVFS для «монтирования» gz-файла, а затем монтирование внутренней работы dd.img (я так не думаю ... но потребуется проверка ...)?

Это зависит от того, является ли образ диска полным образом диска или просто разделом.

Мойка раздела (ов)

Если диск находится в хорошем рабочем состоянии, вы получите лучшее сжатие, если очистите пустое пространство на диске нулями. Если диск выходит из строя, пропустите этот шаг.

Если вы создаете образ всего диска, вам нужно помыть каждый раздел на диске.

ВНИМАНИЕ: Будьте осторожны, вы хотите установить ofв файл в смонтированном разделе, НЕ ограждающей САМ!

mkdir image_source
sudo mount /dev/sda1 image_source
dd if=/dev/zero of=image_source/wash.tmp bs=4M
rm image_source/wash.tmp
sudo umount image_source

Создание образа раздела

mkdir image
sudo dd if=/dev/sda1 of=image/sda1_backup.img bs=4M

Где sdaимя устройства и 1номер раздела. Отрегулируйте соответственно для вашей системы, если вы хотите создать образ другого устройства или раздела.

Создание образа всего диска

mkdir image
sudo dd if=/dev/sda of=image/sda_backup.img bs=4M

Где sdaэто название устройства. Отрегулируйте соответственно для вашей системы, если вы хотите, чтобы изображение другого устройства.

компрессия

Создайте изображение «squashfs», которое содержит полное несжатое изображение.

sudo apt-get install squashfs-tools
mksquashfs image squash.img

Потоковое сжатие

Чтобы избежать создания отдельного временного файла полного размера диска, вы можете выполнить потоковую передачу в образ squashfs.

mkdir empty-dir
mksquashfs empty-dir squash.img -p 'sda_backup.img f 444 root root dd if=/dev/sda bs=4M'

Монтирование сжатого образа раздела

Сначала смонтируйте образ squashfs, затем смонтируйте образ раздела, сохраненный в смонтированном образе squashfs.

mkdir squash_mount
sudo mount squash.img squash_mount

Теперь у вас есть смонтированный сжатый образ, смонтируйте сам образ (то есть внутри образа squashfs)

mkdir compressed_image
sudo mount squash_mount/sda1_backup.img compressed_image

Теперь ваше изображение смонтировано под compressed_image.

РЕДАКТИРОВАТЬ: Если вы хотите просто восстановить образ диска в раздел на этом этапе (вместо того, чтобы монтировать его для просмотра / чтения содержимого), просто ddсделайте образ squash_mount/sda1_backup.imgна месте назначения вместо того, чтобы делать mount.

Монтирование сжатого полного образа диска

Для этого вам необходимо использовать пакет с именем kpartx. kpartx позволяет вам монтировать отдельные разделы в полный образ диска.

sudo apt-get install kpartx

Сначала смонтируйте сжатый раздел, содержащий полный образ диска.

mkdir compressed_image
sudo mount squash.img compressed_image

Теперь вам нужно создать устройства для каждого раздела в полном образе диска:

sudo kpartx -a compressed_image/sda_backup.img

Это создаст устройства для разделов в полном образе диска, /dev/mapper/loopNpPгде N - номер, назначенный для устройства обратной связи, а P - номер раздела. Например: /dev/mapper/loop0p1.

Теперь у вас есть способ смонтировать отдельные разделы в полном образе диска:

mkdir fulldisk_part1
sudo mount /dev/mapper/loop0p1 fulldisk_part1

Если изображение доступно только для чтения, вы также можете использовать nbdkit ( man-страницу ) и его плагин xz (xz должен обеспечить лучшее время сжатия и произвольного доступа, чем gzip).

Создать сжатый образ раздела

dd if=/dev/sda1 bs=16M | xz -9 --block-size=16MiB - > sda1.img.xz

--block-sizeВариант 16 МиБа должен обеспечить хорошую случайную производительность доступа.

Примечание: вы можете использовать альтернативные программы сжатия xz, такие как pixz, который обеспечивает параллельное сжатие, просто убедитесь, что он разбивает выходные данные на несколько небольших блоков, в противном случае nbdkit должен распаковывать много данных. Например, по состоянию на сентябрь 2015 года pxz не поддерживает это.

Подайте это с nbdkit

nbdkit --no-fork --user nobody --group nobody -i 127.0.0.1 \
       xz file=sda1.img.xz

Подключиться к серверу NBD

nbd-client 127.0.0.1 10809 /dev/nbd0 -nofork

Монтировать его только для чтения

mount -o ro /dev/nbd0 sda1

Когда сделано

umount /dev/nbd0
nbd-client -d /dev/nbd0

Остановите nbdkit , нажав Ctrl+ C(или с помощью kill ).

Пытаться archivemount

root@srv1:/backup# archivemount windows-2003-S.gz /target/
Unrecognized archive format
root@srv1:/backup# archivemount -o formatraw windows-2003-S.gz /target/
Calculating uncompressed file size. Please wait.
root@srv1:/backup# ls /target/
data
root@srv1:/backup# file /target/data
/target/data: DOS/MBR boot sector; partition 1 : ID=0x7, start-CHS (0x0,1,1), end-CHS (0x3ff,254,63), startsector 63, 58717512 sectors, extended partition table (last)

archivemount - файловая система на основе FUSE для вариантов Unix, включая Linux. Его целью является монтирование архивов (то есть tar, tar.gz и т. Д.) В точку монтирования, где они могут быть считаны или записаны, как и в любой другой файловой системе. Это делает доступ к содержимому архива, который может быть сжат, прозрачным для других программ, без распаковки их.

http://linuxaria.com/howto/how-to-mounts-an-archive-for-access-as-a-file-system

После монтирования архива вы можете использовать его содержимое как обычный файл. Возможно получить таблицу разделов или конвертировать, смонтировать образ с помощью инструментов qemu.

squashfs полезен для загрузки с образа, но очень сложен для резервного копирования.

Этот ответ дополняет ответ Кристиана Чиупиту . Если вы используете сжатие xz с разумным размером блока, вы можете получить доступ к образу диска, используя guestfish или другие инструменты libguestfs , например:

nbdkit xz file=disk.img.xz --run 'guestfish --format=raw -a $nbd -i'

На самом деле, нет. Вы не можете действительно искать конкретный блок в сжатом файле, не распаковывая его целиком, что затрудняет использование сжатого изображения в качестве блочного устройства.

Вы можете использовать что-то вроде dumpи restore(или tar, действительно), все из которых используют потоковый формат ... так что вы можете получить доступ к индивидуальным файлам, эффективно сканируя несжатый поток. Это означает, что если файл, который вы хотите, находится в конце сжатого архива, у вас может быть долгое время ожидания, но это не требует, чтобы вы фактически распаковывали все на диск.

Использование tarрезервных копий может показаться немного старомодным, но вы получаете большую гибкость.

Еще одно дополнение к ответу Кристиана Чиупиту :

Если вы используете nbdkitдля монтирования полного образа диска (вместо образа раздела), вам может потребоваться указать размер блока (размер сектора диска) при подключении к NBD-серверу, поскольку по умолчанию используется 1024байты. Чтобы использовать 512байты вместо:

nbd-client 127.0.0.1 /dev/nbd0 -b 512 -n

После этого диск отобразится как /dev/nbd0, и вы сможете просматривать таблицу разделов, используя fdisk -l. Однако разделы еще не монтируются - используйте kpartx(из ответа doug65536 ) для создания устройств для разделов, например:

kpartx -arv /dev/nbd0

Наконец, разделы появятся в /dev/mapper/, и вы можете смонтировать их как обычно. Убедитесь, что вы используете режим readonly ( -o ro), поскольку плагин xz поддерживает только чтение:

mount -o ro /dev/mapper/nbd0p3 /mnt