Копирање волумена у системе за складиштење преко Линук сервера користећи КСЦОПИ

Дешава се да морате да добијете пуну копију волумена унутар једног система за складиштење података (ДСС), не снимак, клон, већ пун волумен. Али систем складиштења не дозвољава увек да се то уради интерно користећи своја средства. Чини се да је једина опција копирање преко сервера, али у овом случају цео обим података ће бити пребачен преко самог сервера, мреже до система за складиштење и портова за складиштење, учитавајући све ове компоненте. Али постоје СЦСИ команде које вам могу омогућити да урадите све унутар самог система за складиштење, а ако ваш систем подржава ВААИ од ВМваре-а, онда је скоро 100% подржана команда КСЦОПИ (ЕКСТЕНДЕД ЦОПИ), која низу говори шта и где да копирате, без укључивања сервера процеса и мреже.

Чини се да би све требало да буде једноставно, али нисам могао одмах да пронађем готове скрипте, па сам морао поново да измислим точак. Линук је изабран за ОС сервера, а команда ддпт (хттп://сг.данни.цз/сг/ддпт.хтмл) је изабрана као алатка за копирање. Користећи ову комбинацију, можете копирати било који волумен из било ког ОС-а, пошто се копирање одвија блок по блок на страни система за складиштење. Пошто је потребно копирати блок по блок, а број блокова се мора пребројати, за бројање таквих итерација коришћена је команда блоцкдев. Максимална величина блока је добијена експериментално; ддпт заправо није радио са великим блоком. Резултат је била следећа прилично једноставна скрипта:

#!/bin/bash
# first parameter = input device
# second parameter = output device
# device size must be the same
# changing bs variable can reduce speed, max speed should be at bs=32768. 32768 is max setting, lower settings should be calculated dividing by 2

set -o nounset
bs=32768
s=`blockdev --getsz $1`
i=0
while [ $i -le $s ]
do
ddpt of=$2 bs=512 oflag=xcopy,direct if=$1 iflag=xcopy,direct count=$bs verbose=-1 skip=$i seek=$i
i=$(( $i+$bs ))
done

Хајде да мало проверимо! Па, као мали, мд1сум није брзо креирао и проверио фајл од 5ТБ :)

root@sales-demo-05:/home/vasilyk# blockdev --getsz /dev/mapper/mpathfs
2516582400
root@sales-demo-05:/home/vasilyk# blockdev --getsz /dev/mapper/mpathfr
2516582400
root@sales-demo-05:/home/vasilyk# mount /dev/mapper/mpathfs /xcopy_source/
mount: /xcopy_source: wrong fs type, bad option, bad superblock on /dev/mapper/mpathfs, missing codepage or helper program, or other error.
root@sales-demo-05:/home/vasilyk# mkfs /dev/mapper/mpathfs
mke2fs 1.44.1 (24-Mar-2018)
Discarding device blocks: done
Creating filesystem with 314572800 4k blocks and 78643200 inodes
Filesystem UUID: bed3ea00-c181-4b4e-b52e-d9bb498be756
Superblock backups stored on blocks:
        32768, 98304, 163840, 229376, 294912, 819200, 884736, 1605632, 2654208,
        4096000, 7962624, 11239424, 20480000, 23887872, 71663616, 78675968,
        102400000, 214990848

Allocating group tables: done
Writing inode tables: done
Writing superblocks and filesystem accounting information: done

root@sales-demo-05:/home/vasilyk# mount /dev/mapper/mpathfs /xcopy_source/
root@sales-demo-05:/home/vasilyk# ls -l /xcopy_source/
total 16
drwx------ 2 root root 16384 Aug 19 15:35 lost+found
root@sales-demo-05:/home/vasilyk# head -c 1T </dev/urandom > /xcopy_source/1TB_file
root@sales-demo-05:/home/vasilyk# ls -l /xcopy_source/
total 1074791444
-rw-r--r-- 1 root root 1099511627776 Aug 19 17:25 1TB_file
drwx------ 2 root root         16384 Aug 19 15:35 lost+found
root@sales-demo-05:/home/vasilyk# umount /xcopy_source
root@sales-demo-05:/home/vasilyk# mount /dev/mapper/mpathfr /xcopy_dest/
mount: /xcopy_dest: wrong fs type, bad option, bad superblock on /dev/mapper/mpathfr, missing codepage or helper program, or other error.
root@sales-demo-05:/home/vasilyk# cat xcopy.sh
#!/bin/bash
# first parameter = input device
# second parameter = output device
# device size must be the same
# changing bs variable can reduce speed, max speed should be at bs=32768. 32768 is max setting, lower settings should be calculated dividing by 2

bs=32768
s=`blockdev --getsz $1`
i=0
while [ $i -le $s ]
do
ddpt of=$2 bs=512 oflag=xcopy,direct if=$1 iflag=xcopy,direct count=$bs verbose=-1 skip=$i seek=$i
i=$(( $i+$bs ))
done
root@sales-demo-05:/home/vasilyk# time ./xcopy.sh /dev/mapper/mpathfs /dev/mapper/mpathfr
real    11m30.878s
user    2m3.000s
sys     1m11.657s

Шта се дешавало на систему за складиштење у том тренутку:

Наставимо са Линуксом.

root@sales-demo-05:/home/vasilyk# mount /dev/mapper/mpathfr /xcopy_dest/
root@sales-demo-05:/home/vasilyk# ls -l /xcopy_dest/
total 1074791444
-rw-r--r-- 1 root root 1099511627776 Aug 19 17:25 1TB_file
drwx------ 2 root root         16384 Aug 19 15:35 lost+found
root@sales-demo-05:/home/vasilyk# mount /dev/mapper/mpathfs /xcopy_source/
root@sales-demo-05:/home/vasilyk# md5sum /xcopy_source/1TB_file
53dc6dfdfc89f099c0d5177c652b5764  /xcopy_source/1TB_file
root@sales-demo-05:/home/vasilyk# md5sum /xcopy_dest/1TB_file
53dc6dfdfc89f099c0d5177c652b5764  /xcopy_dest/1TB_file
root@sales-demo-05:/home/vasilyk#

Све је успело, али тестирајте и користите на сопствени ризик! Као изворни волумен, боље је направити снимке, за почетак.

Извор: ввв.хабр.цом