Menyalin volum ke sistem storan melalui pelayan Linux menggunakan XCOPY

Ia berlaku bahawa anda perlu mendapatkan salinan penuh volum dalam satu sistem storan data (DSS), bukan petikan, klon, tetapi volum penuh. Tetapi sistem storan tidak selalu membenarkan ini dilakukan secara dalaman menggunakan caranya sendiri. Nampaknya satu-satunya pilihan adalah untuk menyalin melalui pelayan, tetapi dalam kes ini keseluruhan volum data akan didorong melalui pelayan itu sendiri, rangkaian ke sistem storan dan port storan, memuatkan semua komponen ini. Tetapi terdapat arahan SCSI yang boleh membolehkan anda melakukan segala-galanya dalam sistem storan itu sendiri, dan jika sistem anda menyokong VAAI daripada VMware, maka hampir 100% arahan XCOPY (EXTENDED COPY) disokong, yang memberitahu tatasusunan apa dan tempat untuk menyalin, tanpa melibatkan pelayan proses dan rangkaian.

Nampaknya segala-galanya sepatutnya mudah, tetapi saya tidak menemui sebarang skrip siap dengan segera, jadi saya terpaksa mencipta semula roda. Linux telah dipilih untuk OS pelayan dan arahan ddpt (http://sg.danny.cz/sg/ddpt.html) telah dipilih sebagai alat penyalin. Menggunakan gabungan ini, anda boleh menyalin sebarang jilid daripada mana-mana OS, kerana penyalinan berlaku sekatan demi sekatan pada bahagian sistem storan. Oleh kerana perlu menyalin blok demi blok, dan bilangan blok mesti dikira, arahan blockdev digunakan untuk mengira bilangan lelaran tersebut. Saiz blok maksimum diperoleh secara eksperimen; ddpt sebenarnya tidak berfungsi dengan blok besar. Hasilnya ialah skrip yang agak mudah berikut:

#!/bin/bash
# first parameter = input device
# second parameter = output device
# device size must be the same
# changing bs variable can reduce speed, max speed should be at bs=32768. 32768 is max setting, lower settings should be calculated dividing by 2

set -o nounset
bs=32768
s=`blockdev --getsz $1`
i=0
while [ $i -le $s ]
do
ddpt of=$2 bs=512 oflag=xcopy,direct if=$1 iflag=xcopy,direct count=$bs verbose=-1 skip=$i seek=$i
i=$(( $i+$bs ))
done

Mari kita buat sedikit pemeriksaan! Nah, sebagai yang kecil, fail 1TB tidak dibuat dan disemak dengan cepat oleh md5sum :)

root@sales-demo-05:/home/vasilyk# blockdev --getsz /dev/mapper/mpathfs
2516582400
root@sales-demo-05:/home/vasilyk# blockdev --getsz /dev/mapper/mpathfr
2516582400
root@sales-demo-05:/home/vasilyk# mount /dev/mapper/mpathfs /xcopy_source/
mount: /xcopy_source: wrong fs type, bad option, bad superblock on /dev/mapper/mpathfs, missing codepage or helper program, or other error.
root@sales-demo-05:/home/vasilyk# mkfs /dev/mapper/mpathfs
mke2fs 1.44.1 (24-Mar-2018)
Discarding device blocks: done
Creating filesystem with 314572800 4k blocks and 78643200 inodes
Filesystem UUID: bed3ea00-c181-4b4e-b52e-d9bb498be756
Superblock backups stored on blocks:
        32768, 98304, 163840, 229376, 294912, 819200, 884736, 1605632, 2654208,
        4096000, 7962624, 11239424, 20480000, 23887872, 71663616, 78675968,
        102400000, 214990848

Allocating group tables: done
Writing inode tables: done
Writing superblocks and filesystem accounting information: done

root@sales-demo-05:/home/vasilyk# mount /dev/mapper/mpathfs /xcopy_source/
root@sales-demo-05:/home/vasilyk# ls -l /xcopy_source/
total 16
drwx------ 2 root root 16384 Aug 19 15:35 lost+found
root@sales-demo-05:/home/vasilyk# head -c 1T </dev/urandom > /xcopy_source/1TB_file
root@sales-demo-05:/home/vasilyk# ls -l /xcopy_source/
total 1074791444
-rw-r--r-- 1 root root 1099511627776 Aug 19 17:25 1TB_file
drwx------ 2 root root         16384 Aug 19 15:35 lost+found
root@sales-demo-05:/home/vasilyk# umount /xcopy_source
root@sales-demo-05:/home/vasilyk# mount /dev/mapper/mpathfr /xcopy_dest/
mount: /xcopy_dest: wrong fs type, bad option, bad superblock on /dev/mapper/mpathfr, missing codepage or helper program, or other error.
root@sales-demo-05:/home/vasilyk# cat xcopy.sh
#!/bin/bash
# first parameter = input device
# second parameter = output device
# device size must be the same
# changing bs variable can reduce speed, max speed should be at bs=32768. 32768 is max setting, lower settings should be calculated dividing by 2

bs=32768
s=`blockdev --getsz $1`
i=0
while [ $i -le $s ]
do
ddpt of=$2 bs=512 oflag=xcopy,direct if=$1 iflag=xcopy,direct count=$bs verbose=-1 skip=$i seek=$i
i=$(( $i+$bs ))
done
root@sales-demo-05:/home/vasilyk# time ./xcopy.sh /dev/mapper/mpathfs /dev/mapper/mpathfr
real    11m30.878s
user    2m3.000s
sys     1m11.657s

Apa yang berlaku pada sistem storan pada masa itu:

Mari teruskan dengan Linux.

root@sales-demo-05:/home/vasilyk# mount /dev/mapper/mpathfr /xcopy_dest/
root@sales-demo-05:/home/vasilyk# ls -l /xcopy_dest/
total 1074791444
-rw-r--r-- 1 root root 1099511627776 Aug 19 17:25 1TB_file
drwx------ 2 root root         16384 Aug 19 15:35 lost+found
root@sales-demo-05:/home/vasilyk# mount /dev/mapper/mpathfs /xcopy_source/
root@sales-demo-05:/home/vasilyk# md5sum /xcopy_source/1TB_file
53dc6dfdfc89f099c0d5177c652b5764  /xcopy_source/1TB_file
root@sales-demo-05:/home/vasilyk# md5sum /xcopy_dest/1TB_file
53dc6dfdfc89f099c0d5177c652b5764  /xcopy_dest/1TB_file
root@sales-demo-05:/home/vasilyk#

Semuanya berjaya, tetapi uji dan gunakan atas risiko anda sendiri! Sebagai jumlah sumber, adalah lebih baik untuk mengambil gambar, sebagai permulaan.

Sumber: www.habr.com