XCOPY арқылы Linux сервері арқылы көлемдерді сақтау жүйелеріне көшіру

Бір деректерді сақтау жүйесі (DSS) ішінде суретті, клонды емес, толық көлемдегі томның толық көшірмесін алу қажет болады. Бірақ сақтау жүйесі мұны әрқашан өз құралдарын пайдаланып ішкі түрде жасауға мүмкіндік бермейді. Жалғыз нұсқа сервер арқылы көшіру болып табылады, бірақ бұл жағдайда деректердің барлық көлемі сервердің өзі, желі арқылы сақтау жүйесі мен сақтау порттары арқылы барлық осы компоненттерді жүктейді. Бірақ сақтау жүйесінің өзінде барлығын жасауға мүмкіндік беретін SCSI пәрмендері бар және сіздің жүйеңіз VMware ұсынған VAAI қолдаса, XCOPY (КЕҢЕЙТІЛГЕН КӨШІРУ) пәрменіне 100% дерлік қолдау көрсетіледі, ол массивке нені және қайда көшіру керек, процесс серверін және желіні қатыстырмай.

Барлығы қарапайым болуы керек сияқты, бірақ мен дайын сценарийлерді бірден таба алмадым, сондықтан дөңгелекті қайта ойлап табуға тура келді. Сервердің ОЖ үшін Linux таңдалды, ал көшіру құралы ретінде ddpt пәрмені (http://sg.danny.cz/sg/ddpt.html) таңдалды. Бұл комбинацияны пайдалана отырып, кез келген ОЖ-дан кез келген томдарды көшіруге болады, өйткені көшіру сақтау жүйесі жағында блок-блок бойынша жүреді. Блокты блок бойынша көшіру қажет болғандықтан және блоктардың санын есептеу керек болғандықтан, blockdev пәрмені мұндай қайталанулар санын санау үшін пайдаланылды. Максималды блок өлшемі эксперименталды түрде алынды; ddpt шын мәнінде үлкен блокпен жұмыс істемеді. Нәтиже келесі өте қарапайым сценарий болды:

#!/bin/bash
# first parameter = input device
# second parameter = output device
# device size must be the same
# changing bs variable can reduce speed, max speed should be at bs=32768. 32768 is max setting, lower settings should be calculated dividing by 2

set -o nounset
bs=32768
s=`blockdev --getsz $1`
i=0
while [ $i -le $s ]
do
ddpt of=$2 bs=512 oflag=xcopy,direct if=$1 iflag=xcopy,direct count=$bs verbose=-1 skip=$i seek=$i
i=$(( $i+$bs ))
done

Кішкене тексеріп көрейік! Кішкентай болғандықтан, 1 ТБ файл тез жасалмады және md5sum арқылы тексерілді :)

root@sales-demo-05:/home/vasilyk# blockdev --getsz /dev/mapper/mpathfs
2516582400
root@sales-demo-05:/home/vasilyk# blockdev --getsz /dev/mapper/mpathfr
2516582400
root@sales-demo-05:/home/vasilyk# mount /dev/mapper/mpathfs /xcopy_source/
mount: /xcopy_source: wrong fs type, bad option, bad superblock on /dev/mapper/mpathfs, missing codepage or helper program, or other error.
root@sales-demo-05:/home/vasilyk# mkfs /dev/mapper/mpathfs
mke2fs 1.44.1 (24-Mar-2018)
Discarding device blocks: done
Creating filesystem with 314572800 4k blocks and 78643200 inodes
Filesystem UUID: bed3ea00-c181-4b4e-b52e-d9bb498be756
Superblock backups stored on blocks:
        32768, 98304, 163840, 229376, 294912, 819200, 884736, 1605632, 2654208,
        4096000, 7962624, 11239424, 20480000, 23887872, 71663616, 78675968,
        102400000, 214990848

Allocating group tables: done
Writing inode tables: done
Writing superblocks and filesystem accounting information: done

root@sales-demo-05:/home/vasilyk# mount /dev/mapper/mpathfs /xcopy_source/
root@sales-demo-05:/home/vasilyk# ls -l /xcopy_source/
total 16
drwx------ 2 root root 16384 Aug 19 15:35 lost+found
root@sales-demo-05:/home/vasilyk# head -c 1T </dev/urandom > /xcopy_source/1TB_file
root@sales-demo-05:/home/vasilyk# ls -l /xcopy_source/
total 1074791444
-rw-r--r-- 1 root root 1099511627776 Aug 19 17:25 1TB_file
drwx------ 2 root root         16384 Aug 19 15:35 lost+found
root@sales-demo-05:/home/vasilyk# umount /xcopy_source
root@sales-demo-05:/home/vasilyk# mount /dev/mapper/mpathfr /xcopy_dest/
mount: /xcopy_dest: wrong fs type, bad option, bad superblock on /dev/mapper/mpathfr, missing codepage or helper program, or other error.
root@sales-demo-05:/home/vasilyk# cat xcopy.sh
#!/bin/bash
# first parameter = input device
# second parameter = output device
# device size must be the same
# changing bs variable can reduce speed, max speed should be at bs=32768. 32768 is max setting, lower settings should be calculated dividing by 2

bs=32768
s=`blockdev --getsz $1`
i=0
while [ $i -le $s ]
do
ddpt of=$2 bs=512 oflag=xcopy,direct if=$1 iflag=xcopy,direct count=$bs verbose=-1 skip=$i seek=$i
i=$(( $i+$bs ))
done
root@sales-demo-05:/home/vasilyk# time ./xcopy.sh /dev/mapper/mpathfs /dev/mapper/mpathfr
real    11m30.878s
user    2m3.000s
sys     1m11.657s

Сол сәтте сақтау жүйесінде не болды:

XCOPY арқылы Linux сервері арқылы көлемдерді сақтау жүйелеріне көшіру
Linux-пен жалғастырайық.

root@sales-demo-05:/home/vasilyk# mount /dev/mapper/mpathfr /xcopy_dest/
root@sales-demo-05:/home/vasilyk# ls -l /xcopy_dest/
total 1074791444
-rw-r--r-- 1 root root 1099511627776 Aug 19 17:25 1TB_file
drwx------ 2 root root         16384 Aug 19 15:35 lost+found
root@sales-demo-05:/home/vasilyk# mount /dev/mapper/mpathfs /xcopy_source/
root@sales-demo-05:/home/vasilyk# md5sum /xcopy_source/1TB_file
53dc6dfdfc89f099c0d5177c652b5764  /xcopy_source/1TB_file
root@sales-demo-05:/home/vasilyk# md5sum /xcopy_dest/1TB_file
53dc6dfdfc89f099c0d5177c652b5764  /xcopy_dest/1TB_file
root@sales-demo-05:/home/vasilyk#

Барлығы сәтті болды, бірақ сынап көріңіз және өз тәуекеліңізбен пайдаланыңыз! Бастауыш үшін бастапқы көлем ретінде суретке түсіру жақсы.

Ақпарат көзі: www.habr.com

пікір қалдыру