Clever Geek Handbook

Menyalin volume ke penyimpanan melalui server Linux menggunakan XCOPY

Kebetulan Anda perlu mendapatkan salinan lengkap dari sebuah volume dalam satu sistem penyimpanan (DSS), bukan snapshot, klon, tetapi volume penuh. Tetapi sistem penyimpanan tidak selalu memungkinkan Anda melakukan ini di dalam diri Anda dengan cara Anda sendiri. Sepertinya satu-satunya pilihan adalah menyalin melalui server, tetapi pada saat yang sama seluruh jumlah data akan dikejar melalui server itu sendiri, jaringan ke sistem penyimpanan dan port penyimpanan, memuat semua komponen ini. Tetapi ada perintah SCSI yang memungkinkan Anda melakukan semua hal di dalam sistem penyimpanan itu sendiri, dan jika sistem Anda mendukung VAAI dari VMware, maka hampir 100%, yang didukung oleh perintah XCOPY (EXTENDED COPY), yang memberi tahu array apa yang harus disalin dan di mana, tanpa melibatkannya dalam hal ini. proses server dan jaringan.



Sepertinya semuanya harus sederhana, tetapi saya tidak langsung menemukan skrip yang sudah jadi, saya harus menemukan kembali roda. Linux dipilih untuk OS server, dan perintah ddpt (http://sg.danny.cz/sg/ddpt.html) dipilih sebagai alat salin. Volume apa pun dari OS apa pun dapat disalin menggunakan kombinasi ini, karena penyalinan blok-demi-blok di sisi penyimpanan. Karena perlu untuk menyalin blok demi blok, dan jumlah blok harus dihitung, perintah blockdev digunakan untuk menghitung jumlah iterasi tersebut. Ukuran blok maksimum diperoleh secara empiris, dengan ddpt blok yang besar sebenarnya tidak berfungsi. Hasilnya adalah skrip yang agak sederhana berikut ini: 



#!/bin/bash
# first parameter = input device
# second parameter = output device
# device size must be the same
# changing bs variable can reduce speed, max speed should be at bs=32768. 32768 is max setting, lower settings should be calculated dividing by 2

set -o nounset
bs=32768
s=`blockdev --getsz $1`
i=0
while [ $i -le $s ]
do
ddpt of=$2 bs=512 oflag=xcopy,direct if=$1 iflag=xcopy,direct count=$bs verbose=-1 skip=$i seek=$i
i=$(( $i+$bs ))
done


Ayo lakukan sedikit pemeriksaan! Nah, seberapa kecil, file 1TB dibuat dan diperiksa oleh md5sum tidak cepat :) 



root@sales-demo-05:/home/vasilyk# blockdev --getsz /dev/mapper/mpathfs
2516582400
root@sales-demo-05:/home/vasilyk# blockdev --getsz /dev/mapper/mpathfr
2516582400
root@sales-demo-05:/home/vasilyk# mount /dev/mapper/mpathfs /xcopy_source/
mount: /xcopy_source: wrong fs type, bad option, bad superblock on /dev/mapper/mpathfs, missing codepage or helper program, or other error.
root@sales-demo-05:/home/vasilyk# mkfs /dev/mapper/mpathfs
mke2fs 1.44.1 (24-Mar-2018)
Discarding device blocks: done
Creating filesystem with 314572800 4k blocks and 78643200 inodes
Filesystem UUID: bed3ea00-c181-4b4e-b52e-d9bb498be756
Superblock backups stored on blocks:
        32768, 98304, 163840, 229376, 294912, 819200, 884736, 1605632, 2654208,
        4096000, 7962624, 11239424, 20480000, 23887872, 71663616, 78675968,
        102400000, 214990848

Allocating group tables: done
Writing inode tables: done
Writing superblocks and filesystem accounting information: done

root@sales-demo-05:/home/vasilyk# mount /dev/mapper/mpathfs /xcopy_source/
root@sales-demo-05:/home/vasilyk# ls -l /xcopy_source/
total 16
drwx------ 2 root root 16384 Aug 19 15:35 lost+found
root@sales-demo-05:/home/vasilyk# head -c 1T </dev/urandom > /xcopy_source/1TB_file
root@sales-demo-05:/home/vasilyk# ls -l /xcopy_source/
total 1074791444
-rw-r--r-- 1 root root 1099511627776 Aug 19 17:25 1TB_file
drwx------ 2 root root         16384 Aug 19 15:35 lost+found
root@sales-demo-05:/home/vasilyk# umount /xcopy_source
root@sales-demo-05:/home/vasilyk# mount /dev/mapper/mpathfr /xcopy_dest/
mount: /xcopy_dest: wrong fs type, bad option, bad superblock on /dev/mapper/mpathfr, missing codepage or helper program, or other error.
root@sales-demo-05:/home/vasilyk# cat xcopy.sh
#!/bin/bash
# first parameter = input device
# second parameter = output device
# device size must be the same
# changing bs variable can reduce speed, max speed should be at bs=32768. 32768 is max setting, lower settings should be calculated dividing by 2

bs=32768
s=`blockdev --getsz $1`
i=0
while [ $i -le $s ]
do
ddpt of=$2 bs=512 oflag=xcopy,direct if=$1 iflag=xcopy,direct count=$bs verbose=-1 skip=$i seek=$i
i=$(( $i+$bs ))
done
root@sales-demo-05:/home/vasilyk# time ./xcopy.sh /dev/mapper/mpathfs /dev/mapper/mpathfr
real    11m30.878s
user    2m3.000s
sys     1m11.657s


Apa yang terjadi pada sistem penyimpanan saat ini: Mari



gambar

lanjutkan dengan Linux. 



root@sales-demo-05:/home/vasilyk# mount /dev/mapper/mpathfr /xcopy_dest/
root@sales-demo-05:/home/vasilyk# ls -l /xcopy_dest/
total 1074791444
-rw-r--r-- 1 root root 1099511627776 Aug 19 17:25 1TB_file
drwx------ 2 root root         16384 Aug 19 15:35 lost+found
root@sales-demo-05:/home/vasilyk# mount /dev/mapper/mpathfs /xcopy_source/
root@sales-demo-05:/home/vasilyk# md5sum /xcopy_source/1TB_file
53dc6dfdfc89f099c0d5177c652b5764  /xcopy_source/1TB_file
root@sales-demo-05:/home/vasilyk# md5sum /xcopy_dest/1TB_file
53dc6dfdfc89f099c0d5177c652b5764  /xcopy_dest/1TB_file
root@sales-demo-05:/home/vasilyk#




Semuanya berhasil, tetapi uji dan gunakan dengan risiko dan risiko Anda sendiri! Lebih baik mengambil snapshot sebagai volume sumber, sebagai permulaan.


More articles:


All Articles