Replikasi File Otomatis (Cermin) Di Dua Server Penyimpanan Dengan GlusterFS 3.2.x Di Ubuntu 12.10

Tutorial ini menunjukkan cara menyiapkan penyimpanan ketersediaan tinggi dengan dua server penyimpanan (Ubuntu 12.10) yang menggunakan GlusterFS. Setiap server penyimpanan akan menjadi cermin dari server penyimpanan lainnya, dan file akan direplikasi secara otomatis di kedua server penyimpanan. Sistem klien (Ubuntu 12.10 juga) akan dapat mengakses penyimpanan seolah-olah itu adalah sistem file lokal. GlusterFS adalah sistem file berkerumun yang mampu menskalakan hingga beberapa peta-byte. Ini menggabungkan berbagai bata penyimpanan melalui Infiniband RDMA atau TCP/IP interkoneksi ke dalam satu sistem file jaringan paralel yang besar. Bata penyimpanan dapat dibuat dari perangkat keras komoditas apa pun seperti server x86_64 dengan RAID SATA-II dan HBA Infiniband.

Saya tidak memberikan jaminan apa pun bahwa ini akan berhasil untuk Anda!

1 Catatan Awal

Dalam tutorial ini saya menggunakan tiga sistem, dua server dan satu klien:

• server1.example.com:alamat IP 192.168.0.100 (server)
• server2.example.com:alamat IP 192.168.0.101 (server)
• klien1.contoh.com:Alamat IP 192.168.0.102 (klien)

Karena kita akan menjalankan semua langkah dari tutorial ini dengan hak akses root, kita bisa menambahkan semua perintah dalam tutorial ini dengan string sudo, atau kita menjadi root sekarang dengan mengetik

sudo su

Ketiga sistem harus dapat menyelesaikan nama host sistem lain. Jika ini tidak dapat dilakukan melalui DNS, Anda harus mengedit file /etc/hosts sehingga terlihat seperti berikut pada ketiga sistem:

vi /etc/hosts

127.0.0.1 localhost.localdomain localhost192.168.0.100 server1.example.com server1192.168.0.101 server2.example.com server2192.168.0.102 client1.example.com client1# Baris berikut diinginkan untuk host yang mendukung IPv6::1 localhost ip6-localhost ip6-loopbackfe00::0 ip6-localnetff00::0 ip6-mcastprefixff02::1 ip6-allnodesff02::2 ip6-allroutersff02 ::3 ip6-allhosts

(Dimungkinkan juga untuk menggunakan alamat IP alih-alih nama host dalam pengaturan berikut. Jika Anda lebih suka menggunakan alamat IP, Anda tidak perlu peduli apakah nama host dapat diselesaikan atau tidak.)

2 Menyiapkan Server GlusterFS

server1.example.com/server2.example.com:

GlusterFS tersedia sebagai paket untuk Ubuntu 12.10, oleh karena itu kita dapat menginstalnya sebagai berikut:

apt-get install glusterfs-server

Perintah

glusterfsd --version

sekarang harus menunjukkan versi GlusterFS yang baru saja Anda instal (3.2.5 dalam hal ini):

[email protected]:~# glusterfsd --version
 glusterfs 3.2.5 dibuat pada 31 Jan 2012 07:39:58
 Revisi repositori:git://git.gluster.com/glusterfs .git
 Hak Cipta (c) 2006-2011 Gluster Inc. 
 GlusterFS datang dengan BENAR-BENAR TANPA JAMINAN.
 Anda dapat mendistribusikan kembali salinan GlusterFS di bawah persyaratan Lisensi Publik Umum GNU.
 [dilindungi email]:~#

Jika Anda menggunakan firewall, pastikan port TCP 111, 24007, 24008, 24009-(24009 + jumlah brick di semua volume) terbuka di server1.example.com dan server2.example.com.

Selanjutnya kita harus menambahkan server2.example.com ke kumpulan penyimpanan tepercaya (harap dicatat bahwa saya menjalankan semua perintah konfigurasi GlusterFS dari server1.example.com, tetapi Anda juga dapat menjalankannya dari server2.example.com karena konfigurasinya adalah direplikasi antara node GlusterFS - pastikan Anda menggunakan nama host atau alamat IP yang benar):

server1.example.com:

Di server1.example.com, jalankan

server probe peer gluster2.example.com

[email protected]:~# gluster peer probe server2.example.com
 Probe berhasil
 [email protected]:~#

Status kumpulan penyimpanan tepercaya sekarang harus serupa dengan ini:

status rekan gluster

[email protected]:~# status peer gluster
 Jumlah Peer:1

Hostname:server2.example.com
 Uuid:7cd93007-fccb-4fcb-8063-133e6ba81cd9
 Status:Peer in Cluster (Connected)
 [email protected]:~# 

 Selanjutnya kita buat share bernama testvol dengan dua replika (harap diperhatikan bahwa jumlah replika sama dengan jumlah server dalam hal ini karena kita ingin mengatur mirroring) pada server1.example.com dan server2.example.com di /data direktori (ini akan dibuat jika tidak ada):
 
volume gluster buat testvol replica 2 transport tcp server1.example.com:/data server2.example.com:/data
 
[email protected]:~# gluster volume create testvol replica 2 transport tcp server1.example.com:/data server2.example.com:/data
 Pembuatan volume testvol telah berhasil. Harap mulai volume untuk mengakses data.
 [email protected]:~#
 

 Mulai volume:
 
volume gluster mulai testvol
 

 Ada kemungkinan bahwa perintah di atas memberitahu Anda bahwa tindakan itu tidak berhasil:
 
[email protected]:~# gluster volume start testvol
 Start volume testvol tidak berhasil
 [email protected]:~#
 

 Dalam hal ini Anda harus memeriksa output dari...
 

 server1.example.com/server2.example.com:
 
netstat -ketuk | grep glusterfsd
 

 di kedua server.
 

 Jika Anda mendapatkan output seperti ini...
 
[email protected]:~# netstat -tap | grep glusterfsd 
 TCP 0 0*:24009*:*Dengarkan 1548 /GLUSTERFSD 
 TCP 0 0 LOCALHOST.LOCALDOM:1019 localhost.localdo:24007 didirikan 1548 /glusterfsd 
 [Email Dilindungi]:~ #
 

 ... semuanya baik-baik saja, tetapi jika Anda tidak mendapatkan hasil apa pun...
 
[email protected]:~# netstat -tap | grep glusterfsd
 [dilindungi email]:~#
 

 ... restart daemon GlusterFS di server yang sesuai (server2.example.com dalam kasus ini):
 

 server2.example.com:
 
/etc/init.d/glusterfs-server restart
 

 Kemudian periksa output dari...
 
netstat -ketuk | grep glusterfsd
 

 ... lagi di server itu - sekarang akan terlihat seperti ini:
 
[email protected]:~# netstat -tap | grep glusterfsd 
 TCP 0 0*:24010*:*Dengarkan 1458 /GLUSTERFSD 
 TCP 0 0 LOCALHOST.LOCALDOM:1021 localhost.localdo:24007 didirikan 1458 /glusterfsd 
 [Email Dilindungi]:~ #
 

 Sekarang kembali ke server1.example.com:
 

 server1.example.com:
 

 Anda dapat memeriksa status volume dengan perintah
 
info volume kilau
 
[email protected]:~# info volume gluster
 
Nama Volume:testvol
 Jenis:Replika
 Status:Dimulai
 Jumlah Batu Bata:2
 Jenis Pengangkutan:tcp
 Batu Bata:
 Bata1 :server1.example.com:/data
 Brick2:server2.example.com:/data
 [dilindungi email]:~#
 

 Secara default, semua klien dapat terhubung ke volume. Jika Anda hanya ingin memberikan akses ke client1.example.com (=192.168.0.102), jalankan:
 
set volume gluster testvol auth.allow 192.168.0.102
 

 Harap perhatikan bahwa Anda dapat menggunakan karakter pengganti untuk alamat IP (seperti 192.168.*) dan Anda dapat menentukan beberapa alamat IP yang dipisahkan dengan koma (mis. 192.168.0.102,192.168.0.103).
 

 Info volume sekarang harus menunjukkan status yang diperbarui:
 
info volume kilau
 
[email protected]:~# info volume gluster
 
Nama Volume:testvol
 Jenis:Replika
 Status:Dimulai
 Jumlah Batu Bata:2
 Jenis Pengangkutan:tcp
 Batu Bata:
 Bata1 :server1.example.com:/data
 Brick2:server2.example.com:/data
 Opsi Dikonfigurasi ulang:
 auth.allow:192.168.0.102
 [dilindungi email]:~#
 

 
 
3 Menyiapkan Klien GlusterFS
 

 client1.example.com:
 

 Pada klien, kita dapat menginstal klien GlusterFS sebagai berikut:
 
apt-get install glusterfs-client
 

 Kemudian kita buat direktori berikut:
 
mkdir /mnt/glusterfs
 

 Itu dia! Sekarang kita dapat me-mount filesystem GlusterFS ke /mnt/glusterfs dengan perintah berikut:
 
mount.glusterfs server1.example.com:/testvol /mnt/glusterfs
 

 (Alih-alih server1.example.com Anda juga dapat menggunakan server2.example.com dalam perintah di atas!)
 

 Anda sekarang akan melihat bagian baru di output...
 
pasang
 
[email protected]:~# mount
 /dev/mapper/server3-root on / ketik ext4 (rw,errors=remount-ro)
 proc on /proc ketik proc (rw,noexec ,nosuid,nodev)
 sysfs aktif /sys ketik sysfs (rw,noexec,nosuid,nodev)
 fusectl aktif /sys/fs/fuse/connections ketik fusectl (rw)
 tidak ada di / sys/kernel/jenis debug debugfs (rw)
 tidak ada di /sys/kernel/keamanan jenis securityfs (rw)
 udev aktif /dev ketik devtmpfs (rw,mode=0755)
 devpts aktif /dev/pts ketik devpts (rw,noexec,nosuid,gid=5,mode=0620)
 tmpfs aktif /jalankan ketik tmpfs (rw,noexec,nosuid,size=10%,mode=0755)
 tidak ada di /run/lock ketik tmpfs (rw,noexec,nosuid,nodev,size=5242880)
 tidak ada di /run/shm ketik tmpfs (rw,nosuid,nodev)
 /dev/sda1 aktif /boot ketik ext2 (rw)
 server1.example.com:/testvol on /mnt/glusterfs ketik fuse.glusterfs (rw,allow_other,default_permissions,max_read=131072)
 [dilindungi email]:~# 
 

 ... dan...
 
df -h
 
[email protected]:~# df -h
 Filesystem           Ukuran  Digunakan Avail Use% Dipasang di
 /dev/mapper/server3-root
                                 27 /> udev 238m 4.0k 238m 1%/dev 
 tmpfs 99m 212k 99m 1%/run 
 Tidak ada 5.0m 0 5.0m 0%/run/lock 
 Tidak ada 247m 0 247m 0%/ run/shm
 /dev/sda1            228M   24M  193M  11% /boot
 server1.example.com:/testvol
                    29G   1.1G dilindungi]:~#
 

 Daripada memasang bagian GlusterFS secara manual pada klien, Anda dapat memodifikasi /etc/fstab sehingga bagian tersebut dipasang secara otomatis saat klien melakukan booting.
 

 Buka /etc/fstab dan tambahkan baris berikut:
 
vi /etc/fstab
 
[...]server1.example.com:/testvol /mnt/glusterfs glusterfs defaults,_netdev 0 0
 
 
 
 
 

 (Sekali lagi, alih-alih server1.example.com Anda juga dapat menggunakan server2.example.com!)
 

 Untuk menguji apakah /etc/fstab Anda yang dimodifikasi berfungsi, reboot klien:
 
boot ulang
 

 Setelah reboot, Anda akan menemukan share di output...
 
df -h
 

 ... dan...
 
pasang
 

 
 
4 Pengujian
 

 Sekarang mari kita buat beberapa file uji pada share GlusterFS:
 

 client1.example.com:
 
sentuh /mnt/glusterfs/test1
 sentuh /mnt/glusterfs/test2
 

 Sekarang mari kita periksa direktori /data di server1.example.com dan server2.example.com. File test1 dan test2 harus ada di setiap node:
 

 server1.example.com/server2.example.com:
 
ls -l /data
 
[email protected]:~# ls -l /data
 total 8
 -rw-r--r-- 1 root root 0 2012-12-17 11:17 test1
 -rw-r--r-- 1 root root 0 17-12-2012 11:17 test2
 [email protected]:~#
 

 Sekarang kita mematikan server1.example.com dan menambahkan/menghapus beberapa file pada share GlusterFS di client1.example.com.
 

 server1.example.com:
 
shutdown -h sekarang
 

 client1.example.com:
 
sentuh /mnt/glusterfs/test3
 sentuh /mnt/glusterfs/test4
 rm -f /mnt/glusterfs/test2
 

 Perubahan harus terlihat di direktori /data di server2.example.com:
 

 server2.example.com:
 
ls -l /data
 
[email protected]:~# ls -l /data
 total 8
 -rw-r--r-- 1 root root 0 2012-12-17 11:17 test1
 -rw-r--r-- 1 root root 0 2012-12-17 11:38 test3
 -rw-r--r-- 1 root root 0 2012-12-17 11:38 test4
 [dilindungi email]:~#
 

 Mari kita boot server1.example.com lagi dan lihat direktori /data:
 

 server1.example.com:
 
ls -l /data
 
[email protected]:~# ls -l /data
 total 8
 -rw-r--r-- 1 root root 0 2012-12-17 11:17 test1
 -rw-r--r-- 1 root root 0 17-12-2012 11:17 test2
 [email protected]:~#
 

 Seperti yang Anda lihat, server1.example.com tidak melihat perubahan yang terjadi saat down. Ini mudah diperbaiki, yang perlu kita lakukan hanyalah menjalankan perintah baca pada bagian GlusterFS di client1.example.com, mis.:
 

 client1.example.com:
 
ls -l /mnt/glusterfs/
 
[email protected]:~# ls -l /mnt/glusterfs/
 total 8
 -rw-r--r-- 1 root root 0 2012-12-17 11:17 test1 
 -rw-r--r-- 1 root root 0 2012-12-17 11:38 test3
 -rw-r--r-- 1 root root 0 2012-12-17 11:38 test4
 [dilindungi email]:~#
 

 Sekarang lihat kembali direktori /data di server1.example.com, dan Anda akan melihat bahwa perubahan telah direplikasi ke node tersebut:
 

 server1.example.com:
 
ls -l /data
 
[email protected]:~# ls -l /data
 total 4
 -rw-r--r-- 1 root root 0 2012-12-17 11:17 test1
 -rw-r--r-- 1 root root 0 2012-12-17 11:38 test3
 -rw-r--r-- 1 root root 0 2012-12-17 11:38 test4
 [dilindungi email]:~#
 

 
 
5 Tautan
 
 
GlusterFS:http://www.gluster.org/
 
Dokumentasi GlusterFS 3.2:http://download.gluster.com/pub/gluster/glusterfs/3.2/Documentation/AG/html/index.html
 
Ubuntu:http://www.ubuntu.com/