cruel world » backup

[Seri HA 3] Sentuhan Terakhir

hansen — Mon, 03 Aug 2009 09:09:27 +0000

DRBD sudah, Heartbeat juga sudah, sekarang tinggal menggabungkan keduanya dan memilih layanan apa saja yang akan tersedia di HA kita. Layanan yang akan kita pasang sebagai HA adalah vitual IP, dimana IP ini yang akan dituju oleh kilen, file server dengan nfs dan samba, web server httpd dengan php-nya serta database server MySQL. Sebelum mengintegrasikan layanan tersebut dengan heartbeat ada baiknya dicobakan dulu tanpa heartbeat dan sudah jalan dengan benar.

Agar semua perubahan data dari layanan tersebut dapat tersinkronisasi dengan baik maka ada beberapa lokasi data layanan diatas akan ditempatkan di folder yang tersinkronisasi oleh drbd, dalam hal ini di folder /drdisk. Untuk file server kita tempatkan di /drdisk/shares. Halaman web kita tempatkan di /drdisk/html dan file untuk php session kita tempatkan di /drdisk/php/session, sementara file upload lewat php tempat penyimpanan sementaranya ada di /drdisk/tmp. MySQL database di folder /drdisk/mysql.

Pada tutorial sebelumnya kita matikan dulu layanan drbd, nah sekarang kita hidupkan di kedua komputer dan kerjakan pembuatan folder diatas pada komputer yang dijadikan primary.

[root@hb1 ~]# drbdadm primary r0
[root@hb1 ~]# mount /dev/drbd1 /drdisk/
[root@hb1 ~]# mkdir -p /drdisk/shares /drdisk/html /drdisk/mysql /drdisk/tmp /drdisk/php/session
[root@hb1 ~]# chmod ugo=rwXt /drdisk/tmp/ /drdisk/shares/
[root@hb1 ~]# chmod 770 /drdisk/php/session/
[root@hb1 ~]# chgrp apache /drdisk/php/session/

/drdisk/tmp dan /drdisk/shares permission-nya kita jadi seperti /tmp. /drdisk/php/session ber-permisson 700 dan group owner adalah apache. Setelah itu kita konfigurasi masing-masing layanan agar menggunakan folder yang telah kita sediakan tersebut. File-file konfigurasi ini harus sama di kedua komputer.

Untuk nfs file konfigurasinya adalah file /etc/exports dan isinya cuma satu baris saja:

/drdisk/shares            *(rw,squash_uids=0-99,sync)

Untuk keterangan variabelnya coba saja cari tutorial tentang nfs di internet

Untuk samba, tambahkan baris berikut pada file /etc/samba/smb.conf:

[shares]
        comment = Shares Stuff
        path = /drdisk/shares
        public = yes
        writable = yes
        printable = no

File-file yang ada di /etc/samba juga perlu diduplikasi di komputer satu lagi.

Untuk apache (httpd) file yang perlu dirubah adalah /etc/httpd/conf/httpd.conf. Cari ‘DocumentRoot’ dan isikan dengan /drdisk/html. Kemudian cari ‘’ dan ganti menjadi ‘’. Untuk konfigurasi php, silahkan rubah file /etc/php.ini pada bagian sbb:

....
; Temporary directory for HTTP uploaded files (will use system default if not
; specified).
upload_tmp_dir = /drdisk/tmp
....
session.save_path = "/drdisk/php/session"
....

Pada dasarnya itu saja yang dirubah, kalau ternyata masih ada yang perlu dirubah karena terkait dengan modul lain silahkan baca-baca di www.php.net

Untuk MySQL file konfigurasi yang dirubah adalah /etc/my.cnf:

[mysqld]
datadir=/drdisk/mysql
socket=/var/lib/mysql/mysql.sock
user=mysql
# Default to using old password format for compatibility with mysql 3.x
# clients (those using the mysqlclient10 compatibility package).
old_passwords=1

[mysqld_safe]
log-error=/var/log/mysqld.log
pid-file=/var/run/mysqld/mysqld.pid

Nah, kalau semua layanan diatas sudah jalan dengan baik tanpa terintegrasi dengan heartbeat, maka kini saatnya mengintegrasikan dengan heartbeat. Layanan-layanan diatas berposisi off pada waktu komputer dinyalakan (termasuk drbd), heartbeat yang akan menyalakannya.

File konfigurasi untuk layanan diatas kita tuliskan (misal) di hb-resources.xml dan hb-constarint.xml. hb-resources.xml untuk mengatur setingan layanan dan hb-constaint.xml untuk mengatur batasan/urutan layanan dinyalakan.

hb-resources.xml:

Setingan untuk drbd ada di dalam tag ‘master_slave’, yang perlu diperhatikan pada ‘name=”drbd_resource”‘ value-nya harus sama dengan nama resource pada setingan drbd. Untuk layanan lain tergabung dalam tag “group”.

Selanjutnya kita lihat tag ‘primitve’ dengan tipe “Filesystem”, ini adalah layanan untuk me-mount filesystem drdb. Perhatikan atributnya dan sesuaikan bila perlu. Tag ‘primitive’ dengan tipe “IPaddr2″ adalah layanan IP virtual, yaitu IP yang kita tuju untuk mengakses server kita. IP ini berbeda dengan IP kedua komputer yang dijadikan server. Dan sesuaikan bila perlu data-data yang ada pada bagian atribut.

Setelah itu perhatikan tipe-tipe ‘nfs’, ‘smb’, ‘httpd’ dan ‘mysqld’. Ini sebetulnya nama script yang kita gunakan waktu menjalankan layanan, kalau di centos dan fedora based itu adalah variabel yang dipakai setelah perintah service, untuk debian based bisa dilihat di folder /etc/init.d.

Kalau semua sudah beres tinggal mengintegrasikan kedalam layanan heartbeat yang sedang jalan dengan perintah:

cibadmin -C -o resources -x hb-resources.xml

Ganti ‘-C’ dengan ‘-R’ kalau setelah itu perlu merubah file hb-resources.xml dan ingin mengupdate setingan.

hb-constarint.xml:

Setingan ini untuk mengatur agar layanan dalam group0 dijalankan apabila drbd-nya sudah jalan dengan baik. Hal ini perlu dibatasi karena kalau drbd tidak jalan maka semua layanan di atas akan bermasalah waktu dijalankan. Integrasikan juga kedalam heartbeat yang sudah jalan dengan perintah

cibadmin -C -o constraints -x hb-constarint.xml

Semua sudah beres, tinggal mencobanya. Oh ya untuk memantau heartbeat kita gunakan aplikasi hb_gui, biasanya disediakan oleh paket heartbeat-gui. Misalkan kita akan mencoba file sharing lewat nfs, kita salin file lagu, terus mainkan lewat komputer klien dan matikan komputer heartbeat yang sedang jadi master, dari hb_gui biasanya terlihat komputer mana yang sedang jadi master. Mestinya waktu peralihan heartbeat master dari satu komputer ke komputer lain akan ada jeda saat mendengarkn musik, tetapi musik tetap jalan terus. Kalau itu berhasil maka setingan HA kita bisa dibilang sukses! Fuih…

[Seri HA 2] Pasang Heartbeat

hansen — Thu, 30 Jul 2009 10:29:09 +0000

Nah ini aplikasi yang menjadi tulang punggung HA, Heartbeat dari Linux HA. Silahkan baca-baca link tersebut untuk mengetahui lebih jauh apa itu heartbeat.

Untuk mengaktifkan heartbeat ini ternyata cukup mudah. Rubah file /etc/ha.d/ha.cf, bikin aja kalau belum ada, dengan isi sebagai berikut:

use_logd on
udpport 694
keepalive 1 # 1 second
deadtime 10
initdead 80
bcast eth0
node hb1 hb2
crm yes
auto_failback yes

isi dari node disesuaikan dengan nama-nama komputernya. Setelah itu membuat file /etc/ha.d/authkeys untuk autentikasinya dengan menggunakan script ini:

cat <<-!AUTH >/etc/ha.d/authkeys
# Automatically generated authkeys file
auth 1
1 sha1 `dd if=/dev/urandom count=4 2>/dev/null | openssl dgst -sha1` !AUTH

Karena file /etc/ha.d/authkeys sensitif, maka rubah permission-nya menjadi 600 (-rw------). Yak segitu saja, heartbeat siap dijalankan. Di fedora based tinggal jalankan ‘service heartbeat start‘ dan jangan lupa service heartbeat di on-kan waktu komputer dihidupkan.

Tapi dengan konfigurasi seperti itu saja heartbeat tidak banyak berguna, harus ada service-service yang ditangani heartbeat yang menjadikannya fungsional sebagai HA, misal visual IP, digabung dengan drbd untuk sinkronisasi data, httpd, nfs, samba dan lain-lain. Nah yang begini akan dibahas pada [Seri HA 3] Sentuhan Terakhir

[Seri HA 1] Pasang DRBD

hansen — Wed, 29 Jul 2009 04:49:58 +0000

Apa itu DRBD? Dan apa pula hubungannya dengan HA? Coba jalan-jalan ke sini dulu.

Pada dasarnya DRBD adalah software untuk sinkronisasi data tetapi pada level block device, yaitu level dibawah filesystem. Jadi membuat filesystem-pun akan disinkronkan. Sinkronisasi pada level block device ini diperlukan (tetapi tidak harus) agar HA bisa lebih mulus pergantian komputernya.

OK, langsung ke hardware dan konfigurasinya yang diperlukan untuk drbd. Pertama-tama tentu partisi yang akan disinkronkan, berikut hasil perintah ‘fdisk -l’ dari kedua komputer:

[root@hb1 ~]# fdisk -l
....
   Device Boot      Start         End      Blocks   Id  System
/dev/hda1   *           1        1305    10482381   83  Linux
/dev/hda2            1306        1436     1052257+  82  Linux swap / Solaris
/dev/hda3            1437        2564     9060660   83  Linux

[root@hb2 ~]# fdisk -l
....
   Device Boot      Start         End      Blocks   Id  System
/dev/hda1   *           1        1305    10482381   83  Linux
/dev/hda2            1306        1370      522112+  82  Linux swap / Solaris
/dev/hda3            1371        2498     9060660   83  Linux

Perhatikan, walau besar kedua hardisk berbeda, besar partisi (hda3) yang akan dipakai harus sama persis (1127 blok).

Selanjutnya saya menggunakan 2 kartu jaringan di masing-masing komputer. Berikut hasil ‘ifconfig’ dari kedua komputer:

[root@hb1 ~]# ifconfig
eth0      Link encap:Ethernet  HWaddr xx:xx:xx:xx:xx:xx
          inet addr:192.168.0.11  Bcast:192.168.0.255  Mask:255.255.255.0
          ....

eth1      Link encap:Ethernet  HWaddr xx:xx:xx:xx:xx:xx
          inet addr:10.0.0.11  Bcast:10.0.0.255  Mask:255.255.255.0
          ....

[root@hb2 ~]# ifconfig
eth0      Link encap:Ethernet  HWaddr xx:xx:xx:xx:xx:xx
          inet addr:192.168.0.12  Bcast:192.168.0.255  Mask:255.255.255.0
          ....

eth1      Link encap:Ethernet  HWaddr xx:xx:xx:xx:xx:xx
          inet addr:10.0.0.12  Bcast:10.0.0.255  Mask:255.255.255.0
          ....

eth0 akan terhubung ke jaringan lokal dan eth1 akan saling terhubung dengan kabel kros, dengan kata lain kedua komputer punya jalur pribadi lewat eth1. Kenapa hal ini perlu dilakukan? Tipe sinkronisasi yang dipilih memerlukan bandwidth yang cukup besar, agar tidak mengganggu jaringan lokal maka perlu dipisahkan lewat jalur pribadi ini. Untuk men-tes apakah jalur ini telah berfungsi lakukan ping ke IP dari eth1 komputer lainnya.

Hardware dan setingan yang diperlukan sudah, sekarang ke file konfigurasi. File yang dipakai adalah /etc/drbd.conf. Berikut isi drbd.conf dari kedua komputer:

global {
  usage-count yes;
}
common {
  protocol C;
}
resource r0 {
  device    /dev/drbd1;
  meta-disk internal;
  net {
    after-sb-0pri discard-younger-primary;
    after-sb-1pri discard-secondary;
    after-sb-2pri disconnect;
  }
  on hb1 {
    address   10.0.0.11:7789;
    disk      /dev/hda3;
  }
  on hb2 {
    address   10.0.0.12:7789;
    disk      /dev/hda3;
  }
}

Penjelasan singkatnya sebagai berikut:

protocol C; Ini adalah protokol yang digunakan drbd untuk sinkronisasi, C adalah Synchronous mirroring, oleh karena itu kita memerlukan jalur pribadi untuk tipe ini.
resource r0 adalah nama resource yang akan selalu digunakan sebagai parameter ketika memanggil fungsi-fungsi drbd.
device /dev/drbd1; Device ini yang akan kita gunakan ketika melakukan mount
Opsi didalam net{} digunakan untuk menangani masalah split brain.

  on hb1 {
    address   10.0.0.11:7789;
    disk      /dev/hda3;
  }

Ini adalah konfigurasi untuk komputernya, masing-masing disesuaikan dengan setingan komputer.
address 10.0.0.11:7789; adalah IP jalur pribadi dengan port standar drbd.
disk /dev/hda3; adalah partisi yang digunakan oleh drbd.

Setelah selesai dengan file konfigurasi tersebut, kita akan melakukan langkah pendahuluan untuk menghidupkan drbd ini. Perintah-perintah berikut dilakukan di kedua komputer.
Membuat device metadata:

[root@hb1 ~]# drbdadm create-md r0
....
Writing meta data...
initialising activity log
NOT initialized bitmap
New drbd meta data block sucessfully created.
success

Memasang backup device dan menyetel parameter sinkronisasi:

[root@hb1 ~]# drbdadm attach r0
[root@hb1 ~]# drbdadm syncer r0

Untuk centos, sebelum memasang backup device perlu ‘modprobe drbd’ dulu. Setelah proses inisialisasi selesai maka loading kernel driver akan dilakukan oleh service drbd.
Selanjutnya adalah mengkoneksi kedua komputer:

[root@hb1 ~]# drbdadm connect r0

Untuk melihat status setelah prosedur diatas silahkan lihat isi file /proc/drbd:

[root@hb1 ~]# cat /proc/drbd
version: 8.2.6 (api:88/proto:86-88)
GIT-hash: 3e69822d3bb4920a8c1bfdf7d647169eba7d2eb4 build by buildsvn@c5-i386-build, 2008-10-03 11:42:32

 1: cs:Connected st:Secondary/Secondary ds:Inconsistent/Inconsistent C r---
    ns:0 nr:0 dw:0 dr:0 al:0 bm:0 lo:0 pe:0 ua:0 ap:0 oos:9060344

“cs:Connected” berarti kedua drbd sudah terkoneksi, “st:Secondary/Secondary” berarti status dari keduanya adalah secendary semua, nantinya harus ada yang jadi primary, yang didepan adalah drbd dari komputer tempat melihat status ini, “ds:Inconsistent/Inconsistent” berarti disk status inconsistent, pada saat ini adalah normal, nantinya kita perlu sinkronkan manual dulu.

Proses selanjutnya adalah mengsinkronkan pertama kali. Kalau kita memulai dari partisi kosong proses ini bisa dimulai dari komputer mana saja, tetapi satu komputer partisi yang dipakai sudah berisi data maka harus dimulai dari komputer tersebut, kalau tidak data akan hilang!

[root@hb1 ~]# drbdadm -- --overwrite-data-of-peer primary r0

Untuk melihat prosesnya bisa lewat /proc/drbd lagi:

[root@hb1 ~]# cat /proc/drbd
version: 8.2.6 (api:88/proto:86-88)
GIT-hash: 3e69822d3bb4920a8c1bfdf7d647169eba7d2eb4 build by buildsvn@c5-i386-build, 2008-10-03 11:42:32

 1: cs:SyncSource st:Primary/Secondary ds:UpToDate/Inconsistent C r---
    ns:6016 nr:0 dw:0 dr:6016 al:0 bm:0 lo:0 pe:0 ua:0 ap:0 oos:9054328
	[>....................] sync'ed:  0.1% (8842/8847)M
	finish: 7:11:09 speed: 348 (332) K/sec

Yak, sedang berjalan, tunggu sampai selesai, 7 jam? itu baru 8847 MB Perhatikan bahwa status (st) berubah menjadi Primary/Secondary dan disk state (ds) menjadi UpToDate/Inconsistent.

Setelah sinkronisasi pertama selesai mari kita coba. Partisi yang dipakai drbd belum di format, maka perlu kita format dulu sebelum dipakai. Perhatikan bahwa kita hanya perlu memformat pada komputer yang status drbd-nya primary, yang secondary akan tersinkronisasi (bahkan pada level pembuatan file system ). Perhatikan juga device yang kita rujuk bukan lagi /dev/hda3 tetapi /dev/drbd1 seperti yang ada dalam file konfigurasi.

[root@hb1 ~]# mkfs.ext3 /dev/drbd1
mke2fs 1.39 (29-May-2006)
....
Writing inode tables: done
Creating journal (32768 blocks): done
Writing superblocks and filesystem accounting information: done
....

Setelah itu kita buat folder (/drdisk) yang akan menjadi tujuan mount di kedua komputer dan mari kita lakukan tes sederhana.
Di komputer yang jadi primary:

mount /dev/drbd1 ke /drdisk
buat file
umount kembali
turunkan role-nya jadi secondary

[root@hb1 ~]# mount /dev/drbd1 /drdisk/
[root@hb1 ~]# echo "just test drbd" >/drdisk/testdrbd
[root@hb1 ~]# umount /drdisk
[root@hb1 ~]# drbdadm secondary r0

Setelah itu kita lakukan langkah berikut di komputer yang awalnya secondary:

Naikkan role-nya sebagai primary
mount /dev/drbd1 ke /drdisk
coba lihat isi /drdisk/testdrbd yang pasti sama dengan komputer satu lagi

[root@hb2 ~]# drbdadm primary r0
[root@hb2 ~]# mount /dev/drbd1 /drdisk/
[root@hb2 ~]# cat /drdisk/testdrbd
just test drbd

Kalau sudah OK, umount dan turunkan role-nya menjadi secondary lagi kalau mau digunakan oleh heartbeat. Selesai memasang DRBD, fuih…