reklam
Disaster Recovery

Proxmox VE ve Linux Sunucularda ZFS Replikasyon Mimarisi: zfs send/receive, mbuffer Hızlandırma ve Sanoid / Syncoid ile Otomatik Felaket Kurtarma (DR)

6 dk okuma
reklam

Kurumsal sanallaştırma ve veritabanı altyapılarında ZFS dosya sistemini sadece yerel veri bütünlüğü (self-healing checksums) ve yüksek performanslı önbellekleme (ARC/L2ARC) için kullanmak, ZFS’in sunduğu gücün yalnızca yarısından faydalanmak demektir. ZFS’in gerçek mühendislik harikası olan Copy-on-Write (CoW) mimarisi, dosya veya blok seviyesinde tam tarama yapmaya (rsync gibi) gerek duymadan, iki anlık görüntü (snapshot) arasındaki yalnızca değişen blokları (incremental delta) mikrosaniyeler içinde tespit edip uzak bir felaket kurtarma (DR) sunucusuna aktarabilir.
Ancak standart zfs send | ssh zfs receive komutlarını varsayılan ayarlarla 10GbE veya 25GbE hatlar üzerinde çalıştırdığınızda, aktarım hızının 100-150 MB/sn bandında tıkandığını ve uzak disk yazma gecikmelerinin kaynak sunucudaki okumayı durdurduğunu (stalling) görürsünüz.
Bugünkü yazımızda; ZFS blok replikasyonunun çalışma mantığını, SSH şifreleme yükü ve mbuffer bellek tamponlarıyla hat kapasitesini nasıl doyuracağımızı ve Sanoid / Syncoid ikilisiyle kurumsal düzeyde tam otomatik, kendi kendini yöneten bir Felaket Kurtarma (DR) mimarisini nasıl kuracağımızı inceliyoruz.
1. ZFS Blok Replikasyonu Nasıl Çalışır? (Full vs. Incremental & Raw Send)
ZFS replikasyonu dosya sistemi (POSIX) katmanında değil, doğrudan DMU (Data Management Unit) nesne ve blok katmanında çalışır. Bir dataset veya sanal makine diski (ZVOL) üzerinde t1 ve t2 zamanlarında iki snapshot aldığınızda, ZFS blok ağaçlarındaki (Merkle Tree) işlem gruplarını (txg – Transaction Group) karşılaştırarak yalnızca t1 ile t2 arasında değişen veri bloklarını bir bayt akışına (stream) dönüştürür.
Kurumsal ortamlarda zfs send kullanırken mutlaka bilmeniz gereken üç kritik bayrak vardır:

  • -I (Büyük I) vs. -i (Küçük i):
    -i @snap1 @snap3: Sadece snap1 ile snap3 arasındaki farkı gönderir; aradaki snap2 snapshot’ını hedef sunucuda oluşturmaz.
    -I @snap1 @snap3: Aradaki tüm ara snapshot’ları (snap2 dahil) hedef sunucuya taşır. DR sunucusunda saatlik/günlük geri dönüş noktalarını korumak için her zaman -I tercih edilmelidir.
  • -w (–raw Send): Eğer kaynak datasetiniz ZFS Native Encryption ile şifrelenmişse veya LZ4/ZSTD ile sıkıştırılmışsa, -w parametresi veriyi RAM’de çözmeden ve yeniden şifrelemeden doğrudan ham (sıkıştırılmış ve şifreli) bloklar halinde ağ üzerinden gönderir. CPU tüketimini %80 oranında düşürür ve hedef sunucuda şifre anahtarı olmadan bile güvenli “Zero-Trust” yedekleme sağlar.
  • -F (zfs receive -F): Hedef (DR) sunucuda yanlışlıkla yapılmış geçici yazmaları veya uyumsuz snapshot’ları geri sararak (rollback) kaynak ile birebir senkronizasyonu zorlar.

2. Ağ ve Disk Darboğazını Aşmak: SSH Cipher Seçimi ve mbuffer Mimarisi
Standart bir boru hattında (zfs send | ssh ... zfs receive), zfs send okuduğu veriyi ağa basar ve zfs receive diske yazıp onay dönene kadar bekler. Ağdaki anlık gecikmeler veya hedef NVMe/HDD havuzundaki anlık yazma dalgalanmaları, tüm akışı dur-kalk (sawtooth) döngüsüne sokar.
Bu darboğazı çözmek için hem gönderen hem de alan tarafta RAM tabanlı halka tampon (mbuffer) kullanmalı ve SSH’ın ağır şifreleme algoritmalarını donanım hızlandırmalı AES-NI ([email protected]) ile değiştirmeliyiz:

[Kaynak ZFS Pool] ──> zfs send ──> [Kaynak mbuffer (1GB RAM)] ──> SSH (AES-128-GCM) ──> [Hedef mbuffer (1GB RAM)] ──> zfs receive ──> [DR ZFS Pool]

Yüksek Hızlı Manuel Replikasyon Komutu Örneği:

reklam
# 10GbE / 25GbE hatlarda maksimum aktarım hızı için optimize edilmiş zincir:
zfs send -w -I rpool/data/vm-102-disk-0@snap_0800 rpool/data/vm-102-disk-0@snap_0900 | \
mbuffer -q -s 128k -m 1G | \
ssh -c [email protected] -o Compression=no [email protected] \
"mbuffer -q -s 128k -m 1G | zfs receive -F drpool/replicas/vm-102-disk-0"
  • -c [email protected]: Modern Intel Xeon ve AMD EPYC işlemcilerdeki donanımsal AES-NI komut setini kullanarak SSH şifrelemesini tek çekirdekte 15+ Gbps hızlarına çıkarır.
  • -o Compression=no: ZFS blokları zaten LZ4 veya ZSTD ile sıkıştırılmış olduğundan SSH katmanında tekrar sıkıştırma yapmayı kapatarak CPU döngülerini korur.
  • mbuffer -s 128k -m 1G: ZFS’in varsayılan recordsize (128K) değerine hizalanmış 1 GB’lık bellek tamponu açarak ağ ile disk arasındaki hız farklarını emer.

3. Kurumsal Otomasyon: Sanoid ve Syncoid Mimarisi
El ile yazılan cron betikleri; snapshot silme kuralları (retention), ağ kopması sonrası yarım kalan aktarımlar ve zaman aşımı yönetiminde zamanla bakım kabusuna dönüşür. Açık kaynaklı Sanoid (Politika tabanlı snapshot yaşam döngüsü yöneticisi) ve Syncoid (Akıllı replikasyon motoru) bu süreci kurumsal bir felaket kurtarma orkestratörüne dönüştürür.
Adım 1: Kurulum (Proxmox VE / Debian / Ubuntu)
Her iki sunucuda da (Primary ve DR) gerekli paketleri kuralım:

sudo apt update && sudo apt install -y sanoid mbuffer lzop pv zstd

Adım 2: Sanoid ile Yaşam Döngüsü Politikası (/etc/sanoid/sanoid.conf)
Sanoid, bildirim tabanlı (declarative) bir yapılandırma dosyası kullanır. Örneğin kritik üretim sanal makinelerimiz için saatlik, günlük ve aylık saklama kuralları tanımlayalım:

# /etc/sanoid/sanoid.conf

[rpool/data]

use_template = production_vms
recursive = yes
# Proxmox’ta her VM diski (vm-100-disk-0 vb.) ayrı bir dataset/zvol olduğu için recursive = yes şarttır!

#############################
# Şablon Tanımları (Templates)
#############################

[template_production_vms]

frequently = 4 # Her 15 dakikada bir alınan son 4 snapshot’ı tut (1 saatlik ince RPO)
hourly = 24 # Son 24 saatlik snapshot’ı tut
daily = 14 # Son 14 günlük snapshot’ı tut
monthly = 3 # Son 3 aylık snapshot’ı tut
yearly = 0
autosnap = yes # Otomatik snapshot al
autoprune = yes # Süresi dolan eski snapshot’ları otomatik temizle

Adım 3: DR Sunucusu İçin Farklı Saklama Politikası (Immutable / Uzun Süreli Arşiv)
DR sunucusunda autosnap = no (çünkü snapshot’ları kendisi üretmeyecek, Primary’den alacak) ancak autoprune = yes ve daha uzun saklama süreleri (daily = 30, monthly = 6) tanımlayarak Primary sunucuda yaşanabilecek bir silme hatasına veya fidye yazılımına (Ransomware) karşı geçmişe dönük derin koruma sağlayabilirsiniz.
Adım 4: Syncoid ile Kesintisiz ve Hızlandırılmış Replikasyon
Syncoid; arka planda ortak snapshot’ları otomatik bulur, arada kaçırılmış saatler varsa hepsini sırayla aktarır, mbuffer ve zstd sıkıştırmasını otomatik devreye sokar ve kesinti durumunda kaldığı yerden devam eder (resume token desteği).
Primary veya DR sunucusunda (Pull veya Push mimarisine göre) çalıştırılacak tek satırlık Syncoid komutu:

# Primary'den (10.100.10.11) DR sunucusuna (10.200.50.10) tüm VM disklerini artımlı olarak çoğalt:
/usr/sbin/syncoid \
--recursive \
--sendoptions="w" \
--recvoptions="F" \
--compress=none \
--mbuffer-size=1G \
[email protected] \
rpool/data [email protected]:drpool/proxmox_dr
  • Pull Mimarisinin Güvenlik Avantajı: Komutu Primary yerine DR sunucusundan (syncoid root@primary:rpool/data drpool/proxmox_dr) çalıştırırsanız, Primary sunucunun DR sunucusuna SSH root erişimi olmasına gerek kalmaz! Primary sunucu ele geçirilse dahi saldırgan DR sunucusuna bağlanıp yedekleri silemez.

4. Proxmox VE Özelinde Felaket Anı (Failover) Kurtarma Adımları
Primary Proxmox sunucunuz tamamen devre dışı kaldığında, DR sunucusundaki drpool/proxmox_dr altında tüm VM ZVOL diskleriniz saniyeler içinde ayağa kalkmaya hazırdır:

  1. Snapshot Kilidini Kaldırın / Son Duruma Çekin: Syncoid en son snapshot’ı zaten diske uygulamıştır.
  2. Proxmox VM Konfigürasyonunu Bağlayın: Primary sunucudaki /etc/pve/qemu-server/*.conf dosyalarını basit bir rsync veya Git reposuyla DR sunucusuna yedekliyorsanız, ilgili VM konfigürasyonundaki disk yolunu drpool/proxmox_dr olarak güncelleyip VM’i başlatmanız yeterlidir:
# DR Proxmox sunucusunda kopyalanan VM konfigürasyonunu devreye al ve sanal makineyi başlat
qm rescan
qm start 102
reklam