Backup & Disaster Recovery

1. Veeam B&R Architecture — Proxy, Repository & Transport Mode

Thiết kế đúng kiến trúc Veeam từ đầu giúp đạt RPO target và tránh bottleneck backup window.

### TOPOLOGY — Veeam B&R Enterprise Architecture

  ┌─────────────────────────────────────────────────────────────────┐
  │                    VEEAM BACKUP & REPLICATION SERVER             │
  │   veeam-mgr.hoatranlab.io.local  (8 vCPU, 32 GB RAM)              │
  │   ┌──────────────────────┐  ┌──────────────────────────────┐   │
  │   │  BACKUP PROXY × 2    │  │  BACKUP REPOSITORY           │   │
  │   │  proxy-01 (VMware)   │  │  repo-01: NFS 40TB (primary) │   │
  │   │  proxy-02 (VMware)   │  │  repo-02: S3 Object (offsite)│   │
  │   │  Virtual Appliance   │  │  Scale-out Backup Repository │   │
  │   │  Transport Mode      │  │  (SOBR: tiering auto)        │   │
  │   └──────────────────────┘  └──────────────────────────────┘   │
  │              ↑ VADP (vStorage APIs for Data Protection)          │
  │   ┌──────────────────────────────────────────────────────────┐  │
  │   │  ESXi Cluster  │  vCenter  │  Veeam ONE (monitoring)    │  │
  │   └──────────────────────────────────────────────────────────┘  │
  └─────────────────────────────────────────────────────────────────┘

Transport Modes (ưu tiên theo thứ tự):
  1. Direct SAN Access            → Proxy kết nối trực tiếp SAN — nhanh nhất, FC/iSCSI
  2. HotAdd (Virtual Appliance)   → Proxy là VM trên cùng ESXi host — yêu cầu ESXi direct access
  3. Network (NBD)                → Qua VMkernel network — fallback, mọi môi trường

2. Backup Job Policy theo RPO Tier — Gold / Silver / Bronze

Phân loại workload theo SLA tier và cấu hình Veeam job tương ứng — không áp dụng 1 policy cho tất cả VM.

### Cấu hình Veeam Job — Gold Tier (PowerShell Veeam API)
# Tạo backup job cho Gold tier VMs

Add-VBRViBackupJob -Name "GOLD-Core-Banking-Backup" `
  -Entity (Find-VBRViEntity -VMsandTemplates -Name "WINDB-BANKING-PRD-*") `
  -BackupRepository (Get-VBRBackupRepository -Name "repo-primary") `
  -JobOptions (New-VBRJobOptions -BackupStorageOptions `
    (New-VBRBackupStorageOptions -RetainCycles 30 -EnableDeduplication $true `
                                  -CompressionLevel Optimal))

# Cấu hình retention GFS (Grandfather-Father-Son)
# Settings → Backup → Retention → Keep certain full backups longer: Weekly/Monthly/Yearly

3. Replication Job cho DR Site — Cấu hình & Failover

Veeam Replication tạo VM replica tại DR site, cho phép failover nhanh khi production site gặp sự cố — không cần SRM license.

### Cấu hình Replication Job — Gold Tier VMs

# Veeam Console → Jobs → Replication → New Replication Job
#
# Source:       Production VMs (GOLD tier tag)
# Destination:  DR site vCenter (vcsa-dr.lab.local)
# Datastore:    ds-dr-prod-ssd
# Network:      Remapped: VLAN-100-Prod → VLAN-200-DR
# Restore points: 7 (giữ 7 bản replica)
# Schedule:     Every 15 minutes (RPO = 15 min)
# Seeding:      Full backup + incremental (WAN-optimized)

### Kiểm tra Replication Status
# Veeam Console → Replicas → Ready → xem lag time
# Target: replication lag < 5 phút
# Alert nếu lag > RPO threshold

### Thực hiện Failover (khi production DOWN)
# 1. Replicas → Right-click VM → Failover Now
# 2. Chọn restore point gần nhất
# 3. Veeam tự power on replica VM tại DR site
# 4. Update DNS/load balancer trỏ về DR IP
# Estimated time: 5-10 phút per VM

### Failback về Production (sau khi fix production)
# 1. Veeam → Failback to production
# 2. Chọn: từ replica → sync về production datastore
# 3. Commit failback → production VM tiếp quản

4. Instant Recovery Workflow — RTO trong vài phút

Instant Recovery cho phép khởi động VM trực tiếp từ backup file — không cần chờ restore đầy đủ. RTO: 2-5 phút thay vì 1-2 giờ.

### Instant Recovery — Quy trình thực tế

BƯỚC 1: Khởi động Instant Recovery
  Veeam Console → Backups → Right-click VM → Instant Recovery
  → Chọn restore point (gần nhất hoặc theo yêu cầu)
  → Target: cùng hoặc khác vCenter/datastore
  → Veeam mount backup file làm NFS datastore tạm thời
  → VM được power on trong vòng 2-3 phút

BƯỚC 2: Verify & Test
  → Kiểm tra VM boot thành công, app lên OK
  → Test connectivity: DB, DNS, app endpoint
  → Nếu OK → bắt đầu migrate về permanent storage

BƯỚC 3: Storage vMotion về Production Datastore
  Veeam: "Migration Wizard" → Migrate VM sang ds-prod
  Hoặc: vSphere Storage vMotion manual trong khi VM đang chạy
  → Quá trình diễn ra nền, VM không bị downtime

BƯỚC 4: Finalize (khi migration xong)
  → Veeam: "Stop Publishing" backup NFS mount
  → Cleanup: xóa NFS mount point tạm thời
  → Ghi log: thời gian recovery, restore point dùng, actual RTO

5. Veeam ONE — Monitoring & Alarm Integration

Veeam ONE cung cấp visibility toàn diện cho cả VMware infrastructure và backup jobs — dashboard, capacity planning và alerting tập trung.

### PowerShell — Kiểm tra SLA Compliance tất cả VMs
Connect-VBRServer -Server veeam-mgr.hoatranlab.io.local

# Tìm tất cả VMs không có backup trong 25 giờ
$cutoff = (Get-Date).AddHours(-25)
$vmsWithoutBackup = Get-VBRBackup | Get-VBRRestorePoint |
    Where-Object { $_.CreationTime -lt $cutoff } |
    Select-Object VMName, CreationTime, @{N='Lag(h)';E={[math]::Round(((Get-Date)-$_.CreationTime).TotalHours,1)}} |
    Sort-Object 'Lag(h)' -Descending

$vmsWithoutBackup | Format-Table -AutoSize
# Export báo cáo
$vmsWithoutBackup | Export-Csv "C:\Reports\SLA-$(Get-Date -f yyyyMMdd).csv"

6. SLA Compliance Reporting & Checklist Production

Báo cáo SLA hàng tuần/tháng gửi lên management — kết hợp checklist vận hành để không bỏ sót việc quan trọng.