# Trong VBR Console:
# Main Menu (☰) → Configuration Backup → Enable

Cấu hình như sau:
├─ Enable automatic configuration backup: ✅ TẮT (check)
├─ Backup folder: D:\VeeamConfigBackup\  (ổ đĩa riêng, không phải C:\)
├─ Restore points to keep: 10
├─ Schedule:
│   ├─ Daily at: 02:00 AM
│   └─ Run on: Every day
├─ Encryption:
│   ├─ Enable backup file encryption: ✅ TẮT (check)
│   └─ Password: [tạo password mạnh, lưu vào KeePass]
└─ Click OK để lưu

# Hoặc dùng PowerShell:
Set-VBRConfigurationBackupJob `
    -Enabled $true `
    -Target "D:\VeeamConfigBackup" `
    -RestorePointsToKeep 10 `
    -EncryptionEnabled $true `
    -EncryptionPassword (ConvertTo-SecureString "P@ssw0rd123!" -AsPlainText -Force)

# Trong VBR Console: Main Menu → Configuration Backup → Backup Now
# Hoặc PowerShell:
Start-VBRConfigurationBackup

# Kiểm tra file được tạo:
Get-ChildItem "D:\VeeamConfigBackup\" | Sort-Object LastWriteTime -Descending

# Xem chi tiết file .bco:
Get-VBRConfigurationBackup | Select-Object -First 5 | Format-List *

# BƯỚC 3A: Mô phỏng thảm họa - xóa/corrupt database
# (Trong lab: chỉ đổi tên DB để simulate)
Stop-Service -Name "VeeamBackupSvc" -Force
Stop-Service -Name "VeeamBrokerSvc" -Force
Stop-Service -Name "VeeamMountSvc" -Force

# Đổi tên DB để simulate corrupt:
Rename-Item "C:\Program Files\Veeam\Backup and Replication\Backup\VeeamBackup.mdf" `
            "VeeamBackup.mdf.BROKEN"

Write-Host "=== Disaster Simulated === Veeam DB is now unavailable"

# BƯỚC 3B: Restore từ Configuration Backup
# Mở Veeam Backup & Replication console
# → Main Menu → Configuration Restore
# → Browse đến file .bco
# → Nhập encryption password
# → Select components: All (Jobs, Repos, Credentials, Settings)
# → Start Restore

# PowerShell method:
Restore-VBRConfiguration `
    -Path "D:\VeeamConfigBackup\VeeamConfigBackup-2026-05-02-10-15-00.bco" `
    -Password (ConvertTo-SecureString "P@ssw0rd123!" -AsPlainText -Force) `
    -RestoreJobs $true `
    -RestoreRepositories $true `
    -RestoreCredentials $true

# Kiểm tra jobs đã được restore:
Get-VBRJob | Select-Object Name, JobType, IsScheduleEnabled | Format-Table -AutoSize

# Kiểm tra repositories:
Get-VBRBackupRepository | Select-Object Name, Path, IsAvailable | Format-Table

# Kiểm tra credentials:
Get-VBRCredentials | Select-Object Name, Type, UserName | Format-Table

# Test kết nối đến repositories:
Get-VBRBackupRepository | ForEach-Object {
    $test = Test-VBRRepositoryConnectivity -Repository $_
    Write-Host "$($_.Name): $($test.Status)"
}

# Chạy thử 1 job để xác nhận hoạt động bình thường:
Get-VBRJob -Name "Daily-Backup-Lab" | Start-VBRJob

# === Cấu hình tối thiểu Secondary Server ===
Hostname:       VBR-NODE2
OS:             Windows Server 2022 Datacenter
CPU:            8 cores (giống Primary)
RAM:            32 GB (giống Primary)
Disk C:         100 GB (OS + Veeam install)
Disk D:         200 GB (local staging)
Network NIC1:   Production network (192.168.1.x/24)
Network NIC2:   Heartbeat network (10.10.10.x/24) ← RIÊNG BIỆT!

# Join domain (quan trọng cho Kerberos auth):
Add-Computer -DomainName "corp.local" `
             -Credential (Get-Credential) `
             -OUPath "OU=Servers,DC=corp,DC=local"
Restart-Computer

# Cài SQL Server 2019 Express (hoặc dùng shared SQL):
# Download SQL Server 2019 Express
.\SQLEXPR_x64_ENU.exe /Q /IACCEPTSQLSERVERLICENSETERMS `
    /ACTION=Install /FEATURES=SQLEngine `
    /INSTANCENAME=VEEAMSQL2019 `
    /SQLSYSADMINACCOUNTS="CORP\VeeamAdmins" `
    /TCPENABLED=1

# Mở firewall cho Veeam:
New-NetFirewallRule -DisplayName "Veeam Ports" -Direction Inbound `
    -Protocol TCP -LocalPort 9392,9393,9394,9395,2500-3300 `
    -Action Allow

# Copy installer từ Primary (hoặc mount ISO):
# \\VBR-NODE1\C$\Install\VeeamBackup&Replication_12.x.x.iso

# Silent install với các tham số:
.\Setup.exe /silent /accepteula /acceptthirdpartylicenses `
    /installdir:"C:\Program Files\Veeam" `
    /vbrservice_user:"CORP\veeam-svc" `
    /vbrservice_password:"SvcP@ss2024!" `
    /sqlserver:"VBR-NODE2\VEEAMSQL2019" `
    /sqldatabase:"VeeamBackup" `
    /create_db

# Theo dõi tiến trình install:
Get-Content "C:\ProgramData\Veeam\Setup\Logs\VBR_setup_*.log" -Wait -Tail 20

# Sau khi cài xong, verify services:
Get-Service -Name "Veeam*" | Select-Object Name, Status, StartType

# === Trên PRIMARY NODE (VBR-NODE1) ===
# Cài đặt Veeam HA feature:
Import-Module VeeamPowerShell

# Tạo HA cluster với secondary node:
New-VBRHACluster `
    -PrimaryServer "VBR-NODE1" `
    -SecondaryServer "VBR-NODE2" `
    -HeartbeatNetwork "10.10.10.0/24" `
    -HeartbeatInterval 10 `
    -SharedStoragePath "\\SAN01\VeeamShared" `
    -VirtualIP "192.168.1.100" `
    -SubnetMask "255.255.255.0"

# Cấu hình heartbeat network (NIC2 trên cả hai node):
# VBR-NODE1 NIC2: 10.10.10.1/24
# VBR-NODE2 NIC2: 10.10.10.2/24

# Kiểm tra kết nối heartbeat:
Test-NetConnection -ComputerName "10.10.10.2" -Port 9395

# Cấu hình điều kiện kích hoạt failover tự động:
Set-VBRHAFailoverPolicy `
    -HeartbeatTimeoutSec 60 `
    -ServiceMonitoring $true `
    -MonitoredServices @("VeeamBackupSvc","VeeamBrokerSvc") `
    -MaxServiceRestartAttempts 3 `
    -ServiceRestartIntervalSec 30 `
    -SQLMonitoring $true `
    -SQLTimeoutSec 45 `
    -AutoFailover $true `
    -NotifyEmail "[email protected]"

# Xem lại cấu hình đã set:
Get-VBRHAFailoverPolicy | Format-List *

# Kiểm tra trạng thái toàn bộ cluster:
Get-VBRHANode | Format-Table -AutoSize

# Chi tiết từng node:
Get-VBRHANode | ForEach-Object {
    Write-Host "=== $($_.Name) ==="
    Write-Host "  Role:         $($_.Role)"
    Write-Host "  Status:       $($_.Status)"
    Write-Host "  Services:     $($_.ServicesStatus)"
    Write-Host "  Last Hrtbeat: $($_.LastHeartbeat)"
    Write-Host "  DB Sync:      $($_.DatabaseSyncStatus)"
}

# Kiểm tra Virtual IP:
Resolve-DnsName "vbr-cluster.corp.local" | Select-Object Name, IPAddress

# Verify backup jobs vẫn hiển thị đúng:
Get-VBRJob | Measure-Object | Select-Object Count

# === Bắt đầu theo dõi (chạy trên CLIENT machine) ===
# Mở terminal riêng để liên tục ping VIP:
ping -t 192.168.1.100

# === Thực hiện Planned Switchover (từ VBR Console) ===
# VBR Console → Infrastructure → Backup Infrastructure
# → HA Cluster → Right-click → Switch Active Node
# → Confirm: "Switch to VBR-NODE2"

# Hoặc PowerShell:
Invoke-VBRHASwitchover -TargetNode "VBR-NODE2" -Reason "Planned maintenance"

# Theo dõi trong real-time:
Watch-VBRHAStatus  # Refresh mỗi 5 giây

# === Chú ý: Hiện tại NODE2 đang Active (sau Test 1) ===
# Simulate crash trên NODE2 (current active):

# Dừng đột ngột VBR services (không graceful):
$services = @("VeeamBackupSvc","VeeamBrokerSvc","VeeamMountSvc")
foreach ($svc in $services) {
    Stop-Service -Name $svc -Force -ErrorAction SilentlyContinue
}
# Hoặc: kill process
Stop-Process -Name "Veeam.Backup.Service" -Force

# === Theo dõi từ NODE1 (current standby) ===
# NODE1 sẽ detect heartbeat mất và tự failover

# Monitor heartbeat detection:
Get-VBRHAHeartbeatLog | Select-Object -Last 10

# Bấm giờ từ lúc kill process đến khi VIP chuyển sang NODE1

# === NODE1 đang Active (sau Test 2) ===
# Disable NIC production trên NODE1 (giữ heartbeat NIC):
Disable-NetAdapter -Name "Ethernet" -Confirm:$false
# NIC2 (heartbeat: 10.10.10.1) vẫn UP

# NODE2 phát hiện: heartbeat còn nhưng production IP mất
# Veeam HA dùng "dead man's switch" logic:
# NODE1 biết production NIC down → tự nguyện yield

# Theo dõi từ NODE2:
Get-VBRHAStatus -Watch

# Re-enable sau khi test:
Enable-NetAdapter -Name "Ethernet" -Confirm:$false

# Simulate split-brain: cắt đứt heartbeat network (NIC2) trên cả hai
# Đây là kịch bản nguy hiểm nhất

# Trên VBR-NODE1: disable heartbeat NIC
Disable-NetAdapter -Name "Ethernet 2" -Confirm:$false

# Trên VBR-NODE2: disable heartbeat NIC
# (Chạy từ remote session khác)
Disable-NetAdapter -Name "Ethernet 2" -Confirm:$false

# Cả hai node không thấy nhau qua heartbeat
# → Mỗi node có thể nghĩ: "node kia đã chết, tôi cần lên Active"

# Veeam dùng SCSI Persistent Reservations (tiebreaker):
# Chỉ node GIÀNH ĐƯỢC shared storage lock mới được lên Active
# Node còn lại sẽ bị fence (tự shutdown VBR services)

Get-VBRHASplitBrainStatus
Get-VBRHAStorageLock | Format-List *

# Trước khi enable CDP: Cài I/O Filter trên ESXi host
# VBR Console → Inventory → VMware vSphere
# → Chọn ESXi host → Install I/O Filters

# Enable CDP qua PowerShell:
$vm = Get-VBRViEntity -Name "DB-Production-01"

# Tạo CDP Policy:
Add-VBRCDPPolicy `
    -Name "CDP-DatabaseServers" `
    -VMObject $vm `
    -TargetHost "esxi-dr-01.corp.local" `
    -TargetDatastore "DS-CDP-Replicas" `
    -RPOSeconds 15 `
    -BookmarksEnabled $true `
    -BookmarkSchedule "Every 1 Hour"

# Kích hoạt policy:
Enable-VBRCDPPolicy -Name "CDP-DatabaseServers"

# Cấu hình chi tiết hơn cho production workload:
Set-VBRCDPPolicy -Name "CDP-DatabaseServers" `
    -Throttle 50 `
    -ThrottleUnit Percent `
    -NetworkThrottleMbps 100 `
    -CompressionLevel Optimal `
    -EncryptionEnabled $true

# Kiểm tra I/O Filter đang hoạt động trên VM:
Get-VBRCDPVMStatus -VMName "DB-Production-01"

# Xem bandwidth đang dùng:
Get-VBRCDPStats -PolicyName "CDP-DatabaseServers" -Last 1Hour

# Dashboard CDP trong VBR Console:
# Home → CDP Replicas → chọn "DB-Production-01_replica"

# PowerShell monitoring:
while ($true) {
    $status = Get-VBRCDPReplicaState -VMName "DB-Production-01"
    $timestamp = Get-Date -Format "HH:mm:ss"
    Write-Host "$timestamp | RPO: $($status.CurrentRPO)s | Lag: $($status.ReplicationLag)ms | State: $($status.State)"
    Start-Sleep -Seconds 5
}

# Check replica VM trên DR site:
Get-VBRCDPReplica -VMName "DB-Production-01" | Format-List *

# Xem lịch sử bookmark để restore point-in-time:
Get-VBRCDPBookmark -PolicyName "CDP-DatabaseServers" | Format-Table Time, Type, Description

# Bước 4A: Ghi dấu thời gian trước khi failover
$beforeFailover = Get-Date
Write-Host "Failover initiated at: $beforeFailover"

# Bước 4B: Tạo dữ liệu test (mô phỏng transaction đang chạy)
# (Giả sử đây là SQL Server)
Invoke-Sqlcmd -ServerInstance "DB-Production-01" `
    -Query "INSERT INTO TestTable VALUES ('Test-$(Get-Date)', 'pre-failover')"

# Bước 4C: Thực hiện CDP Failover
Start-VBRCDPFailover `
    -VMName "DB-Production-01" `
    -TargetPoint Latest `
    -Reason "Testing CDP failover - lab exercise"

# Theo dõi tiến trình:
Get-VBRCDPFailoverStatus -VMName "DB-Production-01" -Watch

# Bước 4D: Verify trên DR site - replica VM đã boot
# Kết nối đến replica và kiểm tra dữ liệu:
$afterFailover = Get-Date
$rto = ($afterFailover - $beforeFailover).TotalSeconds
Write-Host "Actual RTO: $rto seconds"