DRS & Resource Pools + Fault Tolerance

1. DRS Cluster Design — Threshold & Migration Sensitivity

DRS migration threshold quyết định mức độ "mất cân bằng" nào sẽ trigger vMotion tự động. Quá thấp = vMotion liên tục gây overhead; quá cao = cluster mất cân bằng.

### PowerCLI — Cấu hình DRS Cluster Production
Connect-VIServer vcsa-01.lab.local

# Fully Automated, Moderate threshold (level 3)
Set-Cluster "CL-HN-Prod-01" `
    -DrsEnabled $true `
    -DrsAutomationLevel FullyAutomated `
    -DrsNeedVMForBalancing $false `
    -Confirm:$false

# Set per-VM DRS automation level (override cluster setting)
# VM database quan trọng: Manual (không bị DRS move tự động)
$dbVM = Get-VM "WINDB-ERP-PRD-01"
$spec = New-Object VMware.Vim.VirtualMachineConfigSpec
$spec.ManagedBy = $null
($dbVM | Get-View).ReconfigVM_Task($spec)

# Set VM-level DRS override: PartiallyAutomated (recommend but not auto)
$clusterSpec = New-Object VMware.Vim.ClusterConfigSpecEx
$vmOverride  = New-Object VMware.Vim.ClusterDrsVmConfigSpec
$vmOverride.Operation = "edit"
$vmOverride.Info = New-Object VMware.Vim.ClusterDrsVmConfig
$vmOverride.Info.Key = $dbVM.Id
$vmOverride.Info.Behavior = "manual"
$clusterSpec.DrsVmConfigSpec = @($vmOverride)
(Get-Cluster "CL-HN-Prod-01" | Get-View).ReconfigureComputeResource_Task($clusterSpec, $true)

2. Affinity / Anti-Affinity Rules — Enterprise Workloads

Rules đảm bảo VMs quan trọng không chạy cùng host (anti-affinity) hoặc luôn chạy gần nhau (affinity) theo yêu cầu kiến trúc.

### PowerCLI — Tạo Anti-Affinity Rule cho SQL AlwaysOn AG
$cluster = Get-Cluster "CL-HN-Prod-01"

# Anti-affinity: SQL-Primary và SQL-Secondary không được cùng host
$sqlPrimary   = Get-VM "WINSQL-ERP-PRD-01"
$sqlSecondary = Get-VM "WINSQL-ERP-PRD-02"

New-DrsRule -Cluster $cluster `
    -Name "AntiAffinity-SQL-AlwaysOn-ERP" `
    -KeepTogether $false `
    -VM $sqlPrimary, $sqlSecondary `
    -Enabled $true `
    -Mandatory $true

# Affinity: Web + Cache chạy cùng host (latency optimization)
$webVM   = Get-VM "LNXWEB-PORTAL-PRD-01"
$cacheVM = Get-VM "LNXCACHE-REDIS-PRD-01"

New-DrsRule -Cluster $cluster `
    -Name "Affinity-WebApp-Redis-Portal" `
    -KeepTogether $true `
    -VM $webVM, $cacheVM `
    -Enabled $true `
    -Mandatory $false   # Should (preferred) không bắt buộc

# Xem tất cả DRS rules
Get-DrsRule -Cluster $cluster | Select-Object Name, Type, Enabled, Mandatory, VMIds

3. Resource Pool Hierarchy — Phân Bổ Theo Phòng Ban & Môi Trường

Resource Pool tạo ra "quota" CPU/RAM cho từng phòng ban hoặc môi trường — ngăn một team chiếm toàn bộ cluster resource. Shares values: High = 4000, Normal = 2000, Low = 500 (áp dụng cho cả CPU và Memory).

### TOPOLOGY — Resource Pool Hierarchy (doanh nghiệp 500+ VMs)

  Cluster: CL-HN-Prod-01  (Total: 200 GHz CPU, 1.5 TB RAM)
  │
  ├── RP-PROD-Tier1  (Shares: High, Reservation: 40 GHz CPU / 400 GB RAM)
  │   ├── RP-PROD-ERP      (SAP, Oracle — high priority, reservation)
  │   └── RP-PROD-Finance  (Fintech, banking apps)
  │
  ├── RP-PROD-Tier2  (Shares: Normal, Reservation: 20 GHz / 200 GB)
  │   ├── RP-PROD-CRM      (Salesforce connector, CRM apps)
  │   └── RP-PROD-Web      (Web tier, load balancers)
  │
  ├── RP-STAGING   (Shares: Normal, No reservation, Limit: 30 GHz / 200 GB)
  │   └── (pre-prod testing environment)
  │
  └── RP-DEV       (Shares: Low, No reservation, Limit: 20 GHz / 100 GB)
      ├── RP-DEV-Team-A
      └── RP-DEV-Team-B

### PowerCLI — Tạo Resource Pool Hierarchy
$cluster = Get-Cluster "CL-HN-Prod-01"

# Tier 1 Production Pool
$rpProdT1 = New-ResourcePool -Location $cluster -Name "RP-PROD-Tier1" `
    -CpuSharesLevel High -MemSharesLevel High `
    -CpuReservationMHz 40000 -MemReservationMB 409600 `
    -CpuExpandableReservation $false -MemExpandableReservation $false

# Sub-pool ERP dưới Tier1
New-ResourcePool -Location $rpProdT1 -Name "RP-PROD-ERP" `
    -CpuSharesLevel High -MemSharesLevel High `
    -CpuReservationMHz 20000 -MemReservationMB 204800

# Dev Pool với limit (ceiling) để ngăn chiếm quá nhiều
$rpDev = New-ResourcePool -Location $cluster -Name "RP-DEV" `
    -CpuSharesLevel Low -MemSharesLevel Low `
    -CpuLimitMHz 20000 -MemLimitMB 102400   # Limit = hard cap

4. NUMA-Aware Scheduling — Tối Ưu Database & HPC Workloads

NUMA (Non-Uniform Memory Access) ảnh hưởng trực tiếp đến performance của database và in-memory workloads. ESXi có NUMA-aware scheduler nhưng cần cấu hình đúng.

### Kiểm tra NUMA topology của ESXi host
# SSH vào ESXi host:
esxcli hardware numa get
# Output ví dụ (dual-socket, 28 cores/socket, 512 GB RAM/socket):
# NUMA Node 0: Cores 0-27,  Memory 524288 MB
# NUMA Node 1: Cores 28-55, Memory 524288 MB

# Kiểm tra VM NUMA placement (vCPU/vRAM phải trong 1 node)
# Nếu VM cần 24 vCPU + 384 GB RAM → phù hợp 1 node (28 cores, 512 GB)
# Nếu VM cần 32 vCPU + 512 GB RAM → span 2 nodes → cân nhắc resize

### PowerCLI — Bật NUMA affinity cho VM Database
$vm = Get-VM "WINDB-SAP-HANA-PRD-01"
$spec = New-Object VMware.Vim.VirtualMachineConfigSpec
$spec.NumaInfo = New-Object VMware.Vim.VirtualMachineVirtualNumaInfo
$spec.NumaInfo.AutoCoresPerNumaNode = $false
$spec.NumaInfo.CoresPerNumaNode = 28  # = 1 physical NUMA node
($vm | Get-View).ReconfigVM_Task($spec)

# Monitor NUMA stats trong vROps:
# VM → Metrics → Guest Memory → NUMA Remote memory (%)
# Alert nếu NUMA Remote > 20% — dấu hiệu VM span 2 NUMA nodes

5. DRS Automation Level Per VM Criticality

Không phải tất cả VMs đều cần DRS mức độ như nhau — phân loại theo SLA tier để tối ưu giữa automation và control.

6. Capacity Planning với DRS Stats & vROps

DRS migration history và cluster utilization stats là dữ liệu quan trọng để lên kế hoạch mua host mới đúng thời điểm.

### PowerCLI — Cluster Capacity Report (hàng tuần)
Connect-VIServer vcsa-01.lab.local

$clusters = Get-Cluster
foreach ($cluster in $clusters) {
    $hosts = $cluster | Get-VMHost
    $totalCPU   = ($hosts | Measure-Object -Property CpuTotalMhz -Sum).Sum
    $usedCPU    = ($hosts | Measure-Object -Property CpuUsageMhz -Sum).Sum
    $totalMemGB = ($hosts | Measure-Object -Property MemoryTotalGB -Sum).Sum
    $usedMemGB  = ($hosts | Measure-Object -Property MemoryUsageGB -Sum).Sum

    $cpuPct = [math]::Round(($usedCPU / $totalCPU) * 100, 1)
    $memPct = [math]::Round(($usedMemGB / $totalMemGB) * 100, 1)

    # N+1 capacity (exclude 1 host)
    $n1CPU = $totalCPU - ($hosts | Sort-Object CpuTotalMhz -Descending | Select-Object -First 1).CpuTotalMhz
    $cpuN1Pct = [math]::Round(($usedCPU / $n1CPU) * 100, 1)

    [PSCustomObject]@{
        Cluster    = $cluster.Name
        Hosts      = $hosts.Count
        "CPU%"     = "$cpuPct%"
        "CPU N+1%" = "$cpuN1Pct%"
        "MEM%"     = "$memPct%"
        VMs        = ($cluster | Get-VM).Count
        Status     = if ($cpuN1Pct -gt 85 -or $memPct -gt 85) { "CẢNH BÁO — Cần thêm host" } else { "OK" }
    }
} | Format-Table -AutoSize