VM Management, Templates & Snapshots

1. VM Template Library Design — Content Library Architecture

Thiết kế Content Library tập trung cho phép tất cả sites dùng chung golden images — đảm bảo đồng nhất và giảm bandwidth transfer.

### TOPOLOGY — Content Library Multi-Site

  ┌─────────────────────────────────────────────────────────────┐
  │                 Content Library Architecture                 │
  │                                                             │
  │  vCenter HÀ NỘI (Primary)                                  │
  │  ┌───────────────────────────────────────────────┐         │
  │  │  CL-Publisher-HN (Published Library)           │         │
  │  │  DS: DS-NFS41-Templates-HN-01 (1 TB)          │         │
  │  │  Content:                                      │         │
  │  │    tmpl-ubuntu2404-base-v2.2    (OVF)          │         │
  │  │    tmpl-rhel9-base-v1.5         (OVF)          │         │
  │  │    tmpl-windows2022-base-v1.3   (OVF)          │         │
  │  │    ova-packer-ubuntu-golden     (OVA)          │         │
  │  └───────────────────────────────────────────────┘         │
  │            ↓ Auto-Sync (HTTPS, scheduled daily)            │
  │  vCenter HỒ CHÍ MINH (Subscriber)                          │
  │  ┌───────────────────────────────────────────────┐         │
  │  │  CL-Subscriber-HCM (Subscribed Library)        │         │
  │  │  On-demand download khi deploy                 │         │
  │  └───────────────────────────────────────────────┘         │
  └─────────────────────────────────────────────────────────────┘

### Template Naming Convention:
  tmpl-[OS]-[role]-v[major].[minor]
  tmpl-ubuntu2404-base-v2.2
  tmpl-rhel9-webserver-v1.0
  tmpl-windows2022-adfs-v1.1

2. OVF/OVA Deployment Automation — Packer + PowerCLI

Quy trình tạo golden image tự động hóa hoàn toàn — mỗi tháng tạo template mới có patches mới nhất mà không can thiệp thủ công.

### PowerCLI — Deploy VM từ Template với customization
Connect-VIServer vcsa-hn-prod.hoatranlab.io.local

# 1. Lấy template từ Content Library
$template = Get-ContentLibraryItem -Name "tmpl-ubuntu2404-base-v2.2"

# 2. Tạo OS Customization Spec
$custSpec = New-OSCustomizationSpec -Name "Linux-DHCP-Spec" `
    -OSType Linux `
    -NamingScheme fixed -NamingPrefix "lnxapp-crm-prd" `
    -Domain hoatranlab.io.local `
    -DnsServer 10.100.10.53, 10.100.10.54 `
    -Type NonPersistent

# 3. Deploy VM từ template
$vm = New-VM -Name "LNXAPP-CRM-PRD-01" `
    -ContentLibraryItem $template `
    -ResourcePool (Get-ResourcePool "RP-PROD-Critical") `
    -Datastore (Get-Datastore "DS-VMFS6-iSCSI-Gold-HN-01") `
    -OSCustomizationSpec $custSpec

# 4. Đặt hardware config
$vm | Set-VM -NumCpu 4 -MemoryGB 8 -Confirm:$false

# 5. Gán vDS Port Group
$nic = $vm | Get-NetworkAdapter
$pg  = Get-VDPortgroup "DPG-VLAN100-Production"
$nic | Set-NetworkAdapter -Portgroup $pg -Confirm:$false

# 6. Power on và chờ VMware Tools ready
$vm | Start-VM
Wait-Tools -VM $vm -TimeoutSeconds 300
Write-Host "VM $($vm.Name) deployed and ready: $((Get-VM $vm.Name).Guest.IPAddress)"

### Pipeline Packer + Ansible → Golden OVA → Content Library

# .gitlab-ci.yml (hoặc GitHub Actions)
golden-image-build:
  schedule: "0 2 1 * *"   # Mỗi ngày 1 hàng tháng lúc 2AM
  script:
    - packer build ubuntu2404-base.pkr.hcl    # Build VM từ ISO
    - ansible-playbook harden-cis.yml          # CIS hardening
    - ansible-playbook install-agents.yml      # Zabbix, Qualys, etc.
    - packer post-processor convert-ovf        # Export OVA
    - govc library.import CL-Publisher-HN ./ubuntu2404-base.ova
    - slack-notify "Template tmpl-ubuntu2404-base updated"

3. VM Hardware Version Policy

Hardware version quyết định tính năng VM có thể dùng — nên chuẩn hóa toàn cluster dùng cùng version.

4. Snapshot Lifecycle Management Policy

Snapshot không phải backup — chính sách rõ ràng tránh tình huống snapshot cũ làm cạn disk và gây performance degradation.

### PowerCLI — Audit và xóa snapshots cũ (script chạy daily)
# Script: snapshot-cleanup.ps1
# Schedule: Daily 22:00 via Windows Task Scheduler hoặc GitLab CI

param([int]$MaxAgeDays = 3, [switch]$DryRun)

Connect-VIServer vcsa-hn-prod.hoatranlab.io.local -Credential (Get-Credential)

$cutoff = (Get-Date).AddDays(-$MaxAgeDays)
$oldSnaps = Get-VM | Get-Snapshot | Where {$_.Created -lt $cutoff}

foreach ($snap in $oldSnaps) {
    $age = [int]((Get-Date) - $snap.Created).TotalDays
    Write-Host "[$age days] $($snap.VM.Name) → '$($snap.Name)' created $($snap.Created)"

    if (-not $DryRun) {
        Remove-Snapshot -Snapshot $snap -Confirm:$false
        Write-Host "  Removed."
    }
}

# Gửi report qua email/Slack
$report = $oldSnaps | Select @{N="VM";E={$_.VM.Name}}, Name, @{N="Age(days)";E={[int]((Get-Date)-$_.Created).TotalDays}}, SizeGB
$report | ConvertTo-Json | Invoke-RestMethod -Uri $env:SLACK_WEBHOOK -Method POST -Body (@{text=($report | ft | Out-String)} | ConvertTo-Json)

5. VMware Tools Deployment Automation

VMware Tools phải luôn được cài và cập nhật — ảnh hưởng trực tiếp đến vMotion speed, snapshot quiescing và guest metrics.

### PowerCLI — Bulk VMware Tools Update
# Cập nhật tools cho tất cả VMs đang chạy, không power off

$vms = Get-VM | Where {$_.PowerState -eq "PoweredOn"} |
    Where {$_.Guest.ToolsVersionStatus -in "guestToolsNeedUpgrade", "guestToolsNotInstalled"}

foreach ($vm in $vms) {
    Write-Host "Updating VMware Tools: $($vm.Name) [Current: $($vm.Guest.ToolsVersion)]"

    # Update với auto-reboot cho Linux, reboot manual cho Windows
    if ($vm.Guest.OSFullName -match "Windows") {
        Update-Tools -VM $vm -NoReboot
        Write-Host "  Windows VM — schedule reboot via Change Request"
    } else {
        Update-Tools -VM $vm
        Write-Host "  Linux VM — Tools updated, no reboot required"
    }
}

### Linux: Dùng open-vm-tools (được khuyến nghị cho RHEL/Ubuntu)
# Không cần mount ISO, tự update qua OS package manager:
# Ubuntu/Debian:
apt-get install -y open-vm-tools    # hoặc open-vm-tools-desktop

# RHEL/CentOS:
dnf install -y open-vm-tools

# Tự update khi có patch OS: cài qua package manager → tự động update

6. Resource Pool Hierarchy — Tổ Chức Tài Nguyên Doanh Nghiệp

Resource Pool phân chia và ưu tiên tài nguyên CPU/Memory giữa các business units — đảm bảo SLA cho mỗi nhóm workload.

### RESOURCE POOL HIERARCHY — Enterprise Design

  Cluster-HN-Production
  ├── RP-CRITICAL          (CPU: High 4000 / Mem: High 163840)
  │   ├── RP-Database      (Oracle, SQL — Eager Zeroed vDisk)
  │   └── RP-CoreApp       (ERP, CRM production)
  ├── RP-STANDARD          (CPU: Normal 2000 / Mem: Normal 81920)
  │   ├── RP-WebApp        (Web servers, API gateways)
  │   └── RP-FileServer    (Print, File sharing)
  └── RP-DEVELOPMENT       (CPU: Low 1000 / Mem: Low 40960)
      ├── RP-Dev-TeamA     (Team A sandbox)
      └── RP-Dev-TeamB     (Team B sandbox)

### PowerCLI — Tạo Resource Pool Hierarchy
$cluster = Get-Cluster "Cluster-HN-Production"

# Critical tier
$rpCritical = New-ResourcePool -Location $cluster `
    -Name "RP-CRITICAL" `
    -CpuSharesLevel High -MemSharesLevel High `
    -CpuExpandableReservation $true `
    -MemExpandableReservation $true

# Standard tier
New-ResourcePool -Location $cluster `
    -Name "RP-STANDARD" `
    -CpuSharesLevel Normal -MemSharesLevel Normal `
    -CpuExpandableReservation $true

# Dev tier — giới hạn để không ảnh hưởng production
New-ResourcePool -Location $cluster `
    -Name "RP-DEVELOPMENT" `
    -CpuSharesLevel Low -MemSharesLevel Low `
    -CpuLimitMHz 8000 -MemLimitMB 32768    # Hard limit cho dev