hypervisor-internals

Hypervisor 内部原理

目的

向 Agent 讲解硬件虚拟化的内部原理：Intel VT-x（VMXON、VMCS、VMLAUNCH/VMRESUME、VMEXIT 原因）、AMD SVM（VMCB、#VMEXIT）、扩展/嵌套页表（EPT/NPT）、APIC 虚拟化、MSR 位图、虚拟中断注入，以及构建最小化 1 类 Hypervisor 的参考资料。

适用场景

• 了解 KVM、Hyper-V 或 VMware 如何映射到硬件功能
• 调试 VMEXIT 风暴或 EPT 违规
• 研究 Hypervisor 安全（CVE 分类）
• 构建教学用 Hypervisor（SimpleVisor、hvpp）
• 调优嵌套虚拟化性能
• 分析 VM 逃逸或侧信道缓解措施

工作流

1. 虚拟化类型

Type 1 (bare metal)     Type 2 (hosted)
├── Hyper-V             ├── KVM + QEMU
├── Xen                 ├── VirtualBox
├── VMware ESXi         └── Parallels
└── Runs directly on HW     Runs on host OS

2. Intel VT-x 概述

VMX operation
├── VMXON — enter VMX root mode
├── VMCS setup — guest/host state fields
├── VMLAUNCH / VMRESUME — enter guest
├── Guest runs until VMEXIT
└── VMXOFF — exit VMX operation

关键结构：

• VMCS（虚拟机控制结构）——来宾机/主机状态、控制字段
• VMEXIT ——强制退出到 Hypervisor（I/O、MSR、EPT 故障、中断）

// Simplified VMX enable check (kernel/driver context)
#include <linux/cpufeature.h>
if (boot_cpu_has(X86_FEATURE_VMX))
    // VT-x supported

3. VMCS 字段（概念）

类别	示例
来宾机状态	GPR、CR0/3/4、段选择子、RIP、RSP
主机状态	主机 RIP（VMEXIT 处理程序）、主机 CR3
控制项	基于 Pin、基于 proc、VMEXIT/进入控制
退出信息	退出原因、限定信息、来宾机线性地址

常见 VMEXIT 原因：

Exit reason codes (Intel)
├── 10 — CPUID
├── 28 — CR access
├── 30 — I/O instruction
├── 48 — EPT violation
├── 0  — External interrupt
└── 1  — Triple fault

4. AMD SVM（AMD-V）

SVM operation
├── EFER.SVME = 1
├── VMCB setup — guest save area + control area
├── VMRUN — enter guest
├── #VMEXIT — exit to host handler
└── Guest state in VMCB

VMCB 控制区：拦截向量（CPUID、MSR、IO）、嵌套分页启用状态、ASID。

Intel	AMD
VMCS	VMCB
VMXON/VMXOFF	EFER.SVME
VMLAUNCH/VMRESUME	VMRUN
EPT	NPT（嵌套页表）

5. EPT / NPT——二级分页

Guest virtual (GVA) → Guest physical (GPA) [guest page tables]
GPA → Host physical (HPA) [EPT/NPT, managed by hypervisor]

EPT 违规会触发 VMEXIT：来宾机访问了未映射的 GPA，或违反了权限设置。

# KVM EPT stats (if available)
# Nested virtualization adds second EPT walk — perf cost

侧信道缓解措施：在 VMEXIT 时刷新 L1D（MDS）、进行缓存分区。

6. MSR 和 I/O 位图

MSR bitmap (4KB)
├── Per-MSR read/write intercept control
└── Avoid VMEXIT on common MSRs for performance

I/O bitmap
├── Intercept specific port I/O
└── Pass-through unlisted ports

Hypervisor 会拦截 MSR_IA32_FEATURE_CONTROL、MSR_IA32_EFER 等。

7. APIC 虚拟化

APIC virtualization
├── Virtual interrupt delivery — reduce VMEXIT on EOI
├── Posted interrupts — hardware-assisted injection
└── TPR shadowing — avoid exit on priority changes

降低中断密集型来宾机的开销（网络 I/O）。

8. 虚拟中断注入

Intel：通过 VM-entry 中断信息字段注入。 AMD：VMCB 中的 V_IRQ、V_INTR_PRIO。

Device interrupt → host IRQ handler → hypervisor
    → inject virtual IRQ to guest IDT
    → guest ISR runs

9. 最小化 Hypervisor 参考资料

项目	平台	说明
SimpleVisor	Windows	用于教学，代码仅数千行
hvpp	Windows	C++ Hypervisor 库
kvmm	Linux	用于学习 KVM 的最小实现
barevisor	x86_64	Rust/ASM 教学项目

学习路径：

1. 检测 CPUID 并启用 VMX
2. 分配 VMCS，设置主机/来宾机状态
3. 处理 CPUID 和 HLT 的 VMEXIT
4. 添加采用恒等映射的 EPT
5. 注入中断

10. KVM ioctl 接口（实践）

// Userspace KVM (how QEMU talks to KVM)
int kvm = open("/dev/kvm", O_RDWR);
int vm = ioctl(kvm, KVM_CREATE_VM, 0);
int vcpu = ioctl(vm, KVM_CREATE_VCPU, 0);
ioctl(vcpu, KVM_RUN, 0);  // runs until VMEXIT

常见问题

症状	原因	修复方法
MSR 引发 VMEXIT 风暴	MSR 位图拦截了所有访问	精细调整位图；对安全的 MSR 采用直通
EPT 配置错误	GPA→HPA 映射不匹配	检查 EPT PTE 权限
嵌套虚拟化缓慢	双重页表遍历	使用硬件辅助；限制嵌套深度
VMXON 失败	CR0/CR4 固定位	按照 Intel SDM 设置所需的 CR 位
来宾机发生三重故障	IDT 错误或异常未处理	检查来宾机中断设置
I/O 拦截开销过高	所有端口都被拦截	缩小 I/O 位图

相关技能

• skills/virtualization/qemu-kvm — KVM/QEMU 实践用法
• skills/virtualization/containers-internals — 无需完整 VM 的轻量级隔离
• skills/kernel/kernel-internals — 主机内核调度器/内存
• skills/kernel/os-dev-scratch — 来宾 OS 开发背景
• skills/security/kernel-security — Hypervisor CVE 缓解措施
• skills/platform/riscv-privileged — RISC-V H 扩展虚拟化