PVE学习笔记

pve的特点

    免费
    内置防火墙
    网络接入灵活、支持openvswitch
    支持kvm虚拟机、linux容器 LXC
    丰富的存储插件

pve模板下载地址（国内中科大源）

    https://mirrors.ustc.edu.cn/proxmox/images/system/

功能配置文件路径

    /etc/pve/ha/resources.cfg       #ha相关的资源配置（请求状态包含四种：started、stoped、ignored、disabled最后这个是将故障vm移除ha群组）
    /etc/pve/storage.cfg            #pve存储的相关配置（支持的类型很多dir: local、lvmthin: local-lvm等等）
    /etc/vzdump.conf        #虚拟机配置程序配置文件(可以决定自动备份保留的份数)
    /etc/pve/vzdump.cron    #pve备份程序的定时任务

镜像和模板路径
    /var/lib/vz/template/iso            #pve默认iso镜像上传目录
    /var/lib/vz/template/cache          #pve默认lxc模板的保存路径
    /var/lib/vz/dump                    #pve的备份镜像 存放路径

分布式防火墙配置文件：
    /etc/pve/firewall/cluster.fw
    /etc/pve/nodes/node_name/host.fw
    /etc/pve/firewall/vm_id.fw

pve命令行工具介绍

创建pve集群

第一：在其中一台上创建集群
    pvecm create pve-cluster01
    pvecm status

第二：集群中添加节点（不能有虚拟机在上面跑，最好是干干净净的新节点）
    pvecm add 192.168.0.2
    #pvecm add 192.168.0.2 -f       #有时可能会出现莫名的东西，可以使用-f强制添加
    #/etc/hosts     #这个文件在pve中很重要，不正确可能导致 无法加入集群等问题
    #hostname --ip-address      #该命令检查本机ip是否正确（与/etc/hosts中指定的进行比较）

其他命令
    pvecm nodes                     #查看集群节点
    pvecm delnode 192.168.0.2       #删除集群节点
    pvecm help                      #查看帮助

分布式防火墙

    pve-firewall start/stop/restart/status

将lvm格式磁盘转换为qcow2磁盘（用虚拟机的ID:107来演示）

#qemu-img convert -p $INPUTDISK -c -O $FORMAT $NEWDISK     #-p 表示输入，-c压缩
#qemu-img convert -p $INPUTDISK -c -O $FORMAT -o subformat=streamOptimized $NEWDISK   #如果需要esxi导入则需要加水-o参数
qemu-img convert -p /dev/pve/vm-107-disk-0 -c -O qcow2 kvm107-system.qcow2

如何将镜像导入虚拟机

#qm importdisk <vmid> <source_disk> <storage_id>
qm importdisk 109 kvm107-system.qcow2 local-lvm     #将磁盘导入109虚拟机中（109要事先创建，并且导入后会创建一个磁盘），存储形式是lvm，local-lvm是存储ID

pve使用CLI备份和还原虚拟机

为KVM和LXC虚拟机提交备份的命令是相同的

查看存储ID
root@pve:~# cat /etc/pve/storage.cfg 
dir: local                      #其实存储就是这个  local
    path /var/lib/vz
    content iso,vztmpl,backup
zfspool: local-zfs
    pool rpool/data
    sparse
    content images,rootdir

备份(不区分KVM和LXC)
    vzdump 102 --storage local      #102是虚拟机id；不指定--mode,默认是 "停止虚拟机进行备份"

还原KVM
    qmrestore /var/lib/vz/dump/vzdump-qemu-104-2019_08_21-15_23_32.vma.gz 108   #路径 新ID（这个ID要不存在才行）

还原LXC
    pct restore new_id /var/lib/vz/dump/vzdump-qemu-104-2019_08_21-15_23_32.vma.gz

将某硬件直通（没测试过）
    qm set 100 -sata0 /dev/disk/by-id/ata-Colorful_xxxxxxxxxxxxxxxxxxx

pve迁移虚拟机过程中，操作失败如何解除锁定（命令如下）
    qm unlock <vmid>

    pveversion -V       #查看pve各个组件的版本。（包括novnc-pve、qemu-server、corosync等等）
    pveversion          #查看pve的版本

如何让pve支持嵌套虚拟化（把虚拟机cpu模式设置为host）