Category: KVM

Posted on

[排错] 解决 Linux 创建 VM 时报错 ‘blk_cloned_rq_check_limits’

报错代码：

kernel: blk_cloned_rq_check_limits: over max size limit. (65535 > 0)

分析：

SAN 存储设备需要 ’68 Support Page Reclamation for Linux bit’ 功能开启后才能实现精简配置

解决方法：

在 SAN 存储设备上开启 ’68 Support Page Reclamation for Linux bit’ 功能后执行以下命令：

$ for i in /sys/block/sd*; do echo 1 > $i/device/rescan; done
$ multipath -r
$ multipath -ll

参考文献：

https://access.redhat.com/solutions/5619941

Posted on

Several situations of Linux automatically reboot without reboot logs in the /var/log/messages

Situation One

This Linux server is a virtual server. If we reboot it though its virtual software, there is no relevant logs in the /var/log/messages.

Situation Two

This Linux server is a member of a pacemaker cluster. If the pacemaker cluster software fences this server for protecting the whole cluster, there is no relate logs in the /var/log/messages.

Situation Three

This Linux server has critical problems in its system or hardware. Core panic of Linux and hardware problem both can reboot the system automatically without any reboot logs in the /var/log/messages.

Posted on

[步骤] KVM 虚拟机模板的创建 （Rocky Linux 8 版）

注意：

在创建 KVM 虚拟机之前要先安装 KVM 并创建 KVM 虚拟网络

KVM 的安装
KVM 虚拟网络的创建

镜像准备：

在 Rocky Linux 官网上下载安装系统所需要的镜像：

https://rockylinux.org/download

正文：

步骤一：理解创建 KVM 虚拟机模板的目的

主要用于批量克隆出新的 KVM 机器，节约创建新虚拟机的时间

步骤二：为这个虚拟机创建硬盘文件

2.1 创建硬盘文件

（只在真机上执行以下步骤）

# qemu-img create -f qcow2 /var/lib/libvirt/images/rockylinux8.qcow2 10G

（补充：这里以创建 10G 大小的 rockylinux8.qcow2 硬盘文件为例）

2.2 确认硬盘文件已创建

（只在真机上执行以下步骤）

# ls /var/lib/libvirt/images/ | grep rockylinux8.qcow2

（补充：这里以显示 rockylinux8.qcow2 硬盘文件为例）

步骤三：使用 KVM 和刚刚创建的硬盘文件新安装一台虚拟机

3.1 启动 KVM 的 virt-manager

（只在真机上执行以下步骤）

# virt-manager

3.2 在 virt-manager 上的左上角点击文件之后点击 “新建虚拟机”

（只在真机上执行以下步骤）

（步骤略）

3.2.1 选择以本地安装介质的方式安装系统

（只在真机上执行以下步骤）

（图：1）
3.2.2 选择安装系统的系统镜像

（只在真机上执行以下步骤）

（图：2）

（补充：这里以使用 Rocky-8.5-x86_6-dvd1.iso 系统镜像为例）

3.2.3 设置内存大小和 CPU 核心数

（只在真机上执行以下步骤）

（图：3）

（补充：这里以设置 2048 MiB 内容和 2 核 CPU 为例）

3.2.4 选择用刚刚创建的硬盘文件来安装系统

（只在真机上执行以下步骤）

（图：4）

（补充：这里以使用 rockylinux8.qcow2 硬盘文件为例）

3.2.5 给虚拟机命名并选择虚拟网络

（只在真机上执行以下步骤）

（注意：虚拟网络必须提前创建好）

（图：5）

（补充：这里以将虚拟机命名为 rockylinux8 并使用 0 网络为例）

3.2.6 开始安装系统

（只在真机上执行以下步骤）

（图：6）
3.2.7 选择系统语言

（只在真机上执行以下步骤）

（图：7）
3.2.8 之后进行系统配置界面

（只在真机上执行以下步骤）

需要手动配置的地方有四个：
1) “INSTALLATION DESTINATION”
2) “KDUMP”
3) “SOFTWARE SELECTION”
4) “Root Password”
分别点击以后就可以配置了

3.2.8.1 通过 “INSTALLATION DESTINATION” 对硬盘进行分区

（只在真机上执行以下步骤）

（补充：完成后点击左上角的 “DONE”）

（注意：只分一个分区，只设置一个挂载点挂载到根 “/”，使用标准硬盘类型，硬盘格式设置为 XFS）

（图：8）
（图：9）
3.2.8.2 取消 “KDUMP”

（只在真机上执行以下步骤）

（补充：完成后点击左上角的 “DONE”）

（图：10）
3.2.8.3 选择最小化安装系统

（只在真机上执行以下步骤）

（补充：完成后点击左上角的 “DONE”）

（图：11）
3.2.8.4 设置 root 密码

（只在真机上执行以下步骤）

（图：12）
3.2.9 之后点击右下角的 “Begin installation”

（只在真机上执行以下步骤）

（图：13）
3.2.10 安装完成后重启

（只在真机上执行以下步骤）

（图：14）
3.2.11 在安装系统的过程中需要注意的内容总结

（只在真机上执行以下步骤）

1) 一定要使用刚刚创建的 /var/lib/libvirt/images/rockylinux8.qcow2 作为安装虚拟机的硬件文件
2) 虚拟机网络 “0” 要提前创建好
3) 只分一个分区，只设置一个挂载点挂载到根 “/”，使用标准硬盘，硬盘格式是 XFS
4) 取消 “KDUMP”
5) 选择最小化安装系统
6) 设置 root 密码

步骤四：进入新创建虚拟机修改配置

4.1 修改网卡个性化设置

4.1.1 修改网卡配置文件

（只在虚拟机上执行以下步骤）

# vi /etc/sysconfig/network-scripts/ifcfg-enp1s0

将全部内容修改如下：

TYPE=Ethernet
BOOTPROTO=dhcp
NAME=enp1s0
DEVICE=enp1s0
ONBOOT=yes
4.1.2 使修改的网卡配置生效

（只在虚拟机上执行以下步骤）

# reboot

4.2 禁用 SELinux

（只在虚拟机上执行以下步骤）

# vi /etc/selinux/config

将全部内容修改如下：

# This file controls the state of SELinux on the system.
# SELINUX= can take one of these three values:
#     enforcing - SELinux security policy is enforced.
#     permissive - SELinux prints warnings instead of enforcing.
#     disabled - No SELinux policy is loaded.
SELINUX=disabled
# SELINUXTYPE= can take one of three values:
#     targeted - Targeted processes are protected,
#     minimum - Modification of targeted policy. Only selected processes are protected.
#     mls - Multi Level Security protection.
SELINUXTYPE=targeted

4.3 禁用空路由

（只在虚拟机上执行以下步骤）

# vi /etc/sysconfig/network

将全部内容修改如下：

# Created by anaconda
NOZEROCONF="yes"

4.4 添加 Console 配置

4.4.1 修改 grub 内核配置文件

（只在虚拟机上执行以下步骤）

# vi /etc/default/grub

将全部内容修改如下：

GRUB_TIMEOUT=5
GRUB_DISTRIBUTOR="$(sed 's, release .*$,,g' /etc/system-release)"
GRUB_DEFAULT=saved
GRUB_DISABLE_SUBMENU=true
GRUB_TERMINAL="serial console"
GRUB_SERIAL_COMMAND="serial --unit=1 --speed=115200"
GRUB_CMDLINE_LINUX="biosdevname=0 net.ifnames=0 console=tty0 console=ttyS0,115200n8"
GRUB_DISABLE_LINUX_UUID="true"
GRUB_ENABLE_LINUX_LABEL="true"
GRUB_DISABLE_RECOVERY="true"
4.4.2 使修改的 grub 内核配置生效

（只在虚拟机上执行以下步骤）

# grub2-mkconfig -o grub

4.5 将系统自动挂载的硬盘从使用 UUID 换成硬件路径

4.5.1 显示根 “/” 分区的 UUID

（只在虚拟机上执行以下步骤）

# blkid
/dev/sda1: UUID="e76ed189-6d0f-49d5-8586-c5aae4bdc9b5" TYPE="xfs" PARTUUID="3d8377ef-01"

（补充：这里的 UUID 是： e76ed189-6d0f-49d5-8586-c5aae4bdc9b5）

4.5.2 在自动挂载文件里将根 “/” 分区的 UUID 换成硬件路径

（只在虚拟机上执行以下步骤）

# vi /etc/fstab

将以下内容：

......
UUID=e76ed189-6d0f-49d5-8586-c5aae4bdc9b5 /                   xfs     defaults        0 0

（补充：这里的 UUID 是： e76ed189-6d0f-49d5-8586-c5aae4bdc9b5）

修改为：

/dev/sda1 /                   xfs     defaults        0 0

4.6 删除不用的程序

（只在虚拟机上执行以下步骤）

# yum -y remove firewalld-* python-firewall

4.7 对虚拟系统进行升级

（只在虚拟机上执行以下步骤）

# yum -y update

4.8 进行分区扩展

4.8.1 安装分区扩展软件

（只在虚拟机上执行以下步骤）

# yum install -y cloud-utils-growpart
4.8.2 给开机自启配置文件相应的权限
# chmod 755 /etc/rc.local
4.8.3 设置开机自动扩容根 “/” 目录

（只在虚拟机上执行以下步骤）

# vi /etc/rc.local

添加以下内容：

......
/usr/bin/growpart /dev/sda1
/usr/sbin/xfs_growfs /

4.9 修改虚拟机系统的名称

（只在虚拟机上执行以下步骤）

# vi /etc/hostname

将全部内容修改如下：

rockylinux8

4.10 启用 serial 服务实现通过 virsh console 命令控制虚拟机

（只在虚拟机上执行以下步骤）

# systemctl start serial-getty@ttyS0
# systemctl enable serial-getty@ttyS0

4.11 清除虚拟系统的历史命令

（只在虚拟机上执行以下步骤）

# history -c

4.12 关闭虚拟机

（只在虚拟机上执行以下步骤）

# poweroff

步骤五：在真机上对虚拟机进行清理优化

（只在真机上执行以下步骤）

# sudo virt-sysprep -d rockylinux8

（补充：这里以清理 rockylinux8 虚拟机为例）

（
注意：如果此命令不存在
1) Rocky Linux 系统的话需要安装 libguestfs-tools
2) openSUSE 系统的话需要安装 guestfs-tools
）

步骤六：此时就可以将此虚拟机的硬件文件作为模板进行批量克隆虚拟机了

（只在真机上执行以下步骤）

（步骤略）

Posted on

[步骤] KVM 虚拟机模板的创建 （openSUSE Leap 15 版）

注意：

在创建 KVM 虚拟机之前要先安装 KVM 并创建 KVM 虚拟网络

KVM 的安装
KVM 虚拟网络的创建

镜像准备：

在 openSUSE 官网上下载安装系统所需要的镜像：

https://software.opensuse.org/distributions/leap

正文：

步骤一：理解创建 KVM 虚拟机模板的目的

主要用于批量克隆出新的 KVM 机器，节约创建新虚拟机的时间

步骤二：为这个虚拟机创建硬盘文件

1.1 创建硬盘文件

（只在真机上执行以下步骤）

# qemu-img create -f qcow2 /var/lib/libvirt/images/template_opensuse_leap_15_10g.qcow2 10G

（补充：这里以创建 10G 大小的 template_opensuse_leap_15_10g.qcow2 硬盘文件为例）

1.2 确认硬盘文件已创建

（只在真机上执行以下步骤）

# ls /var/lib/libvirt/images/ | grep template_opensuse_leap_15_10g.qcow2

（补充：这里以确认 template_opensuse_leap_15_10g.qcow2 硬盘文件为例）

步骤三：使用 KVM 和刚刚创建的硬盘文件新安装一台虚拟机

3.1 启动 KVM 的 virt-manager

（只在真机上执行以下步骤）

# virt-manager

3.2 在 virt-manager 上的左上角点击文件之后 “点击新建虚拟机”

（只在真机上执行以下步骤）

（步骤略）

3.2.1 选择以本地安装介质的方式安装系统

（只在真机上执行以下步骤）

（图：1）
3.2.2 选择安装系统的系统镜像

（只在真机上执行以下步骤）

（图：2）

（补充：这里以使用 openSUSE-Leap-15.2-DVD-x86_64.iso 系统镜像为例）

3.2.3 设置内存大小和 CPU 核心数

（只在真机上执行以下步骤）

（图：3）

（补充：这里以设置 2048 MiB 内容和 2 核 CPU 为例）

3.2.4 选择用刚刚创建的硬盘文件来安装系统

（只在真机上执行以下步骤）

（图：4）

（补充：这里以使用 template_opensuse_leap_15_10g.qcow2 硬盘文件为例）

3.2.5 给虚拟机命名并选择虚拟网络

（只在真机上执行以下步骤）

（注意：虚拟网络必须提前创建好）

（图：5）

（补充：这里以将虚拟机命名为 template_opensuse_leap_15_10g 并使用 0 网络为例）

3.2.6 开始安装系统

（只在真机上执行以下步骤）

（图：6）
3.2.7 进入 “Language, Keyboard and License Agreement” 后选择系统语言，再点击 “Next”

（只在真机上执行以下步骤）

（图：7）
3.2.8 当出现 “Activate online repositories now?” 时，点击 “No”

（只在真机上执行以下步骤）

（图：8）
3.2.9 进入 “System Role” 后选择 “Server”，再点击 “Next”

（只在真机上执行以下步骤）

（图：9）
3.2.10 进入 “Suggested Partitioning” 后点击 “Guided Setup”

（只在真机上执行以下步骤）

（图：10）
3.2.11 进入 “Partitioning Scheme” 后点击 “Next”

（只在真机上执行以下步骤）

（图：11）
3.2.12 进入 “Filesystem Options” 后 “File System Type“ 选择 “XFS”，再点击 “Next”

（只在真机上执行以下步骤）

（图：12）
3.2.13 回到 “Suggested Partitioning” 后点击 “Next”

（只在真机上执行以下步骤）

（图：13）
3.2.14 进入 “Clock and Time Zone” 后选择时区，再点击 “Next”

（只在真机上执行以下步骤）

（图：14）
3.2.15 进入 “Local User” 后选择 “Skip User Creation” 并点击 “Next”

（只在真机上执行以下步骤）

（图：15）
3.2.16 进入 “Authentication for the System Administrator “root”” 后给 root 设置密码，再点击 “Next”

（只在真机上执行以下步骤）

（图：16）
3.2.17 如果出现 “YaST2 The password is too simple” 则点击 “Yes”

（只在真机上执行以下步骤）

（图：17）
3.2.18 进入 “Installation Settings” 后点击 “Next”

（只在真机上执行以下步骤）

（图：18）
3.2.19 当出现 “Confirm Installation” 时点击 “Install”

（只在真机上执行以下步骤）

（图：19）
3.2.20 当出现 “The system will reboot now…” 时，点击 “Ok”

（只在真机上执行以下步骤）

（图：20）
3.2.21 在安装系统的过程中需要注意的内容总结

（只在真机上执行以下步骤）

1) 一定要使用刚刚创建的 template_opensuse_leap_15_10g.qcow2 作为安装虚拟机的硬件文件
2) 虚拟机网络 “0” 要提前创建好
3) 只分一个分区，只设置一个挂载点挂载到根 “/”，使用标准硬盘，硬盘格式是 XFS
4) 选择最小化安装系统

步骤四：进入新创建虚拟机修改配置

4.1 添加 Console 配置

4.1.1 修改 grub 内核配置文件

（只在虚拟机上执行以下步骤）

# vi /etc/default/grub

将全部内容修改如下：

# If you change this file, run 'grub2-mkconfig -o /boot/grub2/grub.cfg' afterwards to update
# /boot/grub2/grub.cfg.

# Uncomment to set your own custom distributor. If you leave it unset or empty, the default
# policy is to determine the value from /etc/os-release
GRUB_DISTRIBUTOR=
GRUB_DEFAULT=saved
GRUB_HIDDEN_TIMEOUT=0
GRUB_HIDDEN_TIMEOUT_QUIET=true
GRUB_TIMEOUT=8
GRUB_CMDLINE_LINUX_DEFAULT="splash=silent mitigations=auto quiet"
GRUB_SERIAL_COMMAND="serial --unit=1 --speed=115200"
GRUB_CMDLINE_LINUX="biosdevname=0 net.ifnames=0 console=tty0 console=ttyS0,115200n8"
GRUB_DISABLE_LINUX_UUID="true"
GRUB_ENABLE_LINUX_LABEL="true"
GRUB_DISABLE_RECOVERY="true"

# Uncomment to automatically save last booted menu entry in GRUB2 environment

# variable `saved_entry'
# GRUB_SAVEDEFAULT="true"
#Uncomment to enable BadRAM filtering, modify to suit your needs

# This works with Linux (no patch required) and with any kernel that obtains
# the memory map information from GRUB (GNU Mach, kernel of FreeBSD ...)
# GRUB_BADRAM="0x01234567,0xfefefefe,0x89abcdef,0xefefefef"
#Uncomment to disable graphical terminal (grub-pc only)

GRUB_TERMINAL="gfxterm"
# The resolution used on graphical terminal
#note that you can use only modes which your graphic card supports via VBE

# you can see them in real GRUB with the command `vbeinfo'
GRUB_GFXMODE="auto"
# Uncomment if you don't want GRUB to pass "root=UUID=xxx" parameter to Linux
# GRUB_DISABLE_LINUX_UUID=true
#Uncomment to disable generation of recovery mode menu entries

# GRUB_DISABLE_RECOVERY="true"
#Uncomment to get a beep at grub start

# GRUB_INIT_TUNE="480 440 1"
GRUB_BACKGROUND=
GRUB_THEME=/boot/grub2/themes/openSUSE/theme.txt
SUSE_BTRFS_SNAPSHOT_BOOTING="true"
GRUB_DISABLE_OS_PROBER="false"
GRUB_ENABLE_CRYPTODISK="n"
GRUB_CMDLINE_XEN_DEFAULT="vga=gfx-1024x768x16"
4.1.2 使修改的 grub 内核配置生效

（只在虚拟机上执行以下步骤）

# grub2-mkconfig -o grub

4.2 将系统自动挂载的硬盘从使用 uuid 换成硬件路径

4.2.1 显示根 “/” 分区的 UUID

（只在虚拟机上执行以下步骤）

# blkid
/dev/vda1: UUID="53ee2f87-89b8-4cd7-a4dc-0957d28f4831" TYPE="xfs" PARTUUID="3d8377ef-01"

（补充：这里的 UUID 是： 53ee2f87-89b8-4cd7-a4dc-0957d28f4831）

4.2.2 在自动挂载文件里将根 “/” 分区的 UUID 换成硬件路径

（只在虚拟机上执行以下步骤）

# vi /etc/fstab

将以下内容：

......
UUID=53ee2f87-89b8-4cd7-a4dc-0957d28f4831 /                   xfs     defaults        0 0

（补充：这里的 UUID 是： 53ee2f87-89b8-4cd7-a4dc-0957d28f4831）

修改为：

......
/dev/vda1 /                   xfs     defaults        0 0

4.3 删除不用的软件

（只在虚拟机上执行以下步骤）

# zypper -n rm firewalld-*

4.4 进行分区扩展

4.4.1 安装分区扩展软件

（只在虚拟机上执行以下步骤）

# zypper -n in growpart
4.4.2 设置开机自动扩容根 “/” 目录
4.4.2.1 创建开机自动扩容根 “/” 目录的配置文件
# vim /etc/init.d/after.local

创建以下内容：

/usr/bin/growpart /dev/sda1
/usr/sbin/xfs_growfs /
4.4.2.2 给开机自启配置文件相应的权限
# chmod 755 /etc/init.d/after.local

4.5 只使用本地软件源（选做）

4.5.1 禁用所有软件源（选做）

（只在虚拟机上执行以下步骤）

# zypper mr -da
4.5.2 添加本地软件源（选做）

（只在虚拟机上执行以下步骤）

# zypper ar -fcg http://10.0.0.254/openSUSE-Leap-15/ lan

(注意： http://10.0.0.254/openSUSE-Leap-15/ 需要根据真实环境的情况进行更改)

4.5.3 添加本地软件源（选做）

（只在虚拟机上执行以下步骤）

# zypper ref

4.6 修改虚拟机系统的名称

（只在虚拟机上执行以下步骤）

# hostnamectl set-hostname template_opensuse_leap_15_10g

4.7 启用 serial 服务实现通过 virsh console 命令控制虚拟机

（只在虚拟机上执行以下步骤）

# systemctl start serial-getty@ttyS0
# systemctl enable serial-getty@ttyS0

4.8 清除虚拟系统的历史命令

（只在虚拟机上执行以下步骤）

# history -c

4.9 关闭虚拟机

（只在虚拟机上执行以下步骤）

# poweroff

步骤五：修改新创建的虚拟机配置文件

删除配置文件里 cdrom 相关的部分

# vim /etc/libvirt/qemu/template_opensuse_leap_15_10g.xml

删除以下内容：

......
    <disk type='file' device='cdrom'>
      <driver name='qemu' type='raw'/>
      <source file='/test/iso/openSUSE-Leap-15.2-DVD-x86_64.iso'/>
      <target dev='sda' bus='sata'/>
      <readonly/>
      <address type='drive' controller='0' bus='0' target='0' unit='0'/>
    </disk>
......

步骤六：此时就可以将此虚拟机的硬件文件作为模板进行批量克隆虚拟机了

（只在真机上执行以下步骤）

（步骤略）