Вопрос или проблема
Debian 12 случайно зависает в качестве хоста KVM
Я установил Debian 12 на машине, которая служит хостом KVM для двух гостей: Ubuntu 22.04 и Windows 10.
Иногда Debian зависает. Сначала пропадает видео, а вентилятор процессора работает на максимальной скорости. В первые минуты возможно подключиться к Debian по SSH с другой машины, но в конце концов он полностью зависает.
Некоторые события, похоже, вызывают зависание.
- Однажды, когда я вывел Ubuntu на полный экран
- Когда я открыл TeamViewer на Windows 10
- В других ситуациях я не помню
Иногда я могу использовать гостя KVM несколько часов без проблем, а в другие разы он зависает через несколько минут использования.
Я пытался просмотреть журнал в /var/log/libvirt/qemu/, но не нашел ничего полезного.
# tail /var/log/libvirt/qemu/win10.log
Восстановление кластера 9535489 refcount=1 reference=0
Восстановление кластера 9568257 refcount=1 reference=0
Восстановление кластера 9601025 refcount=1 reference=0
Восстановление кластера 9633793 refcount=1 reference=0
Может быть, нельзя использовать Windows 10 в качестве гостя KVM на Debian? Оба гостя ВМ имеют почти стандартную конфигурацию. Видео — Virtio. Я также пробовал QXL, но поведение, похоже, остается прежним.
Ниже представлена XML-конфигурация видео.
<video>
<model type="virtio" heads="1" primary="yes"/>
<address type="pci" domain="0x0000" bus="0x00" slot="0x01" function="0x0"/>
</video>
Хост ВМ Debian – это тот, который имеет симптомы таинственного перезагрузки. Исследуйте, что могло вызвать его зависание.
Проверьте наличие аппаратных ошибок, ECC-памяти и подобных вещей. На Linux используйте rasdaemon.
Настройте удалённый Syslog для записи на другой хост, как на хостах ВМ, так и на гостях ВМ. Сообщения, отправленные по IP, могут быть отправлены, даже если они могут не быть записаны на локальном хранилище. Естественно, это должно быть другое оборудование, чем сервер Debian.
Настройте дамп ядра Linux при сбое (документация Ubuntu, Debian должен быть аналогичным). Это как дамп сбойной программы, но для операционной системы. Рассмотрите возможность включения удаленного kdump, чтобы передать его через ssh. Имея копию точной версии ядра, которая использовалась, и этот дамп, вы сможете выполнять отладочные операции. Самая основная – это bt, чтобы получить обратный трассировщик.
Пока это всего лишь категории вещей, на которые стоит обратить внимание. Вам все еще нужно выявить возможные коренные причины и отследить их.
Когда хост Debian снова зависнет, найдите точное время в журналах. Проанализируйте каждую загрузку и осмотрите последние сообщения, зафиксированные перед проблемой. Вероятно, паника ядра зафиксирует значительно другие сообщения по сравнению с запланированным завершением работы. Проверьте файл дампа, чтобы увидеть, действительно ли произошел сбой, и что было на ЦП в отладчике.
Возможны несколько категорий проблем:
- Аппаратный сбой, исправляемый заменой проблемного компонента.
- Сбой операционной системы, то есть Linux завис. Узнайте, какая подсистема задействована, по сообщению о панике и дампу.
- Сбой приложения. Вероятно, на хосте ВМ с учетом симптомов перезагрузки сервера, которые вы описали. Тем не менее, также проверьте журналы гостя в окрестностях времени проблемы, чтобы узнать, что, если что-то происходило в тот момент.
Ответ или решение
Проблема с нестабильной работой хоста KVM на Debian 12 может иметь множество причин, и для решения данной проблемы необходимо произвести комплексную диагностику. Вот ряд шагов, которые следует предпринять.
1. Оценка оборудования
Поскольку вы сталкиваетесь с непредсказуемыми сбоями, важно проверить оборудование на наличие неисправностей. Обратите внимание на следующие моменты:
-
Память: Проверьте, поддерживает ли ваша система ECC (Error-Correcting Code) память. Для этого можно использовать утилиту
rasdaemon, которая поможет отследить ошибки памяти в реальном времени. Убедитесь, что нет сообщений о неисправностях. -
Процессор и охлаждение: Проблемы с перегревом процессора могут также вызывать сбои. Убедитесь, что система охлаждения работает исправно и нет перегрева.
- Запуск тестов: Проведите стресс-тестирование системы, используя такие утилиты, как
memtest86+для тестирования памяти иstressдля тестирования процессора и системы в целом.
2. Просмотр логов
Когда хост перезагружается, важно просмотреть системные логи, чтобы выяснить причину сбоя:
-
Проверьте логи системных сообщений с помощью команды:
journalctl -b -1Эта команда покажет сообщения с предыдущей загрузки. Найдите любые ошибки или предупреждения, которые могли возникнуть перед сбоем.
- Обратите внимание на файлы в каталоге
/var/log/, такие какkern.log,syslogиdmesg. Эти файлы содержат информацию о всех системных событиях и могут помочь выявить причины сбоев.
3. Настройка дампов ядра
Чтобы лучше понять природу аварийных перезагрузок, настройте систему для создания дампов ядра:
-
Установите пакет
kdump. Это позволит получать дампы ядра в случае сбоя. Для этого выполните следующие команды:sudo apt install kdump-tools sudo systemctl enable kdump-tools sudo systemctl start kdump-tools - Настройте kdump для отправки дампов на удалённый сервер, чтобы у вас была возможность проанализировать их после сбоя. В конфигурационном файле
/etc/kdump.confукажите адрес удалённого хоста.
4. Проверка конфигурации KVM
-
Проверьте настройки виртуальных машин. Убедитесь, что они корректны и соответствуют требованиям вашей аппаратной платформы. Обратите внимание на конфигурацию видеоподсистемы, выбрав подходящий драйвер (Virtio или QXL) в зависимости от сценариев использования.
- Убедитесь, что у гостевых систем достаточно ресурсов (оперативной памяти и процессорных ядер), чтобы избежать перегрузки хоста.
5. Мониторинг и трассировка
-
Настройте мониторинг хоста и виртуальных машин, используя решения, такие как
Prometheus,Grafana, илиZabbix, чтобы отслеживать использование ресурсов в реальном времени. - Если сбой произойдет снова, а у вас будет активный мониторинг, вы сможете получить больше информации о ситуации до сбоя.
6. Обновление и исправления
- Убедитесь, что ваш Debian 12 и все пакеты, связанные с KVM, обновлены до последних стабильных версий. Примените доступные обновления и исправления:
sudo apt update sudo apt upgrade
7. Общие рекомендации
-
Проверьте, нет ли проблем с драйверами под Linux, которые могут влиять на стабильность системы. Проверьте наличие известных проблем с конкретными версиями ядра, используемыми в Debian 12.
- Если проблема сохраняется, рассмотрите возможность использования другой версии ядра или переключитесь на более стабильный релиз Debian, например, на SSD (Stable).
Выполните эти действия и, скорее всего, сможете выявить и устранить коренную причину периодических зависаний вашего KVM-хоста на Debian 12.