Вопрос или проблема
Раз в месяц я обнаруживаю, что один из моих серверов RedHat 9 перезагрузился (на самом деле это AlmaLinux 9, но поскольку это клон RH9, этот вопрос, вероятно, лучше решить в контексте RH9). Я пытаюсь выяснить, что вызывает сбой, но файлов дампа памяти не создается!
Я следовал инструкциям в этом посте, за исключением того, что, похоже, у меня нет ничего apport на системе, но когда я вызываю дамп памяти с помощью:
sleep 3 & kill -SEGV $!
файл дампа памяти не создается!
Я подтвердил, что основные настройки установлены с помощью:
[root@myhost ~]# cat /proc/sys/kernel/core_pattern
|/usr/lib/systemd/systemd-coredump %P %u %g %s %t %c %h
[root@myhost ~]# ulimit -c
unlimited
Есть ли что-то еще, что я должен установить, чтобы файл дампа создавался? Я подозреваю, что проблема вызвана моим собственным приложением (неупакованным)… но файла дампа даже нет в директории, содержащей приложение.
Ответ или решение
Когда вы сталкиваетесь с отсутствием файлов дампов памяти на сервере AlmaLinux 9 (или любом другом клоне RedHat 9), важно учитывать несколько аспектов, чтобы диагностировать и исправить проблему. Давайте подробнее рассмотрим шаги, которые необходимо предпринять, чтобы убедиться в правильной настройке системы для создания файлов дампов.
1. Проверка конфигурации системы
Первым делом, вы уже проверили вывод команды cat /proc/sys/kernel/core_pattern, который показывает, что ваша система настроена на использование systemd-coredump. Это означает, что вместо создания промежуточного файла дампа в файловой системе, дампы будут обрабатываться и сохраняться systemd.
Убедитесь, что systemd-coredump настроен правильно:
Хотя вы можете использовать systemd, чтобы обрабатывать файлы дампов, вам нужно убедиться, что отладка настроена правильно.
Сначала проверьте файл конфигурации для coredump. Вы можете найти его по пути /etc/systemd/coredump.conf. Убедитесь, что настройки по умолчанию подходят для ваших нужд. Например, проверьте, что настройки размера и лимитов сохранения соответствуют тому, что вам нужно.
2. Проверка прав на создание дампов
systemd-coredump может не создавать файлы дампов, если у процесса, который завершился с ошибкой, нет прав на запись. Убедитесь, что у вашего приложения есть необходимые права для создания дампа.
Вы можете протестировать это с помощью команды:
sudo su -c 'sleep 3 & kill -SEGV $!'Это гарантирует, что процесс будет запускаться с правами суперпользователя.
3. Поиск файлов дампов
После того как вы проверили настройки, ещё одной важной проверкой является поиск местоположения, где systemd-coredump может сохранять файлы.
Проверьте с помощью команды:
coredumpctl listЭта команда покажет вам список всех доступны файлов дампов, если они были созданы. Если ваше приложение генерирует дампы, но они не находятся в ожидаемом месте, эта команда поможет вам их обнаружить.
4. Логирование и отслеживание
Это также важный момент. Проверяйте системные журналы (например, с помощью journalctl) на наличие ошибок или предупреждений, которые могут подразумевать, почему ваши дампы не сохраняются. Воспользуйтесь следующей командой:
journalctl -xeЭто может дать вам подсказки о том, что происходит в момент сбоя приложения.
5. Настройка ulimit
Вы указали, что ulimit -c установлен на unlimited, что является правильной настройкой для разрешения создания неограниченного количества дампов. Также убедитесь, что для пользователей, запускающих ваши приложения, установлены аналогичные параметры.
6. Обновление программного обеспечения
Наконец, всегда полезно убедиться, что все пакеты и компоненты вашего сервера отладки актуальны. Выполните обновление системы с помощью следующих команд:
sudo dnf check-update
sudo dnf upgradeЭто гарантирует, что вам доступны последние исправления и улучшения для вашей операционной системы.
Заключение
Отсутствие файлов дампов может быть вызвано множеством факторов, включая неправильные настройки системы, ограничения прав доступа, или даже проблемы с самим приложением. Следуя описанным шагам, вы должны быть в состоянии настроить свою систему для создания необходимых файлов дампов при сбоях. Это, в свою очередь, поможет вам лучше диагностировать и исправлять проблемы с вашим приложением. Поддерживайте регулярный мониторинг и обновление настроек — это отличный способ предотвратить повторные ошибки в будущем.