тестирование ZFS – как уничтожить UNAVAIL пул без перезагрузки

Question 1

Я тестирую ZFSonLinux, и у меня есть экспериментальный пул с именем usbcka. В нем только тестовые данные. Я симулирую сбой оборудования, чтобы определить поведение в этом сценарии. Я знаю, что эта конфигурация не имеет избыточности, и это принимается как риск (решение не было принято мной). ИСПРАВЛЕНИЕ: дополнительная информация: ОС будет находиться на избыточном хранилище.

root@carbon:~# zpool status -xv
  pool: usbcka
 состояние: UNAVAIL
 статус: Одно или несколько устройств неисправны в ответ на сбои ввода-вывода.
 действие: Убедитесь, что затронутые устройства подключены, затем выполните 'zpool clear'.
   см.: http://zfsonlinux.org/msg/ZFS-8000-HC
  сканирование: не запрашивалось
конфигурация:

    ИМЯ        СОСТОЯНИЕ     ЧТЕНИЕ ЗАПИСЬ CHECKSUM
    usbcka      UNAVAIL      0     0     0  недостаточно реплик
      usb1      ВКЛЮЧЕНО       0     0     0
      usb2      НЕИСПРАВНО      0     0     0  слишком много ошибок

ошибки: Список ошибок недоступен (недостаточно привилегий)

Устройства usb1 и usb2 — это устройства LUKS, смонтированные с помощью cryptsetup.

** В рамках теста я намеренно физически отключил подлежащее устройство для usb2 ** Предположим, что неисправное устройство было жестким диском, который невозможно отремонтировать, сбой оборудования.

Я пробовал

root@carbon:~# zpool destroy -f usbcka
невозможно открыть 'usbcka': ввод-вывод пула в настоящее время приостановлен

root@carbon:~# zpool set failmode=continue usbcka
невозможно установить свойство для 'usbcka': ввод-вывод пула в настоящее время приостановлен

Также

zpool clear usbcka

ничего не делает, пустой вывод

Также

zpool export usbcka

Зависает

Как уничтожить пул без перезагрузки?

Я хочу использовать еще работающие устройства для создания нового пула

Причина, по которой я не хочу перезагрузки, заключается в том, что я тестирую, как ZFS выходит из строя, когда устройство неисправно, моя цель — использовать ZFS на сервере компании. Этот сервер просто не может быть перезагружен по моему желанию, если один из 10 дисков выходит из строя, и в нем есть лотки для горячей замены.

Я искал решения, но все они в конечном итоге приводят к решению с перезагрузкой.

root@carbon:~# zfs list usbcka
невозможно открыть 'usbcka': ввод-вывод пула в настоящее время приостановлен

root@carbon:~# zpool get all usbcka
ИМЯ    СВОЙСТВО                    ЗНАЧЕНИЕ                       ИСТОЧНИК
usbcka  размер                        174G                        -
usbcka  емкость                      1%                          -
usbcka  altroot                     -                           по умолчанию
usbcka  состояние                    UNAVAIL                     -
usbcka  guid                        1317589842010265379         по умолчанию
usbcka  версия                     -                           по умолчанию
usbcka  bootfs                      -                           по умолчанию
usbcka  делегирование               включено                   по умолчанию
usbcka  автоматическая замена       отключено                  по умолчанию
usbcka  файл кеша                   -                           по умолчанию
usbcka  режим сбоя                 ожидание                    по умолчанию
usbcka  списки снапшотов           отключено                  по умолчанию
usbcka  автоматическое расширение    отключено                  по умолчанию
usbcka  dedupditto                  0                           по умолчанию
usbcka  dedupratio                  1.00x                       -
usbcka  свободно                    170G                        -
usbcka  выделено                   3.26G                       -
usbcka  только для чтения           отключено                  -
usbcka  ashift                      13                          локально
usbcka  комментарий                 -                           по умолчанию
usbcka  размер_расширения            -                           -
usbcka  освобождение                0                           по умолчанию
usbcka  фрагментация                1%                          -
usbcka  утечка                      0                           по умолчанию
usbcka  feature@async_destroy       включено                     локально
usbcka  feature@empty_bpobj         включено                     локально
usbcka  feature@lz4_compress        активно                      локально
usbcka  feature@spacemap_histogram  активно                      локально
usbcka  feature@enabled_txg         активно                      локально
usbcka  feature@hole_birth          активно                      локально
usbcka  feature@extensible_dataset  включено                     локально
usbcka  feature@embedded_data       активно                      локально
usbcka  feature@bookmarks           включено                     локально
usbcka  feature@filesystem_limits   включено                     локально
usbcka  feature@large_blocks        включено                     локально

Question 2

У меня была такая же проблема на debian testing с ядром 4.14 и модулем zfs 0.7.6. Но я думаю, что такое поведение одинаково на всех Linux-системах.

Чтобы уничтожить пул UNAVAIL, где статус выглядит так:

user@system: ~ $ sudo zpool status -xv
pool: icy_tank
состояние: UNAVAIL
статус: Одно или несколько устройств неисправны в ответ на сбои ввода-вывода.
действие: Убедитесь, что затронутые устройства подключены, затем выполните 'zpool clear'.
см.: http://zfsonlinux.org/msg/ZFS-8000-HC
сканирование: не запрашивалось
конфигурация:

    ИМЯ        СОСТОЯНИЕ     ЧТЕНИЕ ЗАПИСЬ CHECKSUM
    icy_tank    UNAVAIL      0     0     0  недостаточно реплик
      sdb       UNAVAIL      0     0     0

ошибки: Список ошибок недоступен: ввод-вывод пула в настоящее время приостановлен

вам нужно перезапустить zed, демон событий zfs, сначала перезапустив всю систему zfs-target.

sudo systemctl restart zfs.target

После этого шага пул можно очистить.

sudo zpool clear icy_tank

Если устройство (например, sdb) доступно в это время и sdb является частью пула, zpool немедленно начнет проверку на этом устройстве.

pool: icy_tank
состояние: ONLINE
статус: Одно или несколько устройств испытали ошибку, что привело к
    повреждению данных.  Приложения могут быть затронуты.
действие: Восстановите файл, если это возможно.  В противном случае восстановите
    весь пул из резервной копии.
см.: http://zfsonlinux.org/msg/ZFS-8000-8A
сканирование: проверка в процессе с среды, 7 марта 2018 г., 20:27:55
    316M отсканировано из 121G со скоростью 9,89M/s, 3ч28м до завершения
    0B отремонтировано, 0,26% завершено
конфигурация:

    ИМЯ        СОСТОЯНИЕ     ЧТЕНИЕ ЗАПИСЬ CHECKSUM
    icy_tank    ONLINE       0     0     0
      sdb       ONLINE       0     0     0

ошибки: 4 ошибки данных, используйте '-v' для списка

тестирование ZFS – как уничтожить UNAVAIL пул без перезагрузки

Вопрос или проблема

Как уничтожить пул без перезагрузки?

Ответ или решение

Как уничтожить пул ZFS в состоянии UNAVAIL без перезагрузки

Суть проблемы

Варианты решения

Замечания

Заключение