Почему я не могу установить MetalLB на k3s?

Добрый день, я столкнулся с проблемой, что не могу подключить MetalLB к K3S. У меня есть кластер с 3 мастерами и 3 рабочими узлами.

ИМЯ            СТАТУС   РОЛИ                       ВРЕМЯ    ВЕРСИЯ
master-node-1   Готов    контрольная-плоскость,etcd,мастер   4д2ч   v1.30.5+k3s1
master-node-2   Готов    контрольная-плоскость,etcd,мастер   4д1ч   v1.31.1+k3s1
master-node-3   Готов    контрольная-плоскость,etcd,мастер   4д1ч   v1.31.1+k3s1
worker-node-1   Готов    <нет>                      4д1ч   v1.31.1+k3s1
worker-node-2   Готов    <нет>                      4д     v1.31.1+k3s1
worker-node-3   Готов    <нет>                      4д     v1.31.1+k3s1

Сначала я пытался установить MetalLB таким образом:

kubectl apply -f https://raw.githubusercontent.com/metallb/metallb/v0.12.1/manifests/namespace.yaml
kubectl apply -f https://raw.githubusercontent.com/metallb/metallb/v0.12.1/manifests/metallb.yaml

Конфигурация:

# config.yml
apiVersion: v1
kind: ConfigMap
metadata:
  namespace: metallb-system
  name: config
data:
  config: |
    address-pools:
    - name: default
      protocol: layer2
      addresses:
      - 192.168.0.170-192.168.0.180

С этим подходом Load Balancer работал, но он был нестабильным, с 50% вероятностью невозможно было зайти на сайт. Затем я узнал, что это устаревший метод. Я попробовал новый:

kubectl apply -f https://raw.githubusercontent.com/metallb/metallb/v0.14.5/config/manifests/metallb-native.yaml

Конфигурация:

apiVersion: metallb.io/v1beta1
kind: IPAddressPool
metadata:
  name: k3s-lb-pool
  namespace: metallb
spec:
  addresses:
  - 192.168.0.170-192.168.0.180
  autoAssign: true
---
apiVersion: metallb.io/v1beta1
kind: L2Advertisement
metadata:
  name: k3s-lb-pool
  namespace: metallb

Но я получаю ошибку:

Ошибка от сервера (InternalError): ошибка при создании "metalLB-config.yaml": Произошла внутренняя ошибка: не удалось вызвать вебхук "ipaddresspoolvalidationwebhook.metallb.io": не удалось вызвать вебхук: Post "https://metallb-webhook-service.metallb.svc:443/validate-metallb-io-v1beta1-ipaddresspool?timeout=10s": нет доступных конечных точек для службы "metallb-webhook-service"
Ошибка от сервера (InternalError): ошибка при создании "metalLB-config.yaml": Произошла внутренняя ошибка: не удалось вызвать вебхук "l2advertisementvalidationwebhook.metallb.io": не удалось вызвать вебхук: Post "https://metallb-webhook-service.metallb.svc:443/validate-metallb-io-v1beta1-l2advertisement?timeout=10s": нет доступных конечных точек для службы "metallb-webhook-service"

Но пространство имен все еще работает нормально:

root@master-node-1:~# kubectl get pod -n=metallb-system
ИМЯ                          Готов   СТАТУС    ПЕРЕЗАГРУЗЫ        ВРЕМЯ
controller-86f5578878-9ddsr   1/1     Запущен   2 (3м31с назад)   4м57с
speaker-5j47x                 1/1     Запущен   0               4м56с
speaker-6drpd                 1/1     Запущен   0               4м56с
speaker-ccpmq                 1/1     Запущен   0               4м56с
speaker-jfpch                 1/1     Запущен   1 (3м12с назад)   4м56с
speaker-mps8b                 1/1     Запущен   0               4м57с
speaker-t9lx2                 1/1     Запущен   0               4м56с

(Заранее извиняюсь, английский не является моим родным языком)

Добро пожаловать на ServerFault 👋

По умолчанию k3s уже включает LoadBalancer под названием ServiceLB (ранее называвшийся Klipper LoadBalacer). Я подозреваю, что оба работали одновременно, что известно, что вызывает проблемы: одна из них заключается в том, что ваши службы типа LoadBalancer могут быть доступны лишь изредка. Это связано с тем, что как ServiceLB, так и MetalLB по умолчанию используют L2 объявления.

Из-за этого вам нужно будет отключить ServiceLB, если вы хотите использовать MetalLB в сочетании с k3s (как описано в их документации). Если ваш кластер уже работает, вы можете добавить флаг --disable servicelb в файл единицы systemd, расположенный по адресу /etc/systemd/system/k3s.service, вот так:

...
ExecStart=/usr/local/bin/k3s \
server \
    '--server' \
    '...' \
    '--disable' \
    'servicelb' \
    '--disable' \ <-- Вы можете использовать несколько флагов отключения.
    'traefik' \
    '...' \
    'node-role.kubernetes.io/master=true:NoSchedule' \

Вторая проблема, которую вы описали, немного сложнее для меня. Я подозреваю, что вы не ждали достаточно долго перед тем, как попытаться создать IPAddressPool и L2Advertisement, но это лишь предположение, основанное на том факте, что у вашего metallb-webhook-service не кажется, что есть какие-либо конечные точки. Возможно, вы можете поделиться некоторыми логами пода контроллера MetalLB? Но я бы сначала попробовал отключить ServiceLB, а затем переустановить MetalLB.