Как обновить Airbyte до последней версии?

На чтение 3 мин Опубликовано 20.09.2024

Вопрос или проблема

Мы используем Airbyte для потоковой передачи данных в нашу среду. Мы сделали форк репозитория на GitHub, доступного по следующему адресу

https://github.com/airbytehq/airbyte

Мы внесли некоторые изменения в наш форк репозитория для аутентификации и авторизации, а также добавили собственный код для потоковой передачи данных. Мы создаем образы Docker для коннекторов Airbyte и разворачиваем их в нашей среде.

С момента, когда мы сделали форк, основной репозиторий на GitHub претерпел много изменений, и наш репозиторий существенно отстает от главной ветки. Недавно Airbyte объявил, что в ближайшие дни они планируют выпустить новую версию.

Пожалуйста, сообщите нам, как проще и лучше обновить наш репозиторий. Если мы обновим, потеряем ли мы также наш кастомный код?

Ответ или решение

Чтобы обновить вашу форкнутую репозиторий Airbyte до последней версии, вам следует следовать нескольким шагам. Ниже приведены подробные инструкции, которые помогут вам сделать это максимально гладко, не потеряв ваши кастомизации:

Проверьте статус вашей ветки:
Убедитесь, что у вас есть последняя версия вашей кастомной ветки. Для этого выполните команду:
```
git checkout <ваша-ветка>
git pull origin <ваша-ветка>
```
Добавьте удалённый репозиторий:
Вам нужно добавить оригинальный репозиторий Airbyte как удалённый (upstream), если вы этого еще не сделали. Это можно сделать с помощью следующих команд:
```
git remote add upstream https://github.com/airbytehq/airbyte.git
```
Получите последние изменения из основного репозитория:
Чтобы обновить вашу ветку последними изменениями из upstream, выполните:
```
git fetch upstream
```
Слияние изменений:
Теперь вы можете слить изменения из основного репозитория с вашей веткой. Это можно сделать с помощью команды:
```
git merge upstream/main
```
Если основной репозиторий использует другую ветку, например, master, замените main на master.
Разрешение конфликтов:
Возможны конфликты при слиянии, особенно если ваша кастомизация затрагает те же файлы или изменения. Вам нужно будет вручную решить эти конфликты, открыв файлы с конфликтами и отредактировав их. После того, как все конфликты будут разрешены, добавьте изменённые файлы:
```
git add <файлы с конфликтами>
```
Завершение слияния:
После разрешения всех конфликтов выполните:
```
git commit
```
Проверка адаптации кастомного кода:
После слияния вам рекомендуется протестировать вашу кастомизацию, чтобы убедиться, что всё работает как ожидалось. Особое внимание уделите тому, чтобы ваши изменения по аутентификации и авторизации были интегрированы без ошибок.
Создание и деплой новых Docker образов:
После обновления и тестирования, создайте новые Docker образы ваших коннекторов и разверните их в своем окружении:
```
docker build -t <ваш-образ> .
docker run <ваш-образ>
```
Убедитесь, что все изменения были интегрированы:
Проверьте логи и убедитесь, что коннекторы работают корректно с обновленной версией.

Таким образом, следуя вышеописанным шагам, вы сможете обновить вашу репозиторий Airbyte до последней версии, сохраняя при этом ваши кастомизации. Убедитесь, что вы тщательно тестируете обновлённую версию в вашем окружении, чтобы избежать неожиданных ошибок в процессе работы.