Перейти к основному содержимому
Перейти к основному содержимому

Руководство по настройке генератического источника Postgres

к сведению

Если вы используете одного из поддерживаемых провайдеров (в боковом меню), пожалуйста, обратитесь к конкретному руководству для этого провайдера.

ClickPipes поддерживает версии Postgres 12 и выше.

Включение логической репликации​

  1. Для включения репликации на вашем инстансе Postgres необходимо убедиться, что установлены следующие настройки:

    Чтобы это проверить, вы можете выполнить следующую SQL-команду:

    Результат должен быть logical. Если нет, выполните:

  2. Кроме того, рекомендуется установить следующие настройки на инстансе Postgres:

    Чтобы проверить это, вы можете выполнить следующие SQL-команды:

    Если значения не совпадают с рекомендуемыми, вы можете выполнить следующие SQL-команды, чтобы установить их:

  3. Если вы внесли какие-либо изменения в конфигурацию, как указано выше, вам НЕОБХОДИМО ПЕРЕЗАПУСТИТЬ инстанс Postgres, чтобы изменения вступили в силу.

Создание пользователя с разрешениями и публикацией​

Давайте создадим нового пользователя для ClickPipes с необходимыми разрешениями, подходящими для CDC, и также создадим публикацию, которую мы будем использовать для репликации.

Для этого вы можете подключиться к вашему инстансу Postgres и выполнить следующие SQL-команды:

примечание

Убедитесь, что вы заменили clickpipes_user и clickpipes_password на желаемое имя пользователя и пароль.

Включение подключений в pg_hba.conf для пользователя ClickPipes​

Если вы самостоятельно обслуживаете, вам необходимо разрешить подключения к пользователю ClickPipes с IP-адресов ClickPipes, следуя приведенным ниже шагам. Если вы используете управляемый сервис, вы можете сделать то же самое, следуя документации провайдера.

  1. Внесите необходимые изменения в файл pg_hba.conf, чтобы разрешить подключения к пользователю ClickPipes с IP-адресов ClickPipes. Пример записи в файле pg_hba.conf будет выглядеть следующим образом:

  2. Перезагрузите экземпляр PostgreSQL, чтобы изменения вступили в силу:

Увеличить max_slot_wal_keep_size​

Это рекомендованное изменение конфигурации, чтобы гарантировать, что большие транзакции/коммиты не вызовут удаление слота репликации.

Вы можете увеличить параметр max_slot_wal_keep_size для вашего экземпляра PostgreSQL до более высокого значения (не менее 100GB или 102400), обновив файл postgresql.conf.

Вы можете перезагрузить инстанс Postgres, чтобы изменения вступили в силу:

примечание

Для получения лучших рекомендаций по этому значению вы можете обратиться в команду ClickPipes.

Что дальше?​

Теперь вы можете создать ваш ClickPipe и начать прием данных из вашего инстанса Postgres в ClickHouse Cloud. Не забудьте записать данные подключения, которые вы использовали при настройке вашего инстанса Postgres, так как они понадобятся вам во время процесса создания ClickPipe.