Движки таблиц для интеграций

ClickHouse предоставляет разнообразные средства для интеграции с внешними системами, включая движки таблиц. Как и с любыми другими движками таблиц, конфигурация осуществляется с помощью запросов CREATE TABLE или ALTER TABLE. С точки зрения пользователя настроенная интеграция выглядит как обычная таблица, однако запросы к ней проксируются на внешнюю систему. Это прозрачное выполнение запросов является одним из основных преимуществ данного подхода по сравнению с альтернативными методами интеграции, такими как словари или табличные функции, которые требуют использования пользовательских методов запроса при каждом использовании.

Страница	Описание
Kafka	Движок Kafka работает с Apache Kafka и позволяет публиковать или подписываться на потоки данных, организовывать отказоустойчивое хранилище и обрабатывать потоки по мере их поступления.
Iceberg Table Engine	Этот движок обеспечивает только чтение интеграции с существующими таблицами Apache Iceberg в Amazon S3, Azure, HDFS и локально хранящимися таблицами.
RabbitMQ Engine	Этот движок позволяет интегрировать ClickHouse с RabbitMQ.
EmbeddedRocksDB Engine	Этот движок позволяет интегрировать ClickHouse с RocksDB.
Hive	Движок Hive позволяет выполнять запросы SELECT на таблице Hive в HDFS.
Hudi Table Engine	Этот движок обеспечивает только чтение интеграции с существующими таблицами Apache Hudi в Amazon S3.
Redis	Этот движок позволяет интегрировать ClickHouse с Redis.
The MySQL engine allows you to perform SELECT and INSERT queries on data that is stored on a remote MySQL server.	Документация для MySQL Table Engine
MaterializedPostgreSQL	Создает таблицу ClickHouse с первоначальным дампом данных из таблицы PostgreSQL и запускает процесс репликации.
S3 Table Engine	Этот движок обеспечивает интеграцию с экосистемой Amazon S3. Похож на движок HDFS, но предоставляет функции, специфичные для S3.
HDFS	Этот движок обеспечивает интеграцию с экосистемой Apache Hadoop, позволяя управлять данными в HDFS с помощью ClickHouse. Этот движок похож на движки File и URL, но предоставляет функции, специфичные для Hadoop.
ExternalDistributed	Движок ExternalDistributed позволяет выполнять запросы SELECT к данным, которые хранятся на удаленных серверах MySQL или PostgreSQL. Принимает движки MySQL или PostgreSQL в качестве аргумента, что позволяет осуществлять шардирование.
DeltaLake Table Engine	Этот движок обеспечивает только чтение интеграции с существующими таблицами Delta Lake в Amazon S3.
PostgreSQL Table Engine	Движок PostgreSQL позволяет выполнять запросы SELECT и INSERT к данным, хранящимся на удаленном сервере PostgreSQL.
AzureBlobStorage Table Engine	Этот движок обеспечивает интеграцию с экосистемой Azure Blob Storage.
ODBC	Позволяет ClickHouse подключаться к внешним базам данных через ODBC.
JDBC	Позволяет ClickHouse подключаться к внешним базам данных через JDBC.
NATS Engine	Этот движок позволяет интегрировать ClickHouse с NATS для публикации или подписки на сообщения, а также обработки новых сообщений по мере их поступления.
SQLite	Движок позволяет импортировать и экспортировать данные в SQLite и поддерживает запросы к таблицам SQLite напрямую из ClickHouse.
S3Queue Table Engine	Этот движок обеспечивает интеграцию с экосистемой Amazon S3 и позволяет потоковый импорт. Похож на движки Kafka и RabbitMQ, но предоставляет функции, специфичные для S3.
AzureQueue Table Engine	Этот движок обеспечивает интеграцию с экосистемой Azure Blob Storage, позволяя потоковый импорт данных.
TimeSeries Engine	Движок таблицы, хранящий временные ряды, т.е. набор значений, связанных с отметками времени и тегами (или метками).
MongoDB	Движок MongoDB — таблица только для чтения, которая позволяет считывать данные из удаленной коллекции.