Fivetran и ClickHouse Cloud

ClickHouse Supported

Обзор

Fivetran — это платформа автоматизированного перемещения данных, обеспечивающая перенос данных из, в и между вашими облачными платформами для работы с данными.

ClickHouse Cloud поддерживается в качестве пункта назначения (пункт назначения) в Fivetran, что позволяет загружать данные из различных источников в ClickHouse. Версия ClickHouse с открытым исходным кодом не поддерживается в качестве пункта назначения.

Коннектор пункта назначения совместно разрабатывается и поддерживается ClickHouse и Fivetran. Исходный код доступен на GitHub.

Примечание

Пункт назначения ClickHouse Cloud в настоящее время находится в стадии бета, но мы работаем над тем, чтобы вскоре сделать его общедоступным.

Ключевые возможности

• Совместимость с ClickHouse Cloud: используйте свою базу данных ClickHouse Cloud как пункт назначения для Fivetran.
• SaaS-модель развертывания: полностью управляется Fivetran, поэтому вам не нужно управлять собственной инфраструктурой.
• Режим History Mode (SCD Type 2): сохраняет полную историю всех версий записей для анализа на определенный момент времени и аудита.
• Настраиваемые размеры пакетов: Вы можете адаптировать Fivetran под свой сценарий использования, настроив размеры пакетов записи, выборки, mutation и окончательного удаления через файл конфигурации JSON.

Ограничения

• Миграции schema пока не поддерживаются, но мы работаем над этим.
• Добавление, удаление или изменение столбцов первичного ключа не поддерживается.
• Пользовательские настройки ClickHouse в командах CREATE TABLE не поддерживаются.
• Гранты на основе ролей поддерживаются не полностью. Проверка грантов в коннекторе учитывает только прямые пользовательские гранты. Вместо этого используйте прямые гранты.

Связанные страницы

• Технический справочник: соответствия типов, движки таблиц, столбцы метаданных и дополнительные настройки
• Устранение неполадок и лучшие практики: распространённые ошибки, рекомендации по оптимизации и запросы для отладки
• Пункт назначения ClickHouse для Fivetran на GitHub

Руководство по настройке

• Если вам нужны параметры конфигурации и общие технические сведения, см. технический справочник.
• Подробное руководство см. в руководстве по настройке в документации Fivetran.

Контакты и поддержка

Для пункта назначения ClickHouse в Fivetran используется модель разделения ответственности:

• ClickHouse разрабатывает и поддерживает код коннектора пункта назначения.
• Fivetran размещает коннектор и отвечает за перемещение данных, планирование пайплайнов и коннекторы источников.

Поддержку по пункту назначения ClickHouse в Fivetran предоставляют и Fivetran, и ClickHouse. По общим вопросам рекомендуем обращаться в Fivetran, так как именно они лучше всего знают платформу Fivetran. Если у вас есть вопросы или проблемы, связанные именно с ClickHouse, наша служба поддержки будет рада помочь. Создайте запрос в поддержку, чтобы задать вопрос или сообщить о проблеме.