Журнал изменений ClickHouse Cloud

В дополнение к этому списку изменений ClickHouse Cloud ознакомьтесь со страницей Cloud Compatibility.

Автоматически получайте обновления!

Подпишитесь на RSS-ленту журнала изменений Cloud

21 ноября 2025 г.

• ClickHouse Cloud теперь доступен в AWS Israel (Tel Aviv) — il-central-1
• Улучшен процесс онбординга в маркетплейсе для настройки организаций ClickHouse с выставлением счетов по подпискам marketplace с оплатой по мере использования или по индивидуальным предложениям.

14 ноября 2025 г.

• Мы рады сообщить, что ClickHouse Cloud теперь доступен в двух дополнительных публичных регионах:

  • GCP Japan (asia-northeast1)
  • AWS Seoul (Asia Pacific, ap-northeast-2) — теперь также поддерживается в ClickPipes

  Эти регионы ранее были доступны как частные регионы, а теперь открыты для всех пользователей.

• Terraform и API теперь поддерживают добавление тегов к сервисам и фильтрацию сервисов по тегам.

7 ноября 2025 г.

• Консоль ClickHouse Cloud теперь поддерживает настройку размеров реплик с шагом 1 vCPU и 4 GiB прямо из облачной консоли. Эти параметры доступны как при создании нового сервиса, так и при указании минимального и максимального размера реплик на странице настроек.
• Пользовательские аппаратные профили (доступны в тарифе Enterprise) теперь поддерживают переход в режим простоя (idling).
• ClickHouse Cloud теперь предлагает упрощённый процесс покупки через AWS Marketplace с отдельными вариантами для оплаты по мере использования и контрактов с обязательствами по расходам.
• Для пользователей ClickStack в ClickHouse Cloud теперь доступна система оповещений (alerting). Пользователи могут создавать и управлять оповещениями напрямую в интерфейсе HyperDX по логам, метрикам и трассировкам — без дополнительной настройки, дополнительной инфраструктуры или сервисов и без конфигурационных файлов. Оповещения интегрируются со Slack, PagerDuty и другими системами. Для получения дополнительной информации см. документацию по оповещениям.

17 октября 2025 г.

• Service Monitoring — панель использования ресурсов
  Отображение метрик использования CPU и памяти изменится: вместо среднего значения будет показываться максимальное значение использования за выбранный период времени, чтобы лучше выявлять случаи недостаточного выделения ресурсов. Кроме того, метрика использования CPU будет отображать показатель на уровне Kubernetes, который ближе соответствует метрике, используемой автоскейлером ClickHouse Cloud.
• Внешние бакеты
  ClickHouse Cloud теперь позволяет экспортировать резервные копии напрямую в вашу учетную запись облачного провайдера. Подключите внешний бакет облачного хранилища — AWS S3, Google Cloud Storage или Azure Blob Storage — и возьмите управление резервными копиями под свой контроль.

29 августа 2025 г.

• ClickHouse Cloud Azure Private Link перешёл от использования фильтров по Resource GUID к фильтрам по Resource ID для идентификации ресурсов. Вы по-прежнему можете использовать устаревший Resource GUID, который сохраняет обратную совместимость, но мы рекомендуем перейти на фильтры по Resource ID. Подробности миграции см. в документации по Azure Private Link.

22 августа 2025 г.

• ClickHouse Connector for AWS Glue
  Теперь вы можете использовать официальный ClickHouse Connector for AWS Glue, доступный в AWS Marketplace. Коннектор использует бессерверный движок AWS Glue на базе Apache Spark для извлечения, преобразования и загрузки данных при интеграции между ClickHouse и другими источниками данных. Начните работу, следуя инструкциям в посте в блоге о том, как создавать таблицы, записывать и считывать данные между ClickHouse и Spark.
• Изменение минимального количества реплик в сервисе
  Сервисы, которые были масштабированы до большего числа реплик, теперь могут быть масштабированы обратно до одной реплики (ранее минимум составлял 2 реплики). Примечание: сервисы с одной репликой имеют пониженную доступность и не рекомендуются для использования в продуктивной среде.
• ClickHouse Cloud по умолчанию начнет отправлять уведомления, связанные с масштабированием сервисов и обновлениями версий сервисов, пользователям с административными ролями. Пользователи могут настроить параметры уведомлений в своих настройках уведомлений.

13 августа 2025 г.

• ClickPipes для MongoDB CDC теперь в режиме закрытого предварительного просмотра Теперь вы можете использовать ClickPipes для репликации данных из MongoDB в ClickHouse Cloud всего за несколько кликов, что позволяет выполнять аналитику в режиме реального времени без необходимости во внешних ETL-инструментах. Коннектор поддерживает непрерывную репликацию, а также одноразовые миграции и совместим с MongoDB Atlas и самостоятельно развернутыми инсталляциями MongoDB. Ознакомьтесь с публикацией в блоге с обзором коннектора MongoDB CDC и запишитесь на ранний доступ здесь!

8 августа 2025 г.

• Уведомления: Теперь пользователи будут получать уведомление в интерфейсе при запуске обновления их сервиса до новой версии ClickHouse. Дополнительные уведомления по email и в Slack можно настроить через центр уведомлений.
• ClickPipes: Поддержка Azure Blob Storage (ABS) ClickPipes была добавлена в провайдер Terraform для ClickHouse. См. документацию провайдера для примера программного создания ABS ClickPipe.
  • [Исправление ошибки] ClickPipes для объектного хранилища, записывающие данные в целевую таблицу с использованием движка Null, теперь отображают метрики «Total records» и «Data ingested» в интерфейсе.
  • [Исправление ошибки] Селектор «Time period» для метрик в интерфейсе по умолчанию устанавливался в значение «24 hours» независимо от выбранного периода времени. Сейчас это исправлено, и интерфейс корректно обновляет графики для выбранного периода.
• Межрегиональный приватный канал (AWS) теперь доступен в статусе General Availability (GA). См. документацию для списка поддерживаемых регионов.

31 июля 2025 г.

Вертикальное масштабирование для ClickPipes теперь доступно

Вертикальное масштабирование теперь доступно для потоковых ClickPipes. Эта функция позволяет управлять размером ресурсов каждой реплики, помимо количества реплик (горизонтальное масштабирование). Страница с подробной информацией о каждом ClickPipe теперь также включает данные об использовании CPU и памяти по каждой реплике, что помогает лучше понимать нагрузки и с уверенностью планировать операции по изменению размеров ресурсов.

24 июля 2025 г.

ClickPipes для MySQL CDC теперь в публичной бета-версии

Коннектор MySQL CDC в ClickPipes теперь общедоступен в рамках публичной бета-версии. Всего за несколько кликов вы можете начать репликацию данных из MySQL (или MariaDB) непосредственно в ClickHouse Cloud в режиме реального времени, без внешних зависимостей. Прочитайте пост в блоге с обзором коннектора и следуйте руководству по быстрому старту, чтобы быстро начать работу.

11 июля 2025 г.

• Новые сервисы теперь хранят метаданные баз данных и таблиц в централизованном SharedCatalog — новой модели координации и жизненного цикла объектов, которая обеспечивает:

  • DDL облачного масштаба, даже при высокой параллельности
  • Надежное удаление и новые DDL‑операции
  • Быстрый запуск и пробуждение, поскольку узлы без сохранения состояния теперь стартуют без зависимостей от диска
  • Вычисления без сохранения состояния как для собственных, так и для открытых форматов, включая Iceberg и Delta Lake

  Подробнее о SharedCatalog читайте в нашем блоге

• Теперь мы поддерживаем возможность запуска сервисов, соответствующих требованиям HIPAA, в GCP europe-west4

27 июня 2025 г.

• Теперь мы официально поддерживаем провайдера Terraform для управления привилегиями баз данных, который также совместим с самостоятельными (self-managed) развертываниями. Дополнительную информацию см. в блоге и нашей документации.
• Сервисы уровня Enterprise теперь могут подписываться на канал медленных релизов, чтобы откладывать обновления на две недели после обычного релиза, обеспечивая дополнительное время для тестирования.

13 июня 2025 г.

• Мы рады сообщить, что ClickHouse Cloud Dashboards теперь доступны в режиме общей доступности. Dashboards позволяют пользователям визуализировать результаты запросов на панелях, взаимодействовать с данными с помощью фильтров и параметров запросов, а также управлять совместным доступом.
• Фильтры IP-адресов для API-ключей: мы внедряем дополнительный уровень защиты для ваших взаимодействий с ClickHouse Cloud. При создании API-ключа вы можете настроить список разрешённых IP-адресов, чтобы ограничить места, откуда может использоваться этот API-ключ. Подробности см. в документации.

30 мая 2025 г.

• Мы рады объявить о переходе в статус General Availability (GA) ClickPipes для Postgres CDC в ClickHouse Cloud. Всего за несколько кликов вы можете реплицировать свои базы данных Postgres и получить сверхбыструю аналитическую обработку данных практически в реальном времени. Коннектор обеспечивает более быструю синхронизацию данных, задержку всего в несколько секунд, автоматическое применение изменений схемы, полностью безопасное подключение и многое другое. Подробности см. в блоге. Чтобы начать работу, следуйте инструкциям здесь.

• Мы добавили новые возможности для дашбордов SQL-консоли:

  • Совместный доступ: теперь вы можете делиться своим дашбордом с членами команды. Поддерживаются четыре уровня доступа, которые можно настраивать как глобально, так и для отдельных пользователей:
    • Write access: добавление/редактирование визуализаций, настроек обновления, взаимодействие с дашбордами через фильтры.
    • Owner: предоставление доступа к дашборду другим пользователям, удаление дашборда и все остальные права пользователя с уровнем доступа «write access».
    • Read-only access: просмотр и взаимодействие с дашбордом через фильтры.
    • No access: отсутствие доступа к просмотру дашборда.
  • Для уже созданных дашбордов администраторы организации могут назначать себя их владельцами.
  • Теперь вы можете добавлять таблицу или график из SQL-консоли на дашборд прямо из окна запроса.

• Мы набираем участников программы предварительного доступа (preview) для Distributed cache в AWS и GCP. Подробнее читайте в блоге.

16 мая 2025 г.

• Представлена панель мониторинга использования ресурсов (Resource Utilization Dashboard), которая предоставляет обзор ресурсов, потребляемых сервисом в ClickHouse Cloud. Следующие метрики собираются из системных таблиц и отображаются на этой панели:
  • Память и CPU: графики для CGroupMemoryTotal (выделенная память), CGroupMaxCPU (выделенный CPU), MemoryResident (используемая память) и ProfileEvent_OSCPUVirtualTimeMicroseconds (используемый CPU)
  • Передача данных: графики, показывающие входящий и исходящий трафик данных для ClickHouse Cloud. Подробнее см. здесь.
• Мы рады объявить о запуске нового миксина ClickHouse Cloud Prometheus/Grafana, созданного для упрощения мониторинга ваших сервисов ClickHouse Cloud. Этот миксин использует наш совместимый с Prometheus конечный API-адрес для бесшовной интеграции метрик ClickHouse в вашу существующую инсталляцию Prometheus и Grafana. В его состав входит преднастроенная панель мониторинга, которая обеспечивает наблюдаемость в режиме реального времени за состоянием и производительностью ваших сервисов. Дополнительную информацию см. в блоге о запуске.

18 апреля 2025 г.

• Представлена новая роль уровня организации Member и две новые роли уровня сервиса: Service Admin и Service Read Only. Member — это роль уровня организации, которая по умолчанию назначается пользователям SAML SSO и предоставляет только возможности входа в систему и обновления профиля. Роли Service Admin и Service Read Only для одного или нескольких сервисов могут быть назначены пользователям с ролями Member, Developer или Billing Admin. Для получения дополнительной информации см. "Access control in ClickHouse Cloud"
• В ClickHouse Cloud теперь доступны сервисы с поддержкой HIPAA и PCI в следующих регионах для клиентов уровня Enterprise: AWS eu-central-1, AWS eu-west-2, AWS us-east-2.
• Представлены уведомления для пользователей о состоянии ClickPipes. Эта функция отправляет автоматические оповещения о сбоях ClickPipes по электронной почте, через интерфейс ClickHouse Cloud и в Slack. Уведомления по электронной почте и через интерфейс включены по умолчанию и могут настраиваться отдельно для каждой ClickPipe. Для Postgres CDC ClickPipes оповещения также включают предупреждения о превышении порога replication slot (настраивается на вкладке Settings), определённые типы ошибок и шаги для самостоятельного устранения сбоев.
• Теперь открыта закрытая предварительная версия MySQL CDC. Это позволяет клиентам реплицировать базы данных MySQL в ClickHouse Cloud за несколько кликов, обеспечивая быструю аналитику и устраняя необходимость во внешних ETL-инструментах. Коннектор поддерживает как непрерывную репликацию, так и одноразовые миграции, независимо от того, развернут ли MySQL в облаке (RDS, Aurora, Cloud SQL, Azure и т. д.) или локально, в собственном дата-центре. Вы можете записаться на участие в закрытой предварительной версии, перейдя по этой ссылке.
• Представлен AWS PrivateLink для ClickPipes. Вы можете использовать AWS PrivateLink для установления защищённого соединения между VPC, сервисами AWS, вашими локальными системами и ClickHouse Cloud. Это можно сделать, не выводя трафик в публичный интернет при перемещении данных из источников, таких как Postgres, MySQL и MSK в AWS. Также поддерживается кросс-региональный доступ через конечные точки сервиса VPC (VPC service endpoints). Настройка подключения через PrivateLink теперь полностью доступна для самостоятельной настройки с помощью ClickPipes.

4 апреля 2025 года

• Уведомления в Slack для ClickHouse Cloud: ClickHouse Cloud теперь поддерживает уведомления в Slack о событиях биллинга, масштабирования и ClickPipes в дополнение к уведомлениям в консоли и по электронной почте. Эти уведомления отправляются через Slack-приложение ClickHouse Cloud. Администраторы организации могут настроить эти уведомления в центре уведомлений, указав каналы Slack, в которые должны отправляться уведомления.
• Пользователи, использующие сервисы Production и Development, теперь будут видеть стоимость использования ClickPipes и передачи данных в своих счетах на оплату.

21 марта 2025 г.

• Межрегиональное подключение через Private Link в AWS теперь доступно в бета-версии. Подробности по настройке и список поддерживаемых регионов см. в документации по ClickHouse Cloud Private Link.
• Максимальный размер реплики, доступный для сервисов в AWS, теперь составляет 236 ГиБ ОЗУ. Это позволяет эффективно использовать ресурсы, при этом гарантируя, что часть из них остается выделенной для фоновых процессов.

7 марта 2025 г.

• Новый API-эндпоинт UsageCost: спецификация API теперь поддерживает новый эндпоинт для получения информации об использовании. Это эндпоинт на уровне организации, и данные о стоимости использования можно запрашивать максимум за 31 день. Метрики, которые можно получить, включают Storage, Compute, Data Transfer и ClickPipes. Подробности см. в документации.
• Релиз Terraform-провайдера v2.1.0 поддерживает возможность включения MySQL-эндпоинта.

21 февраля 2025 г.

ClickHouse Bring Your Own Cloud (BYOC) для AWS теперь общедоступен

В этой модели развертывания компоненты плоскости данных (вычисления, хранилище, резервные копии, логи, метрики) запускаются в VPC клиента, в то время как плоскость управления (веб-доступ, API и выставление счетов) остаётся в VPC ClickHouse. Такая конфигурация идеально подходит для крупных нагрузок, которым необходимо соответствовать строгим требованиям к локализации данных, гарантируя, что все данные остаются внутри защищённой среды клиента.

• Для получения более подробной информации обратитесь к документации по BYOC или прочитайте наш анонс в блоге.
• Свяжитесь с нами, чтобы запросить доступ.

Коннектор Postgres CDC для ClickPipes

Коннектор Postgres CDC для ClickPipes позволяет пользователям бесшовно реплицировать свои базы данных Postgres в ClickHouse Cloud.

• Чтобы начать работу, обратитесь к документации по коннектору ClickPipes Postgres CDC.
• Для получения дополнительной информации о сценариях использования и возможностях ознакомьтесь с целевой страницей и анонсной записью в блоге.

Соответствие требованиям PCI для ClickHouse Cloud на AWS

ClickHouse Cloud теперь поддерживает сервисы, соответствующие требованиям PCI, для клиентов уровня Enterprise в регионах us-east-1 и us-west-2. Пользователи, которые хотят запустить сервис в среде, соответствующей требованиям PCI, могут обратиться в службу поддержки за помощью.

Прозрачное шифрование данных и управляемые клиентом ключи шифрования на Google Cloud Platform

Поддержка Transparent Data Encryption (TDE) и Customer Managed Encryption Keys (CMEK) теперь доступна для ClickHouse Cloud на Google Cloud Platform (GCP).

• Пожалуйста, обратитесь к документации по этим возможностям для получения дополнительной информации.

Доступность региона AWS Middle East (UAE)

Добавлена поддержка нового региона для ClickHouse Cloud, который теперь доступен в регионе AWS Middle East (UAE) me-central-1.

Ограничения (guardrails) ClickHouse Cloud

Чтобы способствовать лучшим практикам и обеспечить стабильное использование ClickHouse Cloud, мы вводим ограничения на количество таблиц, баз данных, партиций и частей в использовании.

• См. раздел ограничения использования документации для получения подробной информации.
• Если ваш сервис уже превышает эти лимиты, мы допустим увеличение ещё на 10%. Пожалуйста, свяжитесь со службой поддержки, если у вас есть вопросы.

27 января 2025 г.

Изменения в уровнях ClickHouse Cloud

Мы стремимся адаптировать наши продукты к постоянно меняющимся требованиям наших клиентов. С момента выхода в GA за последние два года ClickHouse Cloud существенно эволюционировал, и мы получили бесценные знания о том, как наши клиенты используют наши облачные сервисы.

Мы внедряем новые возможности для оптимизации конфигурации и экономической эффективности сервисов ClickHouse Cloud для ваших нагрузок. Среди них — разделение вычислительных ресурсов (compute-compute separation), высокопроизводительные типы машин и сервисы с единственной репликой (single-replica services). Мы также развиваем автоматическое масштабирование и управляемые обновления, чтобы они выполнялись более плавно и оперативно.

Мы добавляем новый уровень Enterprise, чтобы удовлетворить потребности самых требовательных клиентов и нагрузок, с акцентом на отраслевые требования к безопасности и соответствию, ещё более детальным контролем над базовым оборудованием и обновлениями, а также расширенными возможностями аварийного восстановления.

В поддержку этих изменений мы перерабатываем текущие уровни Development и Production, чтобы они более точно соответствовали тому, как наша расширяющаяся клиентская база использует наши предложения. Мы вводим уровень Basic, ориентированный на пользователей, тестирующих новые идеи и проекты, и уровень Scale, рассчитанный на пользователей, работающих с продуктивными нагрузками и данными в крупном масштабе.

Вы можете прочитать об этих и других функциональных изменениях в этом блоге. Существующим клиентам необходимо выбрать новый план. Информация для клиентов была отправлена по электронной почте администраторам организаций.

Warehouses: разделение вычислительных ресурсов (compute-compute separation) (GA)

Разделение вычислительных ресурсов (compute-compute separation) (также известное как Warehouses) теперь доступно в режиме General Availability; подробности см. в блоге и в документации.

Сервисы с единственной репликой

Мы вводим концепцию сервиса с единственной репликой (single-replica service) как в виде отдельного предложения, так и внутри warehouses. В виде отдельного сервиса single-replica сервисы ограничены по размеру и предназначены для небольших тестовых нагрузок. В составе warehouses single-replica сервисы могут развертываться в более крупных конфигурациях и использоваться для нагрузок, не требующих высокой доступности в масштабе, например для перезапускаемых ETL‑заданий.

Улучшения вертикального авто‑масштабирования

Мы внедряем новый механизм вертикального масштабирования для вычислительных реплик, который мы называем Make Before Break (MBB). Этот подход добавляет одну или несколько реплик нового размера до удаления старых реплик, предотвращая потерю производительности во время операций масштабирования. Исключая разрыв между удалением существующих реплик и добавлением новых, MBB обеспечивает более плавный и менее разрушительный процесс масштабирования. Это особенно полезно при масштабировании вверх, когда высокая утилизация ресурсов приводит к необходимости дополнительной мощности, поскольку преждевременное удаление реплик только усугубило бы дефицит ресурсов.

Горизонтальное масштабирование (GA)

Горизонтальное масштабирование теперь доступно в режиме General Availability. Пользователи могут добавлять дополнительные реплики для масштабирования сервиса «вширь» через API и облачную консоль. Информацию см. в документации.

Настраиваемые резервные копии

Теперь мы поддерживаем возможность экспорта резервных копий в собственный облачный аккаунт клиента; дополнительную информацию см. в документации.

Улучшения управляемых обновлений

Безопасные управляемые обновления обеспечивают значимую ценность для наших пользователей, позволяя им оставаться на актуальной версии базы данных по мере появления новых функций. В рамках этого релиза мы применили подход Make Before Break (MBB) к обновлениям, ещё больше снижая влияние на выполняющиеся рабочие нагрузки.

Поддержка HIPAA

Теперь мы поддерживаем HIPAA в совместимых регионах, включая AWS us-east-1, us-west-2 и GCP us-central1, us-east1. Клиенты, желающие подключиться к этой опции, должны подписать Business Associate Agreement (BAA) и развернуть сервис в совместимой версии региона. Дополнительную информацию о HIPAA см. в документации.

Планируемые обновления

Пользователи могут планировать обновления для своих сервисов. Эта функция поддерживается только для сервисов уровня Enterprise. Дополнительную информацию о планируемых обновлениях см. в документации.

Поддержка сложных типов в языковых клиентах

Golang, Python и NodeJS клиенты получили поддержку типов Dynamic, Variant и JSON.

Поддержка DBT для обновляемых материализованных представлений

DBT теперь поддерживает Refreshable Materialized Views в релизе 1.8.7.

Поддержка JWT-токенов

Добавлена поддержка аутентификации на основе JWT в JDBC-драйвере v2, clickhouse-java, Python и NodeJS клиентах.

Поддержка для JDBC/Java будет доступна в 0.8.0 после выхода этого релиза — ожидаемая дата пока не определена.

Улучшения интеграции с Prometheus

Мы добавили несколько улучшений для интеграции с Prometheus:

• Endpoint на уровне организации. Мы добавили улучшение в нашу интеграцию Prometheus для ClickHouse Cloud. В дополнение к метрикам на уровне сервиса API теперь включает endpoint для метрик на уровне организации. Этот новый endpoint автоматически собирает метрики для всех сервисов в вашей организации, упрощая экспорт метрик в ваш коллектор Prometheus. Эти метрики можно интегрировать с инструментами визуализации, такими как Grafana и Datadog, для более всеобъемлющего представления производительности вашей организации.

  Эта возможность уже доступна всем пользователям. Дополнительные сведения можно найти здесь.

• Фильтрация метрик. Мы добавили поддержку возврата отфильтрованного списка метрик в нашей интеграции Prometheus для ClickHouse Cloud. Эта функция помогает уменьшить размер ответа, позволяя сосредоточиться на метриках, которые критически важны для мониторинга работоспособности вашего сервиса.

  Эта функциональность доступна через необязательный параметр запроса в API, упрощая оптимизацию сбора данных и интеграцию с такими инструментами, как Grafana и Datadog.

  Функция фильтрации метрик уже доступна всем пользователям. Дополнительные сведения можно найти здесь.

20 декабря 2024 г.

Привязка подписки маркетплейса к организации

Теперь вы можете привязать новую подписку из маркетплейса к существующей организации в ClickHouse Cloud. После завершения оформления подписки в маркетплейсе и перехода в ClickHouse Cloud вы можете подключить ранее созданную организацию к новой подписке маркетплейса. С этого момента ресурсы в вашей организации будут оплачиваться через маркетплейс.

Принудительное истечение срока действия ключей OpenAPI

Теперь можно ограничить варианты срока действия API-ключей, чтобы вы не создавали бессрочные ключи OpenAPI. Свяжитесь с командой поддержки ClickHouse Cloud, чтобы включить эти ограничения для вашей организации.

Дополнительные адреса электронной почты для уведомлений

Администраторы организации (Org Admins) теперь могут добавлять дополнительные адреса электронной почты к конкретному уведомлению в качестве дополнительных получателей. Это полезно, если вы хотите отправлять уведомления на алиас или другим пользователям вашей организации, которые сами могут не быть пользователями ClickHouse Cloud. Чтобы настроить это, перейдите в раздел Notification Settings в облачной консоли и отредактируйте адреса электронной почты, которые должны получать уведомления.

6 декабря 2024 г.

BYOC (бета)

Bring Your Own Cloud для AWS теперь доступен в бета-версии. Эта модель развертывания позволяет вам разворачивать и запускать ClickHouse Cloud в вашем собственном AWS-аккаунте. Мы поддерживаем развертывания в более чем 11 регионах AWS, и в ближайшее время список будет расширяться. Пожалуйста, свяжитесь со службой поддержки для получения доступа. Обратите внимание, что этот вариант предназначен для крупномасштабных развертываний.

Коннектор Postgres Change Data Capture (CDC) в ClickPipes

Эта готовая интеграция позволяет клиентам реплицировать свои базы данных Postgres в ClickHouse Cloud всего за несколько кликов и использовать ClickHouse для сверхбыстрой аналитики. Вы можете использовать этот коннектор как для непрерывной репликации, так и для единовременных миграций из Postgres.

Dashboards (бета)

На этой неделе мы с радостью объявляем о запуске бета-версии Dashboards в ClickHouse Cloud. С помощью Dashboards пользователи могут превращать сохраненные запросы в визуализации, организовывать визуализации на дашбордах и взаимодействовать с дашбордами с помощью параметров запросов. Чтобы начать, следуйте документации по дашбордам.

Конечные точки Query API (GA)

Мы рады объявить о GA-релизе конечных точек Query API в ClickHouse Cloud. Конечные точки Query API позволяют всего за пару кликов развернуть RESTful API-эндпоинты для сохраненных запросов и начать потреблять данные в вашем приложении без необходимости разбираться с языковыми клиентами или сложной аутентификацией. С момента первоначального запуска мы выпустили ряд улучшений, включая:

• Снижение задержки эндпоинтов, особенно при холодном старте
• Расширенные RBAC-контролы для эндпоинтов
• Настраиваемые домены, разрешенные CORS
• Стриминг результатов
• Поддержку всех ClickHouse-совместимых форматов вывода

В дополнение к этим улучшениям мы рады анонсировать универсальные конечные точки Query API, которые, используя уже существующий фреймворк, позволяют выполнять произвольные SQL-запросы к вашим сервисам ClickHouse Cloud. Универсальные эндпоинты можно включить и настроить на странице настроек сервиса.

Чтобы начать, следуйте документации по Query API Endpoints.

Нативная поддержка JSON (бета)

Мы запускаем бета-версию нативной поддержки JSON в ClickHouse Cloud. Чтобы начать, пожалуйста, свяжитесь со службой поддержки для включения вашего облачного сервиса.

Векторный поиск с использованием индексов векторного сходства (ранний доступ)

Мы анонсируем индексы векторного сходства для приблизительного векторного поиска в режиме раннего доступа.

ClickHouse уже предлагает надежную поддержку векторных сценариев использования с широким набором функций расстояния и возможностью выполнять линейное сканирование. Кроме того, недавно мы добавили экспериментальный подход approximate vector search, основанный на библиотеке usearch и алгоритме поиска приблизительных ближайших соседей Hierarchical Navigable Small Worlds (HNSW).

Чтобы начать, пожалуйста, зарегистрируйтесь в списке ожидания на ранний доступ.

Пользователи ClickHouse-Connect (Python) и ClickHouse Kafka Connect

Были отправлены уведомления по электронной почте клиентам, у которых возникали проблемы, при которых клиенты могли получать исключение MEMORY_LIMIT_EXCEEDED.

Пожалуйста, обновитесь до:

• Kafka-Connect: > 1.2.5
• ClickHouse-Connect (Java): > 0.8.6

ClickPipes теперь поддерживает доступ к ресурсам между VPC в AWS

Теперь вы можете предоставить однонаправленный доступ к конкретному источнику данных, например AWS MSK. С доступом к ресурсам между VPC с использованием AWS PrivateLink и VPC Lattice вы можете делиться отдельными ресурсами между границами VPC и аккаунтов или даже из локальных сетей, не жертвуя конфиденциальностью и безопасностью при выходе в публичную сеть. Чтобы начать и настроить общий доступ к ресурсу, вы можете прочитать анонсирующую запись.

ClickPipes теперь поддерживает IAM для AWS MSK

Теперь вы можете использовать аутентификацию IAM для подключения к брокеру MSK с помощью ClickPipes для AWS MSK. Чтобы начать, ознакомьтесь с нашей документацией.

Максимальный размер реплики для новых сервисов в AWS

Теперь все новые сервисы, создаваемые в AWS, поддерживают максимальный размер реплики 236 GiB.

22 ноября 2024 г.

Встроенная расширенная панель наблюдаемости для ClickHouse Cloud

Ранее расширенная панель наблюдаемости, которая позволяет отслеживать метрики сервера ClickHouse и использование аппаратных ресурсов, была доступна только в open-source версии ClickHouse. Теперь эта функция доступна и в консоли ClickHouse Cloud.

Эта панель позволяет просматривать запросы на основе таблицы system.dashboards в едином интерфейсе. Перейдите на страницу Monitoring > Service Health, чтобы уже сегодня начать использовать расширенную панель наблюдаемости.

Автодополнение SQL на базе ИИ

Мы значительно улучшили автодополнение, позволяя получать инлайновые варианты завершения SQL по мере того, как вы пишете свои запросы, с помощью нового AI Copilot. Эту функцию можно включить, переключив настройку "Enable Inline Code Completion" для любого сервиса ClickHouse Cloud.

Новая роль «billing»

Теперь вы можете назначать пользователям вашей организации новую роль Billing, которая позволяет им просматривать и управлять платежной информацией без возможности настраивать или администрировать сервисы. Просто пригласите нового пользователя или отредактируйте роль существующего пользователя, чтобы назначить роль Billing.

8 ноября 2024 г.

Уведомления для клиентов в ClickHouse Cloud

ClickHouse Cloud теперь предоставляет уведомления в консоли и по электронной почте для ряда событий, связанных с выставлением счетов и масштабированием. Клиенты могут настроить эти уведомления через центр уведомлений в облачной консоли так, чтобы они отображались только в пользовательском интерфейсе, приходили по электронной почте или обоими способами. Вы можете на уровне сервиса настраивать категории и уровень критичности получаемых уведомлений.

В будущем мы добавим уведомления и для других событий, а также дополнительные способы их получения.

Подробности о том, как включить уведомления для вашего сервиса, см. в документации ClickHouse.

4 октября 2024 г.

В ClickHouse Cloud теперь доступны HIPAA-совместимые сервисы в бета-версии для GCP

Клиенты, которым требуется повышенный уровень безопасности для защищаемой медицинской информации (PHI), теперь могут подключиться к ClickHouse Cloud в Google Cloud Platform (GCP). ClickHouse реализовал административные, физические и технические меры защиты, предписанные Правилами безопасности HIPAA, а также предоставляет настраиваемые параметры безопасности, которые можно включать в зависимости от вашего конкретного варианта использования и нагрузки. Дополнительную информацию о доступных настройках безопасности смотрите на странице Security features.

Сервисы доступны в GCP us-central-1 для клиентов с типом сервиса Dedicated и требуют заключения соглашения о деловом партнёрстве (BAA, Business Associate Agreement). Свяжитесь с sales или support, чтобы запросить доступ к этой функции или присоединиться к списку ожидания для дополнительных регионов GCP, AWS и Azure.

Разделение вычислительных ресурсов (Compute-Compute Separation) теперь доступно в режиме частного предварительного просмотра для GCP и Azure

Мы недавно объявили о частном предварительном просмотре (Private Preview) для Compute-Compute Separation в AWS. Теперь оно доступно и для GCP, и для Azure.

Разделение вычислительных ресурсов позволяет назначать отдельные сервисы как сервисы с доступом на чтение-запись или только на чтение, что даёт возможность спроектировать оптимальную конфигурацию вычислительных ресурсов для вашего приложения с учётом стоимости и производительности. Подробности см. в документации.

Самостоятельное восстановление MFA с использованием кодов восстановления

Клиенты, использующие многофакторную аутентификацию, теперь могут получать коды восстановления, которые можно использовать в случае утери телефона или случайного удаления токена. Клиентам, впервые настраивающим MFA, код будет предоставлен в процессе настройки. Клиенты с уже настроенной MFA могут получить код восстановления, удалив существующий MFA‑токен и добавив новый.

Обновление ClickPipes: пользовательские сертификаты, показатели задержки и многое другое

Мы рады поделиться последними обновлениями ClickPipes — самого простого способа выполнять приём данных в ваш сервис ClickHouse. Эти новые функции призваны расширить ваш контроль над ингестией данных и обеспечить большую прозрачность показателей производительности.

Пользовательские сертификаты для аутентификации в Kafka

ClickPipes для Kafka теперь поддерживает пользовательские сертификаты для аутентификации брокеров Kafka, использующих SASL и публичный SSL/TLS. Вы можете легко загрузить собственный сертификат в разделе SSL Certificate при настройке ClickPipe, обеспечивая более безопасное подключение к Kafka.

Новые метрики задержки для Kafka и Kinesis

Прозрачность производительности имеет ключевое значение. В ClickPipes теперь доступен график задержки, позволяющий оценить время между публикацией сообщения (как из Kafka Topic, так и из Kinesis Stream) и его ингестией в ClickHouse Cloud. С помощью этой новой метрики вы можете более внимательно отслеживать производительность своих конвейеров данных и соответствующим образом их оптимизировать.

Управление масштабированием для Kafka и Kinesis (частная бета-версия)

Высокая пропускная способность может требовать дополнительных ресурсов для удовлетворения требований к объёму данных и задержке. Мы внедряем горизонтальное масштабирование для ClickPipes, доступное напрямую через нашу облачную консоль. Эта функция сейчас находится в частной бета-версии и позволяет более эффективно масштабировать ресурсы в соответствии с вашими требованиями. Свяжитесь с support, чтобы присоединиться к бете.

Ингестия необработанных сообщений для Kafka и Kinesis

Теперь появилась возможность выполнять приём всего сообщения Kafka или Kinesis без его разбора. ClickPipes теперь поддерживает виртуальный столбец _raw_message (virtual column), позволяющий пользователям сопоставлять полное сообщение с одним столбцом типа String. Это даёт вам гибкость при работе с сырыми данными по мере необходимости.

29 августа 2024 г.

Новый релиз Terraform provider — v1.0.0

Terraform позволяет программно управлять сервисами ClickHouse Cloud и хранить их конфигурацию как код. Наш Terraform provider был загружен почти 200 000 раз и теперь официально выпущен в версии v1.0.0. Эта версия включает улучшения, такие как более надежная логика повторных запросов, а также новый ресурс для подключения private endpoints к вашему сервису ClickHouse Cloud. Вы можете скачать Terraform provider здесь и просмотреть полный журнал изменений здесь.

Отчет 2024 SOC 2 Type II и обновленный сертификат ISO 27001

Мы рады сообщить о доступности нашего отчета 2024 SOC 2 Type II и обновленного сертификата ISO 27001, в которые включены недавно запущенные сервисы в Azure, а также сохранено покрытие сервисов в AWS и GCP.

Наш SOC 2 Type II демонстрирует нашу постоянную приверженность обеспечению безопасности, доступности, целостности обработки и конфиденциальности услуг, которые мы предоставляем пользователям ClickHouse. Для получения дополнительной информации ознакомьтесь с документом SOC 2 - SOC for Service Organizations: Trust Services Criteria, опубликованным American Institute of Certified Public Accountants (AICPA), и документом What is ISO/IEC 27001 от International Standards Organization (ISO).

Также посетите наш Trust Center для получения документов и отчетов по безопасности и соответствию требованиям.

15 августа 2024 г.

Разделение вычислительных ресурсов теперь в режиме Private Preview для AWS

В существующих сервисах ClickHouse Cloud реплики обрабатывают и чтение, и запись, и нет способа настроить определённую реплику так, чтобы она обрабатывала только один тип операций. В ближайшее время появится новая функция под названием разделение вычислительных ресурсов (Compute-compute separation), которая позволяет назначать отдельные сервисы как read-write или read-only, что даёт возможность спроектировать оптимальную вычислительную конфигурацию для вашего приложения с учётом стоимости и производительности.

Новая функция разделения вычислительных ресурсов позволяет создавать несколько групп вычислительных узлов, каждая со своей конечной точкой (endpoint), использующих одну и ту же папку объектного хранилища, а значит — одни и те же таблицы, представления и т. д. Подробнее о разделении вычислительных ресурсов см. здесь. Пожалуйста, свяжитесь со службой поддержки, если вы хотите получить доступ к этой функции в режиме Private Preview.

ClickPipes для S3 и GCS теперь в GA, поддержка непрерывного режима

ClickPipes — самый простой способ приёма данных в ClickHouse Cloud. Мы рады сообщить, что ClickPipes для S3 и GCS теперь Generally Available. ClickPipes поддерживает как однократный пакетный приём, так и «непрерывный режим» (continuous mode). Задача приёма загружает все файлы, соответствующие шаблону, из указанного удалённого бакета в целевую таблицу ClickHouse. В «непрерывном режиме» задача ClickPipes будет выполняться постоянно, осуществляя приём подходящих файлов, которые по мере появления добавляются в удалённый бакет объектного хранилища. Это позволит пользователям превратить любой бакет объектного хранилища в полноценную зону промежуточной обработки для приёма данных в ClickHouse Cloud. Подробнее о ClickPipes читайте в нашей документации.

18 июля 2024 г.

Endpoint метрик Prometheus теперь общедоступен

В нашем последнем журнале изменений ClickHouse Cloud мы анонсировали закрытое предварительное тестирование (Private Preview) экспорта метрик Prometheus из ClickHouse Cloud. Эта функция позволяет использовать ClickHouse Cloud API, чтобы передавать ваши метрики в инструменты визуализации, такие как Grafana и Datadog. Теперь эта функция стала общедоступной. Дополнительную информацию вы можете найти в нашей документации.

Инспектор таблиц в консоли ClickHouse Cloud

В ClickHouse есть команды, такие как DESCRIBE, которые позволяют исследовать таблицу и анализировать её схему. Эти команды выводят результат в консоль, но часто пользоваться ими неудобно, поскольку вам приходится комбинировать несколько запросов, чтобы получить все необходимые данные о ваших таблицах и столбцах.

Недавно мы запустили Table Inspector в облачной консоли, который позволяет получать важную информацию о таблицах и столбцах в пользовательском интерфейсе, без необходимости писать SQL. Вы можете опробовать Table Inspector для своих сервисов в облачной консоли. Он предоставляет информацию о вашей схеме, хранилище, сжатии и многом другом в одном унифицированном интерфейсе.

Новый Java Client API

Наш Java Client — один из самых популярных клиентов, используемых для подключения к ClickHouse. Мы хотели сделать его ещё проще и интуитивно понятнее, в том числе за счёт переработанного API и различных оптимизаций производительности. Эти изменения значительно упростят подключение к ClickHouse из ваших Java‑приложений. Подробнее о том, как использовать обновлённый Java Client, вы можете прочитать в этой публикации в блоге.

Новый анализатор включён по умолчанию

Последние несколько лет мы работаем над новым анализатором для анализа и оптимизации запросов. Этот анализатор улучшает производительность запросов и позволит нам внедрять дальнейшие оптимизации, включая более быстрые и эффективные операции JOIN. Ранее новым пользователям требовалось включать эту функцию с помощью настройки allow_experimental_analyzer. Теперь этот улучшенный анализатор по умолчанию доступен во всех новых сервисах ClickHouse Cloud.

Следите за обновлениями — мы планируем ещё множество оптимизаций для анализатора.

28 июня 2024 г.

ClickHouse Cloud для Microsoft Azure теперь общедоступен (General Availability)

Впервые мы объявили о поддержке Microsoft Azure в статусе Beta в мае этого года. В этом последнем облачном релизе мы рады сообщить, что наша поддержка Azure переходит из Beta в режим General Availability. ClickHouse Cloud теперь доступен на всех трех основных облачных платформах: AWS, Google Cloud Platform и Microsoft Azure.

Этот релиз также включает поддержку подписок через Microsoft Azure Marketplace. На начальном этапе сервис будет доступен в следующих регионах:

• Соединенные Штаты: West US 3 (Аризона)
• Соединенные Штаты: East US 2 (Вирджиния)
• Европа: Germany West Central (Франкфурт)

Если вы хотите, чтобы был поддержан какой-либо конкретный регион, пожалуйста, свяжитесь с нами.

Аналитика журнала запросов (Query log insights)

Наш новый интерфейс Query Insights в облачной консоли значительно упрощает работу со встроенным журналом запросов ClickHouse. Таблица ClickHouse system.query_log является ключевым источником информации для оптимизации запросов, отладки и мониторинга общего состояния и производительности кластера. Есть лишь одна оговорка: с более чем 70 полями и несколькими записями для одного запроса интерпретация журнала запросов связана с довольно высоким порогом вхождения. Эта начальная версия Query Insights служит основой для дальнейшей работы по упрощению типовых сценариев отладки и оптимизации запросов. Нам очень важно ваше мнение по мере развития этой функциональности, поэтому, пожалуйста, делитесь обратной связью — ваш вклад будет чрезвычайно ценен.

Prometheus endpoint для метрик (закрытая предварительная версия)

Это, пожалуй, одна из самых востребованных функций: теперь вы можете экспортировать метрики Prometheus из ClickHouse Cloud в Grafana и Datadog для визуализации. Prometheus предоставляет open-source решение для мониторинга ClickHouse и настройки пользовательских оповещений. Доступ к метрикам Prometheus для вашего сервиса ClickHouse Cloud осуществляется через ClickHouse Cloud API. В данный момент эта функция находится в статусе Private Preview. Пожалуйста, свяжитесь с командой поддержки, чтобы включить эту функцию для вашей организации.

Прочие функции

• Настраиваемые резервные копии для настройки пользовательских политик резервного копирования, таких как частота, срок хранения и расписание, теперь доступны в режиме General Availability.

13 июня 2024 г.

Настраиваемые смещения для Kafka ClickPipes Connector (бета-версия)

До недавнего времени при настройке нового Kafka Connector for ClickPipes он всегда начинал читать данные с самого начала топика Kafka. В таких случаях коннектор может быть недостаточно гибким для конкретных сценариев, когда требуется повторно обработать исторические данные, отслеживать только новые входящие данные или возобновить обработку с точной позиции.

ClickPipes for Kafka получил новую функцию, которая повышает гибкость и контроль над чтением данных из топиков Kafka. Теперь вы можете настраивать смещение, с которого будут считываться данные.

Доступны следующие варианты:

• From the beginning: начать чтение данных с самого начала топика Kafka. Этот вариант оптимален для пользователей, которым необходимо повторно обработать все исторические данные.
• From latest: начать чтение данных с самого последнего смещения. Полезно для пользователей, которых интересуют только новые сообщения.
• From a timestamp: начать чтение данных из сообщений, которые были сгенерированы в момент или после указанной метки времени. Эта возможность обеспечивает более точный контроль и позволяет возобновить обработку с конкретного момента времени.

Подключение сервисов к каналу быстрого выпуска обновлений (Fast)

Канал быстрого выпуска обновлений (Fast release channel) позволяет вашим сервисам получать обновления раньше официального графика релизов. Ранее для включения этой функции требовалась помощь команды поддержки. Теперь вы можете включить эту функцию для своих сервисов напрямую в консоли ClickHouse Cloud. Просто перейдите в раздел Settings и нажмите Enroll in fast releases. После этого ваш сервис будет получать обновления сразу после их выхода.

Поддержка горизонтального масштабирования в Terraform

ClickHouse Cloud поддерживает горизонтальное масштабирование, то есть возможность добавлять к вашим сервисам дополнительные реплики того же размера. Горизонтальное масштабирование повышает производительность и степень параллелизма при выполнении одновременных запросов. Ранее для добавления большего числа реплик требовалось использовать консоль ClickHouse Cloud или API. Теперь вы можете использовать Terraform для добавления или удаления реплик вашего сервиса, что позволяет программно масштабировать сервисы ClickHouse по мере необходимости.

Подробности см. в ClickHouse Terraform provider.

30 мая 2024 г.

Делитесь запросами с коллегами

Когда вы пишете SQL‑запрос, велика вероятность, что он будет полезен и другим людям в вашей команде. Раньше вам пришлось бы отправлять запрос через Slack или по электронной почте, и у коллег не было способа автоматически получать обновления этого запроса, если вы его измените.

Мы рады сообщить, что теперь вы можете легко делиться запросами через консоль ClickHouse Cloud. Из редактора запросов вы можете поделиться запросом со всей командой или с конкретным членом команды. Вы также можете указать, будет ли у них доступ только на чтение или также на запись. Нажмите кнопку Share в редакторе запросов, чтобы опробовать новую возможность совместного использования запросов.

ClickHouse Cloud для Microsoft Azure теперь в бета-версии

Мы наконец запустили возможность создавать службы ClickHouse Cloud в Microsoft Azure. Уже многие наши клиенты используют ClickHouse Cloud в Azure в продакшене в рамках программы Private Preview. Теперь любой может создать собственную службу в Azure. Все ваши любимые функции ClickHouse, поддерживаемые в AWS и GCP, будут работать и в Azure.

Мы ожидаем, что ClickHouse Cloud для Azure будет готов к общедоступному релизу (General Availability) в ближайшие несколько недель. Прочитайте эту публикацию в блоге, чтобы узнать больше, или создайте новую службу в Azure через консоль ClickHouse Cloud.

Примечание: службы уровня Development для Azure в настоящее время не поддерживаются.

Настройка Private Link через консоль ClickHouse Cloud

Функция Private Link позволяет подключать ваши службы ClickHouse Cloud к внутренним сервисам в аккаунте вашего облачного провайдера без вывода трафика в публичный интернет, что снижает затраты и повышает безопасность. Ранее это было сложно настроить и требовало использования ClickHouse Cloud API.

Теперь вы можете настроить частные конечные точки всего за несколько кликов прямо из консоли ClickHouse Cloud. Просто перейдите в Settings вашей службы, затем в раздел Security и нажмите Set up private endpoint.

17 мая 2024 г.

Ингестия данных из Amazon Kinesis с помощью ClickPipes (бета)

ClickPipes — это эксклюзивный сервис, предоставляемый ClickHouse Cloud для ингестии данных без написания кода. Amazon Kinesis — полностью управляемый потоковый сервис AWS для приёма и хранения потоковых данных с целью последующей обработки. Мы рады запустить бета-версию ClickPipes для Amazon Kinesis — одной из наиболее востребованных интеграций. Мы планируем добавлять новые интеграции в ClickPipes, поэтому дайте нам знать, поддержку какого источника данных вы хотели бы видеть. Подробнее об этой возможности можно прочитать здесь.

Вы можете попробовать новую интеграцию Amazon Kinesis для ClickPipes в облачной консоли:

Настраиваемые резервные копии (закрытый предпросмотр)

Резервные копии важны для любой базы данных (независимо от её надёжности), и с самого первого дня ClickHouse Cloud мы относимся к ним максимально серьёзно. На этой неделе мы запустили функцию Configurable Backups, которая обеспечивает гораздо большую гибкость резервного копирования вашего сервиса. Теперь вы можете управлять временем запуска, периодом хранения и частотой. Эта функция доступна для сервисов Production и Dedicated и недоступна для сервисов Development. Поскольку эта функция находится в закрытом предпросмотре, обратитесь по адресу support@clickhouse.com, чтобы включить её для вашего сервиса. Подробнее о настраиваемых резервных копиях можно прочитать здесь.

Создание API из ваших SQL-запросов (бета)

Когда вы пишете SQL-запрос для ClickHouse, вам по-прежнему нужно подключаться к ClickHouse через драйвер, чтобы передать результат запроса в ваше приложение. Теперь с нашей новой функцией Query Endpoints вы можете выполнять SQL-запросы напрямую из API без какой-либо конфигурации. Вы можете настроить Query Endpoints так, чтобы они возвращали JSON, CSV или TSV. Нажмите кнопку "Share" в облачной консоли, чтобы опробовать эту новую возможность с вашими запросами. Подробнее о Query Endpoints можно прочитать здесь.

Официальная сертификация ClickHouse стала доступна

В обучающем курсе ClickHouse Develop доступно 12 бесплатных модулей. До этой недели не существовало официального способа подтвердить свою экспертизу в ClickHouse. Мы недавно запустили официальный экзамен для получения статуса ClickHouse Certified Developer. Успешная сдача этого экзамена позволяет продемонстрировать текущим и потенциальным работодателям вашу компетентность в ClickHouse по таким темам, как ингестия данных, моделирование, анализ, оптимизация производительности и другим. Вы можете пройти экзамен здесь или прочитать подробнее о сертификации ClickHouse в этой публикации в блоге.

25 апреля 2024 г.

Загрузка данных из S3 и GCS с помощью ClickPipes

Вы могли заметить, что в недавно обновлённой облачной консоли появился новый раздел Data sources. Страница Data sources основана на ClickPipes — встроенной функции ClickHouse Cloud, которая позволяет легко загружать данные из различных источников в ClickHouse Cloud.

В последнем обновлении ClickPipes появилась возможность напрямую загружать данные из Amazon S3 и Google Cloud Storage. Хотя вы по‑прежнему можете использовать встроенные табличные функции, ClickPipes — это полностью управляемый сервис через наш интерфейс, который позволяет выполнять приём данных из S3 и GCS всего в несколько кликов. Эта функция пока находится в статусе Private Preview, но вы уже можете опробовать её в облачной консоли.

Использование Fivetran для загрузки данных из более чем 500 источников в ClickHouse Cloud

ClickHouse может очень быстро выполнять запросы ко всем вашим крупным наборам данных, но сначала данные должны быть загружены в ClickHouse. Благодаря широкому набору коннекторов Fivetran пользователи теперь могут быстро загружать данные из более чем 500 источников. Независимо от того, нужно ли вам загружать данные из Zendesk, Slack или любых других привычных приложений, новый пункт назначения ClickHouse в Fivetran позволяет использовать ClickHouse в качестве целевой базы данных для данных ваших приложений.

Это интеграция с открытым исходным кодом, созданная за многие месяцы напряжённой работы нашей команды по интеграциям. Вы можете ознакомиться с нашим постом о релизе в блоге и репозиторием на GitHub.

Другие изменения

Изменения в консоли

• Поддержка форматов вывода в SQL-консоли

Изменения в интеграциях

• Коннектор ClickPipes Kafka поддерживает многоброкерную конфигурацию
• Коннектор PowerBI поддерживает указание параметров конфигурации ODBC-драйвера

18 апреля 2024 г.

Регион AWS Tokyo теперь доступен для ClickHouse Cloud

В этом релизе добавлен новый регион AWS Tokyo (ap-northeast-1) для ClickHouse Cloud. Поскольку мы хотим, чтобы ClickHouse была самой быстрой базой данных, мы постоянно добавляем новые регионы во всех облаках, чтобы максимально снизить задержку. Вы можете создать новый сервис в регионе Tokyo в обновленной облачной консоли.

Другие изменения:

Изменения в консоли

• Поддержка формата Avro для ClickPipes для Kafka теперь доступна в статусе General Availability
• Реализована полная поддержка импорта ресурсов (сервисов и приватных конечных точек) для Terraform-провайдера

Изменения в интеграциях

• Крупный стабильный релиз клиента Node.js: расширенная поддержка TypeScript для query и ResultSet, конфигурация через URL
• Kafka Connector: исправлена ошибка с игнорированием исключений при записи в DLQ, добавлена поддержка типа Avro Enum, опубликованы руководства по использованию коннектора на MSK и Confluent Cloud
• Grafana: исправлена поддержка типа Nullable в UI, исправлена поддержка динамического имени таблицы для трассировок OTel
• DBT: исправлены настройки моделей для пользовательской материализации.
• Java client: исправлена ошибка с некорректным разбором кода ошибки
• Python client: исправлена привязка параметров для числовых типов, исправлены ошибки с привязкой списков чисел в запросах, добавлена поддержка SQLAlchemy Point.

4 апреля 2024 г.

Представляем новую консоль ClickHouse Cloud

В этом релизе мы запускаем закрытый предварительный просмотр новой облачной консоли.

В ClickHouse мы постоянно думаем о том, как улучшить опыт разработчиков. Мы понимаем, что недостаточно предоставить самое быстрое в мире хранилище данных для работы в реальном времени — им также должно быть легко пользоваться и просто управлять.

Тысячи пользователей ClickHouse Cloud выполняют миллиарды запросов в нашей SQL-консоли каждый месяц, поэтому мы решили инвестировать в создание консоли мирового класса, чтобы упростить взаимодействие с вашими сервисами ClickHouse Cloud как никогда прежде. Наша новая облачная консоль объединяет отдельный SQL-редактор и консоль управления в одном интуитивно понятном интерфейсе.

Отдельные клиенты получат предварительный доступ к нашему новому интерфейсу облачной консоли — единому и удобному способу исследования и управления вашими данными в ClickHouse. Пожалуйста, свяжитесь с нами по адресу support@clickhouse.com, если вы хотите получить приоритетный доступ.

28 марта 2024 г.

В этом релизе добавлена поддержка Microsoft Azure, горизонтальное масштабирование через API и каналы релизов в режиме закрытого предварительного просмотра.

Общие обновления

• Добавлена поддержка Microsoft Azure в режиме закрытого предварительного просмотра. Чтобы получить доступ, обратитесь к менеджеру по работе с клиентами или в службу поддержки либо присоединитесь к листу ожидания.
• Введены каналы релизов – возможность задавать время обновлений в зависимости от типа окружения. В этом релизе мы добавили канал релизов "fast", который позволяет обновлять тестовые и другие непроизводственные окружения раньше, чем производственные (для включения обратитесь в службу поддержки).

Изменения в администрировании

• Добавлена поддержка настройки горизонтального масштабирования через API (закрытый предварительный просмотр, для включения обратитесь в службу поддержки)
• Улучшено автоматическое масштабирование для увеличения ресурсов сервисов, сталкивающихся с ошибками «out of memory» при запуске
• Добавлена поддержка CMEK для AWS через Terraform-провайдер

Изменения в Console

• Добавлена поддержка входа через учетную запись Microsoft (social login)
• Добавлены возможности совместного использования параметризованных запросов в SQL Console
• Существенно улучшена производительность редактора запросов (задержка снижена с 5 до 1,5 секунды в некоторых регионах ЕС)

Изменения в интеграциях

• ClickHouse OpenTelemetry exporter: добавлена поддержка движка реплицируемых таблиц ClickHouse и добавлены интеграционные тесты
• ClickHouse DBT adapter: добавлена поддержка макроса материализации для словарей, тестов поддержки выражений TTL
• ClickHouse Kafka Connect Sink: добавлена совместимость с механизмом обнаружения плагинов Kafka (вклад сообщества)
• ClickHouse Java Client: представлен новый пакет для нового клиентского API и добавлено покрытие тестами для Cloud-тестов
• ClickHouse NodeJS Client: расширены тесты и документация для нового поведения HTTP keep-alive. Доступно, начиная с релиза v0.3.0
• ClickHouse Golang Client: исправлена ошибка для Enum в качестве ключа в Map; исправлена ошибка, при которой соединение с ошибкой оставалось в пуле соединений (вклад сообщества)
• ClickHouse Python Client: добавлена поддержка потоковой передачи результатов запросов через PyArrow (вклад сообщества)

Обновления безопасности

• В ClickHouse Cloud внесены изменения, предотвращающие уязвимость "Role-based Access Control is bypassed when query caching is enabled" (CVE-2024-22412)

14 марта 2024 г.

В этом релизе в режиме раннего доступа становится доступен новый интерфейс облачной консоли, ClickPipes для пакетной загрузки из S3 и GCS, а также поддержка формата Avro в ClickPipes для Kafka. Также версия базы данных ClickHouse обновлена до 24.1, что добавляет поддержку новых функций, а также оптимизации производительности и использования ресурсов.

Изменения в консоли

• Новый интерфейс облачной консоли доступен в режиме раннего доступа (пожалуйста, свяжитесь со службой поддержки, если вы заинтересованы в участии).
• ClickPipes для пакетной загрузки из S3 и GCS доступны в режиме раннего доступа (пожалуйста, свяжитесь со службой поддержки, если вы заинтересованы в участии).
• Поддержка формата Avro в ClickPipes для Kafka доступна в режиме раннего доступа (пожалуйста, свяжитесь со службой поддержки, если вы заинтересованы в участии).

Обновление версии ClickHouse

• Оптимизации для FINAL, улучшения векторизации, более быстрые агрегации — подробности см. в блоге о релизе 23.12.
• Новые функции для обработки punycode, вычисления схожести строк, обнаружения выбросов, а также оптимизации использования памяти при слияниях и в Keeper — подробности см. в блоге о релизе 24.1 и презентации.
• Эта версия ClickHouse Cloud основана на 24.1; вы можете найти десятки новых возможностей, улучшений производительности и исправлений ошибок. Подробности см. в журналах изменений основной базы данных.

Изменения в интеграциях

• Grafana: Исправлена миграция дашбордов для v4, логика ad-hoc‑фильтрации
• Tableau Connector: Исправлена функция DATENAME и округление для аргументов типа «real»
• Kafka Connector: Исправлена NPE при инициализации соединения, добавлена возможность указывать параметры JDBC-драйвера
• Golang client: Уменьшен объем потребляемой памяти при обработке ответов, исправлены экстремальные значения для Date32, исправлено сообщение об ошибках при включенном сжатии
• Python client: Улучшена поддержка часовых поясов в параметрах datetime, повышена производительность для Pandas DataFrame

29 февраля 2024 г.

В этом релизе улучшено время загрузки приложения SQL-консоли, добавлена поддержка аутентификации SCRAM-SHA-256 в ClickPipes и расширена поддержка вложенных структур в Kafka Connect.

Изменения в консоли

• Оптимизировано время начальной загрузки приложения SQL-консоли
• Исправлено состояние гонки в SQL-консоли, приводившее к ошибке «authentication failed»
• Исправлено поведение на странице мониторинга, где последнее значение выделения памяти иногда отображалось некорректно
• Исправлено поведение, при котором SQL-консоль иногда отправляла дублирующиеся команды KILL QUERY
• В ClickPipes добавлена поддержка метода аутентификации SCRAM-SHA-256 для источников данных на базе Kafka

Изменения в интеграциях

• Kafka Connector: расширена поддержка сложных вложенных структур (Array, Map); добавлена поддержка типа FixedString; добавлена поддержка ингестии в несколько баз данных
• Metabase: исправлена несовместимость с ClickHouse версии ниже 23.8
• DBT: добавлена возможность передавать настройки при создании моделей
• Node.js client: добавлена поддержка длительных запросов (>1 часа) и более корректная обработка пустых значений

15 февраля 2024 г.

В этом релизе обновлена версия ядра базы данных, добавлена возможность настройки приватных подключений через Terraform и добавлена поддержка семантики «ровно один раз» для асинхронных вставок через Kafka Connect.

Обновление версии ClickHouse

• Движок таблиц S3Queue для непрерывной, плановой загрузки данных из S3 готов к промышленной эксплуатации — подробности см. в блоге о релизе 23.11.
• Существенно повышена производительность для FINAL, улучшена векторизация SIMD-инструкций, что приводит к более быстрым запросам — подробности см. в блоге о релизе 23.12.
• Эта версия ClickHouse Cloud основана на 23.12, в ней десятки новых возможностей, улучшений производительности и исправлений ошибок. Подробности см. в changelog ядра базы данных.

Изменения в Console

• Добавлена возможность настройки AWS Private Link и GCP Private Service Connect через провайдер Terraform
• Повышена отказоустойчивость при импорте данных из удалённых файлов
• Добавлена панель с подробной информацией о статусе импорта для всех операций импорта данных
• Добавлена поддержка учётных данных key/secret key для импорта данных из S3

Изменения в интеграциях

• Kafka Connect
  • Поддержка async_insert с семантикой «ровно один раз» (по умолчанию отключено)
• Клиент на Go
  • Исправлена привязка DateTime
  • Улучшена производительность пакетных вставок
• Клиент на Java
  • Исправлена проблема с сжатием запросов

Изменения настроек

• use_mysql_types_in_show_columns больше не требуется. Он будет автоматически включён при подключении через интерфейс MySQL.
• async_insert_max_data_size теперь имеет значение по умолчанию 10 MiB

2 февраля 2024 г.

В этом релизе стали доступны ClickPipes для Azure Event Hub, значительно улучшен процесс навигации по логам и трейсам с использованием коннектора ClickHouse для Grafana версии v4, а также появилась поддержка инструментов управления схемой баз данных Flyway и Atlas.

Изменения в консоли

• Добавлена поддержка ClickPipes для Azure Event Hub
• Новые сервисы запускаются с тайм-аутом простоя по умолчанию 15 минут

Изменения в интеграциях

• Источник данных ClickHouse для Grafana релиз v4
  • Полностью переработан конструктор запросов, теперь есть специализированные редакторы для Table, Logs, Time Series и Traces
  • Полностью переработан генератор SQL для поддержки более сложных и динамических запросов
  • Добавлена полноценная поддержка OpenTelemetry в представлениях Logs и Traces
  • Расширена конфигурация, чтобы можно было указывать таблицы и столбцы по умолчанию для Logs и Traces
  • Добавлена возможность указывать произвольные HTTP-заголовки
  • И множество других улучшений — смотрите полный changelog
• Инструменты управления схемой баз данных
  • Flyway добавил поддержку ClickHouse
  • Ariga Atlas добавил поддержку ClickHouse
• Kafka Connector Sink
  • Оптимизирована ингестия в таблицу со значениями по умолчанию
  • Добавлена поддержка строковых дат в DateTime64
• Metabase
  • Добавлена поддержка подключения к нескольким базам данных

18 января 2024 г.

В этом релизе добавлен новый регион в AWS (Лондон / eu-west-2), добавлена поддержка ClickPipes для Redpanda, Upstash и Warpstream, а также улучшена надёжность основной функциональности базы данных is_deleted.

Общие изменения

• Новый регион AWS: Лондон (eu-west-2)

Изменения в консоли

• Добавлена поддержка ClickPipes для Redpanda, Upstash и Warpstream
• Механизм аутентификации ClickPipes сделан настраиваемым в UI

Изменения в интеграциях

• Java-клиент:
  • Изменения, нарушающие обратную совместимость: удалена возможность указывать произвольные URL-адреса в вызове. Эта функциональность была удалена из ClickHouse
  • Помечены как устаревшие: Java CLI-клиент и пакеты gRPC
  • Добавлена поддержка формата RowBinaryWithDefaults для уменьшения размера пакета и нагрузки на экземпляр ClickHouse (по запросу Exabeam)
  • Диапазоны значений Date32 и DateTime64 приведены в соответствие с ClickHouse, обеспечена совместимость с типом Spark Array string, улучшен механизм выбора узлов
• Kafka Connector: Добавлен JMX-дашборд для мониторинга в Grafana
• PowerBI: Настройки ODBC-драйвера сделаны настраиваемыми в UI
• JavaScript-клиент: Сделана доступной информация об итоговой статистике запроса, добавлена возможность указывать подмножество конкретных столбцов для вставки, параметр keep_alive сделан настраиваемым для веб-клиента
• Python-клиент: Добавлена поддержка типа Nothing для SQLAlchemy

Изменения, связанные с надёжностью

• Изменение, нарушающее обратную совместимость и затрагивающее пользователей: ранее две функции (is_deleted и OPTIMIZE CLEANUP) при определённых условиях могли приводить к повреждению данных в ClickHouse. Чтобы защитить целостность данных наших пользователей, сохранив при этом основную функциональность, мы изменили принцип работы этой функциональности. В частности, настройка MergeTree clean_deleted_rows теперь помечена как устаревшая и больше не оказывает эффекта. Ключевое слово CLEANUP по умолчанию не разрешено (для его использования необходимо включить allow_experimental_replacing_merge_with_cleanup). Если вы решите использовать CLEANUP, необходимо убедиться, что оно всегда используется совместно с FINAL, и вы должны гарантировать, что строки со старыми версиями больше не будут вставляться после выполнения OPTIMIZE FINAL CLEANUP.

18 декабря 2023 г.

В этом релизе добавлен новый регион в GCP (us-east1), возможность самостоятельной настройки защищённых подключений к конечным точкам (endpoint), поддержка дополнительных интеграций, включая DBT 1.7, а также многочисленные исправления ошибок и улучшения безопасности.

Общие изменения

• ClickHouse Cloud теперь доступен в регионе GCP us-east1 (South Carolina)
• Добавлена возможность настраивать AWS Private Link и GCP Private Service Connect через OpenAPI

Изменения в Console

• Включён бесшовный вход в SQL-консоль для пользователей с ролью Developer
• Упрощён процесс настройки параметров простоя (idling controls) во время первоначальной настройки (onboarding)

Изменения в интеграциях

• Коннектор DBT: добавлена поддержка DBT до v1.7
• Metabase: добавлена поддержка Metabase v0.48
• PowerBI Connector: добавлена возможность работы в PowerBI Cloud
• Права для внутреннего пользователя ClickPipes сделаны настраиваемыми
• Kafka Connect
  • Улучшена логика дедупликации и ингестия типов Nullable
  • Добавлена поддержка текстовых форматов (CSV, TSV)
• Apache Beam: добавлена поддержка типов Boolean и LowCardinality
• Клиент Node.js: добавлена поддержка формата Parquet

Объявления по безопасности

• Исправлены 3 уязвимости безопасности — подробности см. в журнале изменений по безопасности:
  • CVE 2023-47118 (CVSS 7.0) — уязвимость переполнения буфера в куче, затрагивающая нативный интерфейс, по умолчанию работающий на порту 9000/tcp
  • CVE-2023-48704 (CVSS 7.0) — уязвимость переполнения буфера в куче, затрагивающая нативный интерфейс, по умолчанию работающий на порту 9000/tcp
  • CVE 2023-48298 (CVSS 5.9) — уязвимость целочисленного переполнения вниз (integer underflow) в кодеке сжатия FPC

22 ноября 2023 г.

В этом релизе обновлена основная версия базы данных, улучшен процесс входа и аутентификации, а также добавлена поддержка прокси в Kafka Connect Sink.

Обновление версии ClickHouse

• Радикально улучшена производительность чтения файлов Parquet. Подробности см. в блоге о релизе 23.8.
• Добавлена поддержка вывода типов для JSON. Подробности см. в блоге о релизе 23.9.
• Представлены мощные функции для аналитиков, такие как ArrayFold. Подробности см. в блоге о релизе 23.10.
• Обратное несовместимое изменение, заметное пользователям: по умолчанию отключена настройка input_format_json_try_infer_numbers_from_strings, чтобы избежать вывода чисел из строк в формате JSON. Это помогает предотвратить возможные ошибки парсинга, когда в выборке данных есть строки, похожие на числа.
• Десятки новых возможностей, улучшений производительности и исправлений ошибок. Подробности см. в журналах изменений основной базы данных.

Изменения в Console

• Улучшен процесс входа и аутентификации.
• Улучшены AI-подсказки запросов для лучшей поддержки больших схем.

Изменения в интеграциях

• Kafka Connect Sink: добавлена поддержка прокси, сопоставление topic-tablename и возможность настройки свойств доставки Keeper exactly-once.
• Клиент для Node.js: добавлена поддержка формата Parquet.
• Metabase: добавлена поддержка функции datetimeDiff.
• Клиент для Python: добавлена поддержка специальных символов в именах столбцов. Исправлена привязка параметра часового пояса.

2 ноября 2023 г.

В этом релизе расширена региональная поддержка сервисов разработки в Азии, добавлена функциональность ротации ключей для ключей шифрования, управляемых клиентом, улучшена детализация настроек налогов в биллинговой консоли и исправлен ряд ошибок в поддерживаемых клиентских библиотеках.

Общие обновления

• Сервисы разработки теперь доступны в AWS в регионах ap-south-1 (Мумбаи) и ap-southeast-1 (Сингапур)
• Добавлена поддержка ротации ключей для ключей шифрования, управляемых клиентом (CMEK)

Изменения в консоли

• Добавлена возможность настраивать более детальные налоговые параметры при добавлении кредитной карты

Изменения интеграций

• MySQL
  • Улучшена поддержка Tableau Online и QuickSight через MySQL
• Kafka Connector
  • Добавлен новый StringConverter для поддержки текстовых форматов (CSV, TSV)
  • Добавлена поддержка типов данных Bytes и Decimal
  • Поведение Retryable Exceptions изменено так, что они теперь всегда повторно выполняются (даже при errors.tolerance=all)
• Клиент Node.js
  • Исправлена проблема, из-за которой при потоковой передаче больших наборов данных возвращались повреждённые результаты
• Клиент Python
  • Исправлены тайм-ауты при массовых вставках данных
  • Исправлена проблема NumPy/Pandas с Date32
• Клиент Go
  • Исправлена вставка пустой map в JSON-колонку, очистка буфера компрессии, экранирование запросов, panic при нуле/nil для IPv4 и IPv6
  • Добавлен сторожевой механизм (watchdog) для отменённых вставок
• DBT
  • Улучшена поддержка распределённых таблиц вместе с тестами

19 октября 2023 г.

В этом релизе представлены улучшения удобства работы и производительности SQL-консоли, более корректная обработка типов данных IP в коннекторе Metabase, а также новая функциональность в клиентах Java и Node.js.

Изменения в консоли

• Улучшено удобство работы с SQL-консолью (например, сохраняется ширина столбцов между выполнениями запросов)
• Улучшена производительность SQL-консоли

Изменения в интеграциях

• Клиент Java:
  • Изменена используемая по умолчанию сетевая библиотека для повышения производительности и повторного использования открытых соединений
  • Добавлена поддержка прокси
  • Добавлена поддержка защищённых соединений с использованием TrustStore
• Клиент Node.js: Исправлено поведение keep-alive для insert-запросов
• Metabase: Исправлена сериализация столбцов IPv4/IPv6

28 сентября 2023 г.

В этом релизе объявлена общая доступность ClickPipes для Kafka, Confluent Cloud и Amazon MSK и коннектора Kafka Connect ClickHouse Sink, добавлен самообслуживаемый рабочий процесс для безопасного доступа к Amazon S3 с использованием ролей IAM, а также рекомендации по запросам с помощью ИИ (закрытый предварительный просмотр).

Изменения в консоли

• Добавлен самообслуживаемый рабочий процесс для безопасного доступа к Amazon S3 с использованием ролей IAM
• Представлены рекомендации по запросам с помощью ИИ в режиме закрытого предварительного просмотра (для доступа свяжитесь со службой поддержки ClickHouse Cloud)

Изменения в интеграциях

• Объявлена общая доступность ClickPipes — готового сервиса ингестии данных — для Kafka, Confluent Cloud и Amazon MSK (см. блог о релизе)
• Объявлена общая доступность Kafka Connect ClickHouse Sink
  • Расширена поддержка пользовательских настроек ClickHouse с использованием свойства clickhouse.settings
  • Улучшено поведение дедупликации с учётом динамических полей
  • Добавлена поддержка tableRefreshInterval для повторного получения изменений таблицы из ClickHouse
• Исправлена проблема SSL-подключения и сопоставления типов между Power BI и типами данных ClickHouse

7 сентября 2023 г.

В этот релиз вошла бета‑версия официального коннектора PowerBI Desktop, улучшена обработка платежей по банковским картам для Индии, а также реализовано множество улучшений в поддерживаемых клиентских библиотеках.

Изменения в Console

• Добавлены отображение оставшихся кредитов и повторные попытки списания для поддержки платежей из Индии

Изменения в Integrations

• Kafka Connector: добавлена поддержка настройки параметров ClickHouse, добавлен параметр конфигурации error.tolerance
• PowerBI Desktop: выпущена бета‑версия официального коннектора
• Grafana: добавлена поддержка геотипа Point, исправлены панели на дашборде Data Analyst, исправлен макрос timeInterval
• Python client: совместим с Pandas 2.1.0, прекращена поддержка Python 3.7, добавлена поддержка nullable JSON‑типа
• Node.js client: добавлена поддержка параметра default_format
• Golang client: исправлена обработка типа bool, сняты ограничения на строки

24 авг 2023 г.

В этом релизе добавлена поддержка интерфейса MySQL к базе данных ClickHouse, представлен новый официальный коннектор Power BI, добавлен новый вид «Running Queries» в облачной консоли, а также обновлена версия ClickHouse до 23.7.

Общие обновления

• Добавлена поддержка протокола MySQL wire, который (помимо других сценариев использования) обеспечивает совместимость со многими существующими BI‑инструментами. Пожалуйста, свяжитесь со службой поддержки, чтобы включить эту функцию для вашей организации.
• Представлен новый официальный коннектор Power BI

Изменения в консоли

• Добавлена поддержка вида «Running Queries» в SQL Console

Обновление версии ClickHouse 23.7

• Добавлена поддержка табличной функции Azure, геотипы данных переведены в статус готовых к промышленной эксплуатации, улучшена производительность JOIN-ов — подробности см. в блоге о релизе 23.5
• Расширена поддержка интеграции с MongoDB до версии 6.0 — подробности см. в блоге о релизе 23.6
• Улучшена производительность записи в формат Parquet в 6 раз, добавлена поддержка языка запросов PRQL и улучшена совместимость с SQL — подробности см. в презентации о релизе 23.7
• Десятки новых функций, улучшений производительности и исправлений ошибок — см. подробные журналы изменений для 23.5, 23.6, 23.7

Изменения в интеграциях

• Kafka Connector: добавлена поддержка типов Avro Date и Time
• JavaScript client: выпущена стабильная версия для веб‑среды
• Grafana: улучшена логика фильтров, обработка имени базы данных и добавлена поддержка TimeInteval с субсекундной точностью
• Golang Client: исправлено несколько проблем с пакетной и асинхронной загрузкой данных
• Metabase: добавлена поддержка v0.47, реализована имперсонация подключений, исправлены сопоставления типов данных

27 июля 2023 г.

В этом релизе представлена закрытая предварительная версия ClickPipes для Kafka, новый интерфейс загрузки данных и возможность загружать файл по URL через облачную консоль.

Изменения в интеграциях

• Представлена закрытая предварительная версия ClickPipes для Kafka — облачного движка интеграции, который делает приём огромных объёмов данных из Kafka и Confluent Cloud таким же простым, как нажатие нескольких кнопок. Записаться в лист ожидания можно здесь.
• Клиент JavaScript: добавлена поддержка веб-сред (браузер, Cloudflare Workers). Код был переработан, чтобы сообщество могло создавать коннекторы для пользовательских сред.
• Kafka Connector: добавлена поддержка встроенной схемы (inline schema) с типами Kafka Timestamp и Time
• Клиент Python: исправлены проблемы с сжатием при вставке и чтением LowCardinality

Изменения в консоли

• Добавлен новый интерфейс загрузки данных с расширенными параметрами конфигурации при создании таблицы
• Добавлена возможность загружать файл по URL с использованием облачной консоли
• Улучшен процесс приглашения с дополнительными возможностями для присоединения к другой организации и просмотра всех ваших активных приглашений

14 июля 2023 г.

В этом выпуске добавлена возможность запускать Dedicated Services, появился новый регион AWS в Австралии и возможность использовать собственный ключ для шифрования данных на диске.

Общие обновления

• Новый регион AWS в Австралии: Сидней (ap-southeast-2)
• Сервисы уровня Dedicated для требовательных, чувствительных к задержкам рабочих нагрузок (пожалуйста, свяжитесь со службой поддержки для настройки)
• Возможность использовать собственный ключ (BYOK) для шифрования данных на диске (пожалуйста, свяжитесь со службой поддержки для настройки)

Изменения в консоли

• Улучшения панели метрик наблюдаемости для асинхронных вставок
• Улучшено поведение чат-бота при интеграции со службой поддержки

Изменения в интеграциях

• Клиент NodeJS: исправлена ошибка сбоя подключения из-за тайм-аута сокета
• Клиент Python: добавлен QuerySummary для запросов вставки, добавлена поддержка специальных символов в имени базы данных
• Metabase: обновлена версия JDBC-драйвера, добавлена поддержка DateTime64, улучшена производительность.

Изменения в ядре базы данных

• Кэш запросов может быть включён в ClickHouse Cloud. При его включении успешные запросы по умолчанию кэшируются на одну минуту, и последующие запросы будут использовать кэшированный результат.

20 июня 2023 г.

В этом релизе ClickHouse Cloud на GCP становится общедоступным, добавлен Terraform-провайдер для Cloud API и обновлена версия ClickHouse до 23.4.

Общие обновления

• ClickHouse Cloud на GCP теперь в статусе GA, добавлена интеграция с GCP Marketplace, поддержка Private Service Connect и автоматическое создание резервных копий (подробности см. в блоге и пресс-релизе)
• Terraform-провайдер для Cloud API теперь доступен

Изменения в консоли

• Добавлена новая объединённая страница настроек для сервисов
• Скорректирована точность учёта потребления для хранилища и вычислительных ресурсов

Изменения в интеграциях

• Python-клиент: повышена производительность операций вставки (INSERT), переработаны внутренние зависимости для поддержки multiprocessing
• Kafka Connector: теперь его можно загрузить и установить в Confluent Cloud, добавлены повторные попытки при временных проблемах соединения, некорректное состояние коннектора автоматически сбрасывается

Обновление версии ClickHouse 23.4

• Добавлена поддержка JOIN для параллельных реплик (для настройки обратитесь в поддержку)
• Улучшена производительность лёгких удалений (lightweight deletes)
• Улучшено кэширование при обработке крупных вставок

Изменения в администрировании

• Расширены возможности локального создания словарей для пользователей, не являющихся пользователем "default"

30 мая 2023 г.

В этот релиз вошел публичный релиз программного API ClickHouse Cloud для операций плоскости управления (подробности см. в блоге), доступ к S3 с использованием IAM‑ролей и дополнительные параметры масштабирования.

Общие изменения

• Поддержка API для ClickHouse Cloud. С новым Cloud API вы можете бесшовно интегрировать управление сервисами в существующий конвейер CI/CD и управлять сервисами программно
• Доступ к S3 с использованием IAM‑ролей. Теперь вы можете использовать IAM‑роли для безопасного доступа к приватным Amazon Simple Storage Service (S3) бакетам (для настройки обратитесь в службу поддержки)

Изменения масштабирования

• Горизонтальное масштабирование. Нагрузки, требующие большей параллелизации, теперь можно настраивать до 10 реплик (для настройки обратитесь в службу поддержки)
• Автомасштабирование на основе CPU. Нагрузки, ограниченные CPU, теперь могут использовать дополнительные триггеры для политик автомасштабирования

Изменения в консоли

• Миграция сервиса Dev в Production‑сервис (для включения обратитесь в службу поддержки)
• Добавлены элементы управления конфигурацией масштабирования при создании экземпляра
• Исправлена строка подключения, когда пароль по умолчанию отсутствует в памяти

Изменения интеграций

• Клиент Golang: исправлена проблема, приводившая к несбалансированным соединениям в нативном протоколе, добавлена поддержка пользовательских настроек в нативном протоколе
• Клиент Node.js: прекращена поддержка Node.js v14, добавлена поддержка v20
• Коннектор Kafka: добавлена поддержка типа LowCardinality
• Metabase: исправлена группировка по диапазону времени, исправлена поддержка целых чисел во встроенных вопросах Metabase

Производительность и надежность

• Повышена эффективность и производительность нагрузок с интенсивной записью
• Развернута стратегия инкрементальных резервных копий для увеличения скорости и эффективности резервного копирования

11 мая 2023 г.

В этот релиз включена публичная бета ClickHouse Cloud на GCP (см. блог для подробностей), расширяются права администраторов на выдачу разрешений на завершение запросов и добавляются дополнительные возможности по отслеживанию статуса пользователей с MFA в консоли Cloud.

Update

ClickHouse Cloud на GCP теперь доступен в GA, см. запись за 20 июня выше.

ClickHouse Cloud на GCP теперь доступен в публичной бете

Примечание

ClickHouse Cloud на GCP теперь доступен в GA, см. запись за 20 июня выше.

• Полностью управляемый сервис ClickHouse с разделёнными слоями хранения и вычислений, работающий поверх Google Compute и Google Cloud Storage
• Доступен в регионах Iowa (us-central1), Netherlands (europe-west4) и Singapore (asia-southeast1)
• Поддерживает как сервисы разработки (Development), так и промышленные сервисы (Production) во всех трёх начальных регионах
• Обеспечивает высокий уровень безопасности по умолчанию: сквозное шифрование при передаче, шифрование данных в состоянии покоя, списки разрешённых IP-адресов (IP Allow Lists)

Изменения в интеграциях

• Клиент на Go: добавлена поддержка переменных окружения для прокси
• Grafana: добавлена возможность указывать пользовательские настройки ClickHouse и переменные окружения для прокси при настройке источника данных в Grafana
• Kafka Connector: улучшена обработка пустых записей

Изменения в консоли

• Добавлен индикатор использования многофакторной аутентификации (MFA) в списке пользователей

Производительность и надёжность

• Добавлено более детальное управление правами на завершение запросов для администраторов

4 мая 2023 г.

В этом релизе добавлен новый тип диаграммы «тепловая карта», улучшена страница использования биллинга и ускорен запуск сервиса.

Изменения в консоли

• В SQL‑консоль добавлен тип диаграммы «тепловая карта»
• Улучшена страница использования биллинга: теперь отображаются кредиты, потребленные в каждом измерении биллинга

Изменения в интеграциях

• Коннектор Kafka: добавлен механизм повторных попыток при временных ошибках соединения
• Клиент Python: добавлена настройка max_connection_age, чтобы HTTP‑соединения не переиспользовались бесконечно. Это может помочь при определенных проблемах балансировки нагрузки
• Клиент Node.js: добавлена поддержка Node.js v20
• Клиент Java: улучшена поддержка аутентификации с клиентскими сертификатами и добавлена поддержка вложенных типов Tuple/Map/Nested

Производительность и надежность

• Улучшено время запуска сервиса при наличии большого числа частей данных
• Оптимизирована логика отмены долго выполняющихся запросов в SQL‑консоли

Исправления ошибок

• Исправлена ошибка, из-за которой импорт демонстрационного набора данных «Cell Towers» завершался сбоем

20 апреля 2023 г.

В этом релизе обновлена версия ClickHouse до 23.3, значительно улучшена скорость холодных чтений и добавлен чат с поддержкой в режиме реального времени.

Изменения в консоли

• Добавлена возможность чата с поддержкой в режиме реального времени

Изменения в интеграциях

• Коннектор Kafka: добавлена поддержка типов Nullable
• Клиент Golang: добавлена поддержка внешних таблиц, поддержка привязки параметров логического типа (boolean) и указателей (pointer)

Изменения конфигурации

• Добавлена возможность удалять большие таблицы — путём переопределения настроек max_table_size_to_drop и max_partition_size_to_drop

Производительность и надёжность

• Улучшена скорость холодных чтений за счёт предварительной выборки из S3 через настройку allow_prefetched_read_pool_for_remote_filesystem

Обновление версии ClickHouse 23.3

• Облегчённые удаления готовы для использования в продакшене — подробности см. в записи блога о выпуске 23.3
• Добавлена поддержка многоступенчатого PREWHERE — подробности см. в записи блога о выпуске 23.2
• Десятки новых возможностей, улучшений производительности и исправлений ошибок — подробные журналы изменений для версий 23.3 и 23.2

6 апреля 2023 г.

В этом релизе появились интерфейс API для получения облачных эндпоинтов, расширенный параметр управления масштабированием для минимального таймаута простоя и поддержка внешних данных в методах выполнения запросов Python‑клиента.

Изменения в API

• Добавлена возможность программно запрашивать эндпоинты ClickHouse Cloud через Cloud Endpoints API

Изменения в консоли

• В расширенные настройки масштабирования добавлен параметр «minimum idle timeout»
• В модальное окно загрузки данных добавлено эвристическое (best-effort) определение типа datetime при автоматическом определении схемы

Изменения в интеграциях

• Metabase: добавлена поддержка нескольких схем
• Go client: исправлена проверка активности простаивающих соединений для TLS‑соединений
• Python client
  • добавлена поддержка внешних данных в методах выполнения запросов
  • добавлена поддержка часовых поясов для результатов запросов
  • добавлена поддержка переменной окружения no_proxy/NO_PROXY
  • исправлена привязка параметров со значением NULL на стороне сервера для типов Nullable

Исправления ошибок

• Исправлено поведение, при котором выполнение INSERT INTO ... SELECT ... из SQL‑консоли некорректно применяло то же ограничение по числу строк, что и к запросам SELECT

23 марта 2023 г.

В этом релизе добавлены правила сложности паролей для базы данных, значительно ускорено восстановление крупных резервных копий и добавлена поддержка отображения трейсов в Grafana Trace View.

Безопасность и надежность

• Основные конечные точки базы данных теперь применяют правила сложности паролей
• Сокращено время восстановления крупных резервных копий

Изменения в Console

• Упрощен процесс первоначальной настройки, добавлены новые значения по умолчанию и более компактные представления
• Снижены задержки при регистрации и входе в систему

Изменения в интеграциях

• Grafana:
  • Добавлена поддержка отображения данных трейсов, хранящихся в ClickHouse, в Trace View
  • Улучшены фильтры временных диапазонов и добавлена поддержка специальных символов в именах таблиц
• Superset: Добавлена нативная поддержка ClickHouse
• Kafka Connect Sink: Добавлена автоматическая конвертация дат и обработка столбцов с Null
• Metabase: Реализована совместимость с v0.46
• Python client: Исправлены вставки во временные таблицы и добавлена поддержка Pandas Null
• Golang client: Нормализованы типы Date с учетом часового пояса
• Java client
  • В SQL parser добавлена поддержка ключевых слов compression, infile и outfile
  • Добавлена перегрузка с учетными данными (credentials)
  • Исправлена пакетная обработка с ON CLUSTER
• Node.js client
  • Добавлена поддержка форматов JSONStrings, JSONCompact, JSONCompactStrings, JSONColumnsWithMetadata
  • query_id теперь может быть передан для всех основных методов клиента

Исправления ошибок

• Исправлена ошибка, приводившая к медленному первоначальному развертыванию и запуску новых сервисов
• Исправлена ошибка, приводившая к снижению производительности запросов из-за некорректной конфигурации кэша

9 марта 2023 г.

В этом релизе улучшены панели наблюдаемости, оптимизировано время создания больших резервных копий и добавлена конфигурация, необходимая для удаления крупных таблиц и партиций.

Изменения в Console

• Добавлены расширенные панели наблюдаемости (предварительная версия)
• В панели наблюдаемости добавлен график распределения использования памяти
• Улучшена обработка отступов и переводов строк в табличном представлении SQL Console

Надёжность и производительность

• Оптимизировано расписание резервного копирования — резервные копии создаются только при изменении данных
• Сокращено время создания больших резервных копий

Изменения конфигурации

• Добавлена возможность увеличить лимит на удаление таблиц и партиций путём переопределения настроек max_table_size_to_drop и max_partition_size_to_drop на уровне запроса или соединения
• В журнал запросов добавлен исходный IP-адрес, чтобы обеспечить применение квот и управление доступом на основе исходного IP

Интеграции

• Python client: улучшена поддержка Pandas и исправлены проблемы, связанные с часовыми поясами
• Metabase: совместимость с Metabase 0.46.x и поддержка SimpleAggregateFunction
• Kafka-Connect: неявное преобразование дат и улучшенная обработка столбцов со значением null
• Java Client: вложенное преобразование в Java Map

23 февраля 2023 г.

Этот релиз включает подмножество возможностей из основного релиза ClickHouse 23.1, добавляет совместимость с Amazon Managed Streaming for Apache Kafka (MSK) и предоставляет расширенные настройки масштабирования и простоя в журнале активности.

Обновление версии ClickHouse 23.1

Добавлена поддержка подмножества возможностей ClickHouse 23.1, например:

• ARRAY JOIN с типом Map
• стандартные для SQL шестнадцатеричные и двоичные литералы
• новые функции, включая age(), quantileInterpolatedWeighted(), quantilesInterpolatedWeighted()
• возможность использовать структуру из таблицы, в которую выполняется вставка, в generateRandom без аргументов
• улучшена логика создания и переименования баз данных, позволяющая повторно использовать предыдущие имена
• подробности см. в слайдах вебинара релиза 23.1 и журнале изменений релиза 23.1

Изменения в интеграциях

• Kafka-Connect: добавлена поддержка Amazon MSK
• Metabase: первый стабильный релиз 1.0.0
  • коннектор стал доступен в Metabase Cloud
  • добавлена возможность просматривать все доступные базы данных
  • исправлена синхронизация базы данных с типом AggregationFunction
• DBT-clickhouse: добавлена поддержка последней версии DBT v1.4.1
• Клиент Python: улучшена поддержка прокси и SSH-туннелирования; добавлен ряд исправлений и оптимизаций производительности для Pandas DataFrames
• Клиент Node.js: реализована возможность прикреплять query_id к результату запроса, который можно использовать для получения метрик запроса из system.query_log
• Клиент Go: оптимизировано сетевое подключение с ClickHouse Cloud

Изменения в Console

• Добавлены расширенные настройки масштабирования и простоя в журнале активности
• Добавлены сведения о User-Agent и IP в письма для сброса пароля
• Улучшена логика процесса регистрации через Google OAuth

Надёжность и производительность

• Ускорено возобновление работы из состояния простоя для крупных сервисов
• Уменьшена задержка чтения для сервисов с большим количеством таблиц и партиций

Исправления ошибок

• Исправлено поведение, при котором сброс пароля сервиса не соответствовал политике паролей
• Проверка адреса электронной почты для приглашений в организацию сделана регистронезависимой

2 февраля 2023 г.

В этот релиз вошли официально поддерживаемая интеграция с Metabase, крупный релиз Java‑клиента / JDBC‑драйвера и поддержка представлений и материализованных представлений в SQL‑консоли.

Изменения в интеграциях

• Плагин Metabase: стал официальным решением, поддерживаемым ClickHouse
• Плагин dbt: добавлена поддержка нескольких потоков
• Плагин Grafana: улучшена обработка ошибок подключения
• Клиент Python: поддержка потоковой передачи для операций вставки
• Клиент Go: исправления ошибок: закрытие отменённых подключений, улучшенная обработка ошибок подключения
• Клиент JS: несовместимые изменения в exec/insert; query_id стал доступен в возвращаемых типах
• Крупный релиз клиента Java / JDBC‑драйвера
  • Несовместимые изменения: устаревшие методы, классы и пакеты были удалены
  • Добавлены драйвер R2DBC и поддержка вставки из файлов

Изменения в консоли

• Добавлена поддержка представлений и материализованных представлений в SQL‑консоли

Производительность и надёжность

• Более быстрый сброс пароля для остановленных/бездействующих экземпляров
• Улучшено поведение при уменьшении масштаба за счёт более точного отслеживания активности
• Исправлена ошибка, из-за которой экспорт CSV из SQL‑консоли обрезался
• Исправлена ошибка, приводившая к периодическим сбоям загрузки примерных данных

12 января 2023 г.

В этом релизе версия ClickHouse обновлена до 22.12, включены словари для многих новых источников и улучшена производительность запросов.

Общие изменения

• Включены словари для дополнительных источников, включая внешний ClickHouse, Cassandra, MongoDB, MySQL, PostgreSQL и Redis

Обновление версии ClickHouse 22.12

• Расширена поддержка JOIN за счет добавления Grace Hash Join
• Добавлена поддержка Binary JSON (BSON) для чтения файлов
• Добавлена поддержка стандартного синтаксиса SQL GROUP BY ALL
• Добавлены новые математические функции для операций с десятичными числами фиксированной точности
• Полный список изменений см. в блоге о релизе 22.12 и подробном списке изменений 22.12

Изменения в Console

• Улучшены возможности автодополнения в SQL Console
• Регион по умолчанию теперь учитывает географическое расположение континента
• Улучшена страница Billing Usage для отображения как биллинговых единиц, так и единиц, отображаемых на сайте

Изменения в интеграциях

• Релиз DBT v1.3.2
  • Добавлена экспериментальная поддержка инкрементальной стратегии delete+insert
  • Новый макрос s3source
• Python‑клиент v0.4.8
  • Поддержка вставки из файла
  • Привязка параметров в запросах на стороне сервера
• Go‑клиент v2.5.0
  • Снижено потребление памяти при сжатии
  • Привязка параметров в запросах на стороне сервера

Надежность и производительность

• Улучшена производительность чтения для запросов, которые выбирают большое количество небольших файлов в объектном хранилище
• Для недавно запущенных сервисов параметр compatibility устанавливается на версию, с которой сервис был изначально запущен

Исправления ошибок

Использование ползунка Advanced Scaling для резервирования ресурсов теперь вступает в силу немедленно.

20 декабря 2022 г.

В этом релизе представлены прозрачный вход администраторов в SQL-консоль, улучшенная производительность при «холодном» чтении и улучшенный коннектор Metabase для ClickHouse Cloud.

Изменения в консоли

• Включён прозрачный доступ к SQL-консоли для пользователей с правами администратора
• Изменена роль по умолчанию для новых приглашённых на «Administrator»
• Добавлен опрос при первоначальной настройке

Надёжность и производительность

• Добавлена логика повторных попыток для длительно выполняющихся INSERT-запросов для восстановления в случае сетевых сбоев
• Улучшена производительность при «холодном» чтении

Изменения в интеграциях

• Плагин Metabase получил долгожданное крупное обновление v0.9.1. Теперь он совместим с последней версией Metabase и был тщательно протестирован на ClickHouse Cloud.

6 декабря 2022 г. — Общая доступность

ClickHouse Cloud теперь готов к использованию в продакшене, соответствует требованиям SOC 2 Type II, обеспечивает SLA по доступности для производственных нагрузок и предоставляет публичную страницу статуса. Этот релиз включает ключевые новые возможности, такие как интеграция с AWS Marketplace, SQL console — рабочая среда для исследования данных для пользователей ClickHouse, и ClickHouse Academy — обучение в собственном темпе в ClickHouse Cloud. Подробнее в этом блоге.

Готовность к продакшену

• Соответствие SOC 2 Type II (подробности в блоге и Trust Center)
• Публичная страница статуса для ClickHouse Cloud
• SLA по доступности для продакшен-сценариев использования
• Доступность в AWS Marketplace

Ключевые новые возможности

• Представлена SQL console, рабочая среда для исследования данных для пользователей ClickHouse
• Запущена ClickHouse Academy — обучение в собственном темпе в ClickHouse Cloud

Изменения в ценообразовании и учёте потребления

• Пробный период продлён до 30 дней
• Представлены Development Services с фиксированной мощностью и низкой ежемесячной стоимостью, хорошо подходящие для стартовых проектов и сред разработки/стейджинга
• Введено новое сниженное ценообразование для Production Services по мере того, как мы продолжаем улучшать работу и масштабирование ClickHouse Cloud
• Улучшена детализация и точность учёта потребления вычислительных ресурсов

Изменения в интеграциях

• Включена поддержка интеграционных движков ClickHouse для Postgres / MySQL
• Добавлена поддержка пользовательских SQL-функций (UDF)
• Статус sink-коннектора Kafka Connect повышен до Beta
• Улучшен интерфейс раздела Integrations за счёт добавления расширенных метаданных о версиях, статусе обновлений и многом другом

Изменения в консоли

• Поддержка многофакторной аутентификации в облачной консоли
• Улучшена навигация в облачной консоли на мобильных устройствах

Изменения в документации

• Добавлен выделенный раздел документации для ClickHouse Cloud

Исправления ошибок

• Устранена известная проблема, при которой восстановление из резервной копии не всегда работало из-за разрешения зависимостей

29 ноября 2022 г.

В этом релизе достигнуто соответствие требованиям SOC 2 Type II, обновлена версия ClickHouse до 22.11 и улучшен ряд клиентов и интеграций ClickHouse.

Общие изменения

• Достигнуто соответствие требованиям SOC 2 Type II (подробности в блоге и Trust Center)

Изменения в Console

• Добавлен индикатор статуса «Idle», показывающий, что сервис был автоматически приостановлен

Обновление версии ClickHouse 22.11

• Добавлена поддержка движков таблиц и табличных функций Hudi и DeltaLake
• Улучшен рекурсивный обход каталогов для S3
• Добавлена поддержка составного синтаксиса временных интервалов
• Повышена надежность вставки за счет повторных попыток
• Полный список изменений см. в подробном списке изменений 22.11

Интеграции

• Клиент для Python: поддержка v3.11, улучшена производительность операций вставки
• Клиент для Go: исправлена поддержка DateTime и Int64
• Клиент для JS: поддержка взаимной SSL-аутентификации
• dbt-clickhouse: поддержка DBT v1.3

Исправления ошибок

• Исправлена ошибка, из-за которой после обновления отображалась устаревшая версия ClickHouse
• Изменение прав для учетной записи "default" больше не прерывает сессии
• Вновь создаваемые учетные записи, не являющиеся администраторами, больше не имеют доступа к системным таблицам по умолчанию

Известные проблемы в этом релизе

• Восстановление из резервной копии может не работать из-за проблем с разрешением зависимостей

17 ноября 2022 г.

В этом релизе добавлена поддержка словарей на основе локальных таблиц ClickHouse и HTTP-источников, введена поддержка региона Мумбаи и улучшено удобство работы пользователей в облачной консоли.

Общие изменения

• Добавлена поддержка словарей на основе локальных таблиц ClickHouse и HTTP-источников
• Введена поддержка региона Мумбаи

Изменения в консоли

• Улучшено форматирование счетов на оплату
• Оптимизирован пользовательский интерфейс для ввода способа оплаты
• Добавлено более детализированное журналирование активности для резервных копий
• Улучшена обработка ошибок при загрузке файлов

Исправления ошибок

• Исправлена ошибка, которая могла приводить к сбоям резервного копирования при наличии отдельных крупных файлов в отдельных частях
• Исправлена ошибка, из-за которой восстановление из резервной копии не выполнялось, если изменения списка доступа применялись одновременно

Известные проблемы

• Восстановление из резервной копии может не работать из-за проблем с разрешением зависимостей

3 ноября 2022 г.

В этом релизе из модели ценообразования убраны единицы чтения и записи (подробности см. на странице цен), версия ClickHouse обновлена до 22.10, добавлена поддержка более высокой вертикальной масштабируемости для клиентов, использующих режим самообслуживания, а также повышена надежность за счет улучшенных настроек по умолчанию.

Общие изменения

• Удалены единицы чтения/записи из модели ценообразования

Изменения конфигурации

• Настройки allow_suspicious_low_cardinality_types, allow_suspicious_fixed_string_types и allow_suspicious_codecs (по умолчанию — false) больше не могут изменяться пользователями по соображениям стабильности.

Изменения в Console

• Увеличен максимальный предел вертикального масштабирования для самообслуживаемых конфигураций до 720 ГБ памяти для платных клиентов
• Улучшен процесс восстановления из резервной копии для задания правил списка доступа по IP (IP Access List) и пароля
• Добавлены списки ожидания для GCP и Azure в диалоге создания сервиса
• Улучшена обработка ошибок при загрузке файлов
• Улучшены процессы администрирования биллинга

Обновление версии ClickHouse 22.10

• Улучшены операции слияния для объектных хранилищ за счет ослабления порогового значения «слишком много частей» при наличии большого количества крупных частей (не менее 10 GiB). Это позволяет хранить до петабайт данных в одном разделе одной таблицы.
• Улучшен контроль над слиянием с помощью настройки min_age_to_force_merge_seconds для выполнения слияния по прошествии заданного временного порога.
• Добавлен совместимый с MySQL синтаксис для сброса настроек SET setting_name = DEFAULT.
• Добавлены функции для кодирования кривой Мортона, хеширования целых чисел в стиле Java и генерации случайных чисел.
• Полный список изменений см. в подробном журнале изменений 22.10.

25 октября 2022 г.

В этом релизе значительно снижено потребление вычислительных ресурсов для небольших нагрузок, снижены тарифы на вычисления (подробности см. на странице с тарифами), улучшена стабильность за счет более удачных значений по умолчанию, а также расширены разделы Billing и Usage в консоли ClickHouse Cloud.

Общие изменения

• Минимальный объем выделяемой сервису памяти снижен до 24 ГБ
• Таймаут простоя сервиса уменьшен с 30 минут до 5 минут

Изменения конфигурации

• Значение max_parts_in_total уменьшено со 100k до 10k. Значение по умолчанию настройки max_parts_in_total для таблиц MergeTree снижено со 100 000 до 10 000. Причина изменения в том, что мы заметили: большое количество частей данных, как правило, приводит к медленному запуску сервисов в облаке. Большое число частей обычно указывает на слишком детальный выбор ключа партиционирования, что чаще всего делается случайно и чего следует избегать. Изменение значения по умолчанию позволит раньше обнаруживать такие случаи.

Изменения в консоли

• Расширена детализация использования кредитов в разделе Billing для пользователей пробной версии
• Улучшены всплывающие подсказки и справочный текст, а также добавлена ссылка на страницу с тарифами в разделе Usage
• Улучшено поведение при переключении опций фильтрации по IP
• В облачную консоль добавлена кнопка повторной отправки письма с подтверждением

4 октября 2022 г. - бета

4 октября 2022 года ClickHouse Cloud перешёл в стадию публичной бета-версии. Подробнее см. в этой записи в блоге.

Версия ClickHouse Cloud основана на ClickHouse Core v22.10. Перечень совместимых функций приведён в руководстве Cloud Compatibility.