Различия

Показаны различия между двумя версиями страницы.

--- flip:glaber:setting_up_clickhouse_for_glaber [2024/10/25 10:18] – создано flip
+++ flip:glaber:setting_up_clickhouse_for_glaber [2026/05/07 11:34] (текущий) – flip
@@ Строка 1: / Строка 1: @@
 ====== Настройка ClickHouse для Glaber ======
+===== Добавление пользователя =====
+Пользователь и пароль: glaber
+''nano /etc/clickhouse-server/users.d/glaber.xml''
+<code>
+<clickhouse>
+    <users>
+        <glaber>
+            <password>glaber</password>
+            <networks>
+                <ip>127.0.0.1</ip>
+            </networks>
+            <profile>default</profile>
+        </glaber>
+    </users>
+</clickhouse>
+</code>
 ===== Создаём дополнительные файлы настройки с отключением лишних функций =====
@@ Строка 104: / Строка 125: @@
   </profiles>
 </yandex>
+</code>
+===== Бекап =====
+Стоит учитывать, что объемы данных могут быть очень большими, поэтому зачастую нужно реализовывать миграцию данных по частям (по партициям, по таблицам)
+==== Настройка ====
+Настройте, путь куда сервер будет бекапить данные. Для этого нужно создать файл /etc/clickhouse-server/config.d/backup_disk.xml с содержимым, указывающим место в файловой системе, куда будут попадать бекапы (в данном случае /backups/)
+<code>
+nano /etc/clickhouse-server/config.d/backup_disk.xml
+</code>
+<code>
+<clickhouse>
+    <storage_configuration>
+        <disks>
+            <backups>
+                <type>local</type>
+                <path>/backups/</path>
+            </backups>
+        </disks>
+    </storage_configuration>
+    <backups>
+        <allowed_disk>backups</allowed_disk>
+        <allowed_path>/backups/</allowed_path>
+    </backups>
+</clickhouse>
+</code>
+==== Создание бекапа ====
+Подключитесь к Clickhouse. В самом простом случае, подключиться к серверу можно командой clickhouse client выполнив её локально на той же машине на которой запущен clickhouse. Далее выполните бекап командой:
+<code>
+BACKUP DATABASE glaber TO Disk('backups', 'glaber.zip')
+</code>
+==== Восстановление из бекапа ====
+Настройте путь для работы с бекапами аналогично на сервере, на котором будут восстанавливаться данные, скопируйте в этот путь файл с бекапом и восстановите базу предварительно удалив существующую в случае её наличия:
+<code>
+DROP DATABASE glaber
+RESTORE DATABASE glaber FROM Disk('backups', 'glaber.zip')
 </code>
@@ Строка 120: / Строка 188: @@
 systemctl status clickhouse-server
 </code>
+===== Отключить много логов =====
+Не рекомендуется!
+<code>
+nano /etc/clickhouse-server/config.d/z_log_disable.xml
+</code>
+<code>
+<clickhouse>
+    <asynchronous_metric_log remove="1"/>
+    <asynchronous_insert_log remove="1"/>
+    <backup_log remove="1"/>
+    <error_log remove="1"/>
+    <metric_log remove="1"/>
+    <query_metric_log remove="1"/>
+    <query_thread_log remove="1" />
+    <query_log remove="1" />
+    <query_views_log remove="1" />
+    <part_log remove="1"/>
+    <session_log remove="1"/>
+    <text_log remove="1" />
+    <trace_log remove="1"/>
+    <crash_log remove="1"/>
+    <opentelemetry_span_log remove="1"/>
+    <zookeeper_log remove="1"/>
+    <processors_profile_log remove="1"/>
+    <latency_log remove="1"/>
+    <background_schedule_pool_log remove="1"/>
+    <aggregated_zookeeper_log remove="1"/>
+    <zookeeper_connection_log remove="1"/>
+</clickhouse>
+</code>
+===== Очистка =====
+<code SQL>
+ALTER TABLE glaber.history_dbl MODIFY TTL day + INTERVAL 1 MONTH;
+ALTER TABLE glaber.history_uint MODIFY TTL day + INTERVAL 1 MONTH;
+ALTER TABLE glaber.history_str MODIFY TTL day + INTERVAL 1 MONTH;
+ALTER TABLE glaber.history_log MODIFY TTL day + INTERVAL 1 MONTH;
+</code>
@@ Строка 125: / Строка 239: @@
   * [[https://docs.glaber.io/ru/setup/ubuntu/]]
   * [[https://kb.altinity.com/altinity-kb-setup-and-maintenance/altinity-kb-settings-to-adjust/]]
+  * [[https://docs.glaber.io/ru/operations/backup/]]
+  * [[https://clickhouse.com/docs/en/operations/backup/]]
+  * [[https://kb.altinity.com/altinity-kb-setup-and-maintenance/altinity-kb-system-tables-eat-my-disk/]]