メインコンテンツへスキップ
メインコンテンツへスキップ

サーバー設定

このセクションでは、サーバー設定について説明します。これらはセッションレベルやクエリレベルでは変更できない設定です。

ClickHouse の設定ファイルの詳細については、""Configuration Files"" を参照してください。

その他の設定については、""Settings"" セクションで説明しています。 設定を確認する前に、Configuration files セクションを読み、incl および optional 属性を用いた置換の使い方を把握しておくことを推奨します。

abort_on_logical_error

LOGICAL_ERROR 例外が発生した際にサーバーをクラッシュさせます。専門家向けです。

access_control_improvements

アクセス制御システムにおけるオプションの改善用設定です。

SettingDescriptionDefault
users_without_row_policies_can_read_rowsROW POLICY を持たないユーザーが、SELECT クエリを使用して行を読み取れるかどうかを設定します。例えば、ユーザー A と B がいて、ROW POLICY が A に対してのみ定義されている場合、この設定が true であれば、ユーザー B はすべての行を閲覧できます。この設定が false であれば、ユーザー B はどの行も閲覧できません。true
on_cluster_queries_require_cluster_grantON CLUSTER クエリに CLUSTER 権限が必要かどうかを設定します。true
select_from_system_db_requires_grantSELECT * FROM system.<table> に権限が必要かどうか、また権限なしに任意のユーザーが実行できるかどうかを設定します。true に設定した場合、このクエリには、非 system テーブルと同様に GRANT SELECT ON system.<table> が必要になります。例外: 一部の system テーブル(tablescolumnsdatabases、および onecontributors のような一部の定数テーブル)は依然として全ユーザーがアクセス可能です。また、SHOW 権限(例: SHOW USERS)が付与されている場合、対応する system テーブル(つまり system.users)にアクセスできます。true
select_from_information_schema_requires_grantSELECT * FROM information_schema.<table> に権限が必要かどうか、また権限なしに任意のユーザーが実行できるかどうかを設定します。true に設定した場合、このクエリには、通常のテーブルと同様に GRANT SELECT ON information_schema.<table> が必要になります。true
settings_constraints_replace_previous特定の SETTING に対する SETTINGS PROFILE 内の CONSTRAINT が、その SETTING について以前の CONSTRAINT(他の PROFILE で定義されたもの)の動作を、新しい CONSTRAINT で設定されていないフィールドも含めて打ち消すかどうかを設定します。また、changeable_in_readonly という CONSTRAINT タイプを有効にします。true
table_engines_require_grant特定のテーブルエンジンを指定してテーブルを作成する際に、GRANT が必要かどうかを設定します。false
role_cache_expiration_time_secondsRole Cache にロールが保持される時間を、最後のアクセスからの経過秒数で設定します。600

例:

<access_control_improvements>
    <users_without_row_policies_can_read_rows>true</users_without_row_policies_can_read_rows>
    <on_cluster_queries_require_cluster_grant>true</on_cluster_queries_require_cluster_grant>
    <select_from_system_db_requires_grant>true</select_from_system_db_requires_grant>
    <select_from_information_schema_requires_grant>true</select_from_information_schema_requires_grant>
    <settings_constraints_replace_previous>true</settings_constraints_replace_previous>
    <table_engines_require_grant>false</table_engines_require_grant>
    <role_cache_expiration_time_seconds>600</role_cache_expiration_time_seconds>
</access_control_improvements>

access_control_path

ClickHouse サーバーが、SQL コマンドで作成されたユーザーおよびロールの設定を格納するディレクトリへのパス。

関連項目

aggregate_function_group_array_action_when_limit_is_reached

groupArray で配列要素数の上限を超えたときに実行するアクション:throw で例外を送出するか、discard で余分な値を破棄する

aggregate_function_group_array_max_element_size

groupArray 関数における配列要素の最大サイズ(バイト単位)。この制限はシリアライズ時にチェックされ、状態サイズが過度に大きくなるのを防ぐのに役立ちます。

allow_feature_tier

異なる機能ティアに関連する設定をユーザーが変更できるかどうかを制御します。

  • 0 - すべての設定の変更が許可されます(experimental、beta、production)。
  • 1 - beta および production 機能の設定のみ変更が許可されます。experimental 設定の変更は拒否されます。
  • 2 - production 設定のみ変更が許可されます。experimental および beta 設定の変更は拒否されます。

これは、すべての EXPERIMENTAL / BETA 機能に対して readonly の CONSTRAINT を設定することと同等です。

注記

値が 0 の場合、すべての設定を変更できます。

allow_impersonate_user

IMPERSONATE 機能(EXECUTE AS target_user)を有効化/無効化します。

allow_implicit_no_password

'IDENTIFIED WITH no_password' が明示的に指定されていない限り、パスワードなしのユーザーを作成することを禁止します。

<allow_implicit_no_password>1</allow_implicit_no_password>

allow_no_password

安全でないパスワード方式である no_password を許可するかどうかを設定します。

<allow_no_password>1</allow_no_password>

allow_plaintext_password

平文パスワード(安全でない)の使用を許可するかどうかを設定します。

<allow_plaintext_password>1</allow_plaintext_password>

allow_use_jemalloc_memory

jemalloc によるメモリ使用を許可します。

allowed_disks_for_table_engines

Iceberg で使用が許可されているディスクのリスト

async_insert_queue_flush_on_shutdown

true の場合、グレースフルシャットダウン時に非同期挿入のキューがフラッシュされます

async_insert_threads

バックグラウンドでデータを実際にパースして挿入するスレッドの最大数です。0 を指定すると、非同期モードは無効になります

async_load_databases

データベースおよびテーブルを非同期でロードします。

  • true の場合、OrdinaryAtomicReplicated エンジンを持つすべての非システムデータベースは、ClickHouse サーバーの起動後に非同期でロードされます。system.asynchronous_loader テーブル、およびサーバー設定 tables_loader_background_pool_sizetables_loader_foreground_pool_size を参照してください。まだロードされていないテーブルへアクセスしようとするクエリは、そのテーブルが利用可能になるまで待機します。ロード処理が失敗した場合、クエリは(async_load_databases = false の場合のようにサーバー全体を停止させる代わりに)エラーを再スローします。少なくとも 1 つのクエリが待機しているテーブルは、より高い優先度でロードされます。データベースに対する DDL クエリは、そのデータベースが利用可能になるまで待機します。また、待機中のクエリ総数に対する上限として max_waiting_queries の設定も検討してください。
  • false の場合、すべてのデータベースはサーバー起動時にロードされます。

<async_load_databases>true</async_load_databases>

async_load_system_database

system テーブルを非同期でロードします。system データベース内に大量のログテーブルやパーツがある場合に有用です。async_load_databases 設定とは独立しています。

  • true に設定した場合、ClickHouse サーバーの起動後に、OrdinaryAtomicReplicated エンジンを持つすべての system データベースが非同期でロードされます。system.asynchronous_loader テーブル、tables_loader_background_pool_size および tables_loader_foreground_pool_size サーバー設定を参照してください。まだロードされていない system テーブルへアクセスしようとするクエリは、そのテーブルが利用可能になるまで待機します。少なくとも 1 つのクエリが待機しているテーブルは、より高い優先度でロードされます。さらに、待機中のクエリの総数を制限するために、max_waiting_queries 設定の構成も検討してください。
  • false に設定した場合、system データベースはサーバーの起動前に同期的にロードされます。

<async_load_system_database>true</async_load_system_database>

asynchronous_heavy_metrics_update_period_s

重い非同期メトリクスの更新間隔(秒単位)。

asynchronous_insert_log

非同期インサートをログに記録する system テーブル asynchronous_insert_log 用の設定。

The following settings can be configured by sub-tags:

SettingDescriptionDefaultNote
databaseデータベース名。
tableシステムテーブル名。
engineシステムテーブルに対する MergeTree エンジン定義partition_by または order_by が定義されている場合は使用できません。指定しない場合はデフォルトで MergeTree が選択されます
partition_byシステムテーブルに対するカスタムパーティショニングキーシステムテーブルに engine を指定する場合、partition_by パラメータは engine の設定内で直接指定する必要があります
ttlテーブルの TTL を指定します。システムテーブルに engine を指定する場合、ttl パラメータは engine の設定内で直接指定する必要があります
order_byシステムテーブルに対するカスタムソートキーengine が定義されている場合は使用できません。システムテーブルに engine を指定する場合、order_by パラメータは engine の設定内で直接指定する必要があります
storage_policyテーブルに使用するストレージポリシー名(任意)。システムテーブルに engine を指定する場合、storage_policy パラメータは engine の設定内で直接指定する必要があります
settingsMergeTree の動作を制御する追加パラメータ(任意)。システムテーブルに engine を指定する場合、settings パラメータは engine の設定内で直接指定する必要があります
flush_interval_millisecondsメモリ上のバッファからテーブルへデータをフラッシュする間隔。7500
max_size_rowsログの最大行数。未フラッシュのログ数が max_size_rows に達すると、ログがディスクにダンプされます。1048576
reserved_size_rowsログ用に事前確保されるメモリ容量(行数)。8192
buffer_size_rows_flush_threshold行数のしきい値。このしきい値に達すると、バックグラウンドでログをディスクへフラッシュする処理が起動します。max_size_rows / 2
flush_on_crashクラッシュ発生時にログをディスクへダンプするかどうかを設定します。false

<clickhouse>
    <asynchronous_insert_log>
        <database>system</database>
        <table>asynchronous_insert_log</table>
        <flush_interval_milliseconds>7500</flush_interval_milliseconds>
        <partition_by>toYYYYMM(event_date)</partition_by>
        <max_size_rows>1048576</max_size_rows>
        <reserved_size_rows>8192</reserved_size_rows>
        <buffer_size_rows_flush_threshold>524288</buffer_size_rows_flush_threshold>
        <flush_on_crash>false</flush_on_crash>
        <!-- <engine>Engine = MergeTree PARTITION BY event_date ORDER BY event_time TTL event_date + INTERVAL 30 day</engine> -->
    </asynchronous_insert_log>
</clickhouse>

asynchronous_metric_log

ClickHouse Cloud のデプロイメントでは、デフォルトで有効になっています。

お使いの環境でこの設定がデフォルトで有効になっていない場合は、ClickHouse のインストール方法に応じて、以下の手順に従って有効化または無効化できます。

有効化

非同期メトリックログの履歴収集 system.asynchronous_metric_log を手動で有効にするには、次の内容で /etc/clickhouse-server/config.d/asynchronous_metric_log.xml を作成します。

<clickhouse>
     <asynchronous_metric_log>
        <database>system</database>
        <table>asynchronous_metric_log</table>
        <flush_interval_milliseconds>7500</flush_interval_milliseconds>
        <collect_interval_milliseconds>1000</collect_interval_milliseconds>
        <max_size_rows>1048576</max_size_rows>
        <reserved_size_rows>8192</reserved_size_rows>
        <buffer_size_rows_flush_threshold>524288</buffer_size_rows_flush_threshold>
        <flush_on_crash>false</flush_on_crash>
    </asynchronous_metric_log>
</clickhouse>

無効化

asynchronous_metric_log 設定を無効にするには、次の内容で /etc/clickhouse-server/config.d/disable_asynchronous_metric_log.xml ファイルを作成します。

<clickhouse><asynchronous_metric_log remove="1" /></clickhouse>

The following settings can be configured by sub-tags:

SettingDescriptionDefaultNote
databaseデータベース名。
tableシステムテーブル名。
engineシステムテーブルに対する MergeTree エンジン定義partition_by または order_by が定義されている場合は使用できません。指定しない場合はデフォルトで MergeTree が選択されます
partition_byシステムテーブルに対するカスタムパーティショニングキーシステムテーブルに engine を指定する場合、partition_by パラメータは engine の設定内で直接指定する必要があります
ttlテーブルの TTL を指定します。システムテーブルに engine を指定する場合、ttl パラメータは engine の設定内で直接指定する必要があります
order_byシステムテーブルに対するカスタムソートキーengine が定義されている場合は使用できません。システムテーブルに engine を指定する場合、order_by パラメータは engine の設定内で直接指定する必要があります
storage_policyテーブルに使用するストレージポリシー名(任意)。システムテーブルに engine を指定する場合、storage_policy パラメータは engine の設定内で直接指定する必要があります
settingsMergeTree の動作を制御する追加パラメータ(任意)。システムテーブルに engine を指定する場合、settings パラメータは engine の設定内で直接指定する必要があります
flush_interval_millisecondsメモリ上のバッファからテーブルへデータをフラッシュする間隔。7500
max_size_rowsログの最大行数。未フラッシュのログ数が max_size_rows に達すると、ログがディスクにダンプされます。1048576
reserved_size_rowsログ用に事前確保されるメモリ容量(行数)。8192
buffer_size_rows_flush_threshold行数のしきい値。このしきい値に達すると、バックグラウンドでログをディスクへフラッシュする処理が起動します。max_size_rows / 2
flush_on_crashクラッシュ発生時にログをディスクへダンプするかどうかを設定します。false

asynchronous_metrics_enable_heavy_metrics

高負荷な非同期メトリクスの計算を有効にします。

asynchronous_metrics_keeper_metrics_only

非同期メトリクスで keeper 関連のメトリクスのみを計算します。

asynchronous_metrics_update_period_s

非同期メトリクスの更新間隔(秒)。

auth_use_forwarded_address

プロキシ経由で接続しているクライアントに対して、認証時にクライアントの元の送信元アドレスを使用します。

注記

転送されたアドレスは容易に詐称され得るため、この設定を使用する際は特に注意が必要です。このような認証を受け付けるサーバーには、直接アクセスせず、必ず信頼できるプロキシ経由のみでアクセスするようにしてください。

background_buffer_flush_schedule_pool_size

バックグラウンドで Buffer エンジンのテーブル に対するフラッシュ処理を実行するために使用されるスレッド数の最大値。

background_common_pool_size

バックグラウンドで実行される *MergeTree-engine テーブルに対する各種処理(主にガベージコレクション)に使用されるスレッド数の最大値。

background_distributed_schedule_pool_size

分散送信の実行に使用されるスレッド数の上限です。

background_fetches_pool_size

バックグラウンドで *MergeTree-engine テーブルのデータパーツを別のレプリカから取得する際に使用されるスレッド数の最大値。

background_merges_mutations_concurrency_ratio

スレッド数に対する、並行して実行できるバックグラウンドのマージおよびミューテーション数の比率を設定します。

たとえば、この比率が 2 で、background_pool_size が 16 に設定されている場合、ClickHouse はバックグラウンドマージを最大 32 個まで同時に実行できます。これは、バックグラウンド処理を一時停止したり、後回しにしたりできるためです。小さなマージにより高い実行優先度を与えるために、この仕組みが必要となります。

注記

この比率は、サーバー実行中には増やすことしかできません。小さくするにはサーバーを再起動する必要があります。

background_pool_size 設定と同様に、後方互換性のため background_merges_mutations_concurrency_ratiodefault プロファイルから適用できます。

background_merges_mutations_scheduling_policy

バックグラウンドでのマージおよびミューテーションのスケジューリング方法を決定するポリシーです。指定可能な値は round_robinshortest_task_first です。

バックグラウンドスレッドプールで、次に実行するマージまたはミューテーションを選択する際に使用されるアルゴリズムです。ポリシーは、サーバーを再起動せずに実行時に変更できます。 後方互換性のため、default プロファイルから適用できます。

指定可能な値:

  • round_robin — すべての並行マージおよびミューテーションをラウンドロビン順に実行し、飢餓状態が発生しない動作を保証します。マージ対象のブロック数が少ないため、小規模なマージは大規模なマージよりも速く完了します。
  • shortest_task_first — 常に小規模なマージまたはミューテーションを優先して実行します。マージおよびミューテーションには、その結果のサイズに基づいて優先度が割り当てられます。サイズの小さいマージは、大きいマージよりも厳密に優先されます。このポリシーは小さいパーツを可能なかぎり速くマージすることを保証しますが、INSERT が集中して行われているパーティションでは、大規模なマージが無期限に飢餓状態になる可能性があります。

background_message_broker_schedule_pool_size

メッセージストリーミングのバックグラウンド処理を実行するために使用されるスレッドの最大数を指定します。

background_move_pool_size

バックグラウンドで *MergeTree-engine テーブルのデータパーツを別のディスクまたはボリュームに移動する際に使用されるスレッド数の上限。

background_pool_size

MergeTree エンジンを使用するテーブルに対して、バックグラウンドでマージとミューテーションを実行するスレッド数を設定します。

注記
  • この設定は、後方互換性のために、ClickHouse サーバー起動時の default プロファイル構成からも適用できます。
  • サーバー稼働中に変更できるのは、スレッド数を増やす場合だけです。
  • スレッド数を減らすには、サーバーを再起動する必要があります。
  • この設定を調整することで、CPU とディスクの負荷を制御できます。
危険

プールサイズを小さくすると CPU とディスクのリソース使用量は減りますが、バックグラウンド処理の進行が遅くなり、最終的にクエリ性能に影響を与える可能性があります。

この値を変更する前に、次のような関連する MergeTree 設定も確認してください:

<background_pool_size>16</background_pool_size>

background_schedule_pool_log

さまざまなバックグラウンドプールで実行されるすべてのバックグラウンドタスクに関する情報が格納されています。

<background_schedule_pool_log>
    <database>system</database>
    <table>background_schedule_pool_log</table>
    <partition_by>toYYYYMM(event_date)</partition_by>
    <flush_interval_milliseconds>7500</flush_interval_milliseconds>
    <max_size_rows>1048576</max_size_rows>
    <reserved_size_rows>8192</reserved_size_rows>
    <buffer_size_rows_flush_threshold>524288</buffer_size_rows_flush_threshold>
    <flush_on_crash>false</flush_on_crash>
    <!-- Only tasks longer than duration_threshold_milliseconds will be logged. Zero means log everything -->
    <duration_threshold_milliseconds>0</duration_threshold_milliseconds>
</background_schedule_pool_log>

background_schedule_pool_max_parallel_tasks_per_type_ratio

プール内のスレッドのうち、同一タイプのタスクを同時に実行できる最大比率を指定します。

background_schedule_pool_size

レプリケートされたテーブル、Kafka ストリーミング、および DNS キャッシュの更新といった軽量な周期的処理を継続的に実行するために使用されるスレッドの最大数です。

backup_log

BACKUP および RESTORE 操作を記録する backup_log システムテーブルに関する設定です。

The following settings can be configured by sub-tags:

SettingDescriptionDefaultNote
databaseデータベース名。
tableシステムテーブル名。
engineシステムテーブルに対する MergeTree エンジン定義partition_by または order_by が定義されている場合は使用できません。指定しない場合はデフォルトで MergeTree が選択されます
partition_byシステムテーブルに対するカスタムパーティショニングキーシステムテーブルに engine を指定する場合、partition_by パラメータは engine の設定内で直接指定する必要があります
ttlテーブルの TTL を指定します。システムテーブルに engine を指定する場合、ttl パラメータは engine の設定内で直接指定する必要があります
order_byシステムテーブルに対するカスタムソートキーengine が定義されている場合は使用できません。システムテーブルに engine を指定する場合、order_by パラメータは engine の設定内で直接指定する必要があります
storage_policyテーブルに使用するストレージポリシー名(任意)。システムテーブルに engine を指定する場合、storage_policy パラメータは engine の設定内で直接指定する必要があります
settingsMergeTree の動作を制御する追加パラメータ(任意)。システムテーブルに engine を指定する場合、settings パラメータは engine の設定内で直接指定する必要があります
flush_interval_millisecondsメモリ上のバッファからテーブルへデータをフラッシュする間隔。7500
max_size_rowsログの最大行数。未フラッシュのログ数が max_size_rows に達すると、ログがディスクにダンプされます。1048576
reserved_size_rowsログ用に事前確保されるメモリ容量(行数)。8192
buffer_size_rows_flush_threshold行数のしきい値。このしきい値に達すると、バックグラウンドでログをディスクへフラッシュする処理が起動します。max_size_rows / 2
flush_on_crashクラッシュ発生時にログをディスクへダンプするかどうかを設定します。false

<clickhouse>
    <backup_log>
        <database>system</database>
        <table>backup_log</table>
        <flush_interval_milliseconds>1000</flush_interval_milliseconds>
        <partition_by>toYYYYMM(event_date)</partition_by>
        <max_size_rows>1048576</max_size_rows>
        <reserved_size_rows>8192</reserved_size_rows>
        <buffer_size_rows_flush_threshold>524288</buffer_size_rows_flush_threshold>
        <flush_on_crash>false</flush_on_crash>
        <!-- <engine>Engine = MergeTree PARTITION BY event_date ORDER BY event_time TTL event_date + INTERVAL 30 day</engine> -->
    </backup_log>
</clickhouse>

backup_threads

BACKUP リクエストの実行に使用されるスレッド数の最大値。

backups

バックアップのための設定で、BACKUP および RESTORE 文を実行する際に使用されます。

以下の設定はサブタグで個別に構成できます。

SettingTypeDescriptionDefault
allow_concurrent_backupsBool同一ホスト上で複数のバックアップ処理を同時に実行できるかどうかを制御します。true
allow_concurrent_restoresBool同一ホスト上で複数のリストア処理を同時に実行できるかどうかを制御します。true
allowed_diskStringFile() を使用する際にバックアップ先とするディスクを指定します。この設定は File を使用するために必須です。``
allowed_pathStringFile() を使用する際にバックアップ先とするパスを指定します。この設定は File を使用するために必須です。``
attempts_to_collect_metadata_before_sleepUInt収集したメタデータを比較した結果、不整合があった場合にスリープに入るまでにメタデータ収集を試行する回数です。2
collect_metadata_timeoutUInt64バックアップ中にメタデータを収集する際のタイムアウト時間(ミリ秒)です。600000
compare_collected_metadataBooltrue の場合、バックアップ中に収集したメタデータを既存のメタデータと比較し、バックアップ処理中に変更されていないことを確認します。true
create_table_timeoutUInt64リストア中にテーブルを作成する際のタイムアウト時間(ミリ秒)です。300000
max_attempts_after_bad_versionUInt64協調バックアップ/リストア中に bad version エラーが発生した場合にリトライを行う最大試行回数です。3
max_sleep_before_next_attempt_to_collect_metadataUInt64次のメタデータ収集を試行する前にスリープする最大時間(ミリ秒)です。100
min_sleep_before_next_attempt_to_collect_metadataUInt64次のメタデータ収集を試行する前にスリープする最小時間(ミリ秒)です。5000
remove_backup_files_after_failureBoolBACKUP コマンドが失敗した場合、ClickHouse は失敗前にバックアップへコピー済みのファイルを削除しようとします。false の場合、コピー済みファイルはそのまま残ります。true
sync_period_msUInt64協調バックアップ/リストアにおける同期周期(ミリ秒)です。5000
test_inject_sleepBoolテスト用途のスリープを有効にします。false
test_randomize_orderBooltrue の場合、テスト目的で特定の処理順序をランダム化します。false
zookeeper_pathStringON CLUSTER 句を使用する場合に、バックアップおよびリストアのメタデータが保存される ZooKeeper 上のパスです。/clickhouse/backups

この設定はデフォルトで次のように構成されています。

<backups>
    ....
</backups>

backups_io_thread_pool_queue_size

バックアップ用 IO スレッドプールにスケジュールできるジョブの最大数です。現在の S3 バックアップロジックのため、このキューは無制限にしておくことを推奨します。

注記

値が 0(デフォルト)の場合は無制限を意味します。

bcrypt_workfactor

bcrypt_password 認証タイプ用のワークファクターです。この認証タイプは Bcrypt アルゴリズム を使用します。 ワークファクターは、ハッシュの計算およびパスワード検証に必要な計算量と時間を決定します。

<bcrypt_workfactor>12</bcrypt_workfactor>
注記

高頻度で認証を行うアプリケーションでは、 より高いワークファクターを設定した場合の bcrypt の計算コストを考慮し、 別の認証方式の利用を検討してください。

blob_storage_log

blob_storage_log システムテーブルに関する設定です。

The following settings can be configured by sub-tags:

SettingDescriptionDefaultNote
databaseデータベース名。
tableシステムテーブル名。
engineシステムテーブルに対する MergeTree エンジン定義partition_by または order_by が定義されている場合は使用できません。指定しない場合はデフォルトで MergeTree が選択されます
partition_byシステムテーブルに対するカスタムパーティショニングキーシステムテーブルに engine を指定する場合、partition_by パラメータは engine の設定内で直接指定する必要があります
ttlテーブルの TTL を指定します。システムテーブルに engine を指定する場合、ttl パラメータは engine の設定内で直接指定する必要があります
order_byシステムテーブルに対するカスタムソートキーengine が定義されている場合は使用できません。システムテーブルに engine を指定する場合、order_by パラメータは engine の設定内で直接指定する必要があります
storage_policyテーブルに使用するストレージポリシー名(任意)。システムテーブルに engine を指定する場合、storage_policy パラメータは engine の設定内で直接指定する必要があります
settingsMergeTree の動作を制御する追加パラメータ(任意)。システムテーブルに engine を指定する場合、settings パラメータは engine の設定内で直接指定する必要があります
flush_interval_millisecondsメモリ上のバッファからテーブルへデータをフラッシュする間隔。7500
max_size_rowsログの最大行数。未フラッシュのログ数が max_size_rows に達すると、ログがディスクにダンプされます。1048576
reserved_size_rowsログ用に事前確保されるメモリ容量(行数)。8192
buffer_size_rows_flush_threshold行数のしきい値。このしきい値に達すると、バックグラウンドでログをディスクへフラッシュする処理が起動します。max_size_rows / 2
flush_on_crashクラッシュ発生時にログをディスクへダンプするかどうかを設定します。false

例:

<blob_storage_log>
    <database>system</database
    <table>blob_storage_log</table
    <partition_by>toYYYYMM(event_date)</partition_by>
    <flush_interval_milliseconds>7500</flush_interval_milliseconds
    <ttl>event_date + INTERVAL 30 DAY</ttl>
</blob_storage_log>

builtin_dictionaries_reload_interval

組み込みディクショナリを再読み込みするまでの間隔(秒)です。

ClickHouse は、組み込みディクショナリを x 秒ごとに再読み込みします。これにより、サーバーを再起動せずに、動作中にディクショナリを編集できます。

<builtin_dictionaries_reload_interval>3600</builtin_dictionaries_reload_interval>

cache_size_to_ram_max_ratio

キャッシュサイズと RAM の最大容量との比率を設定します。メモリが少ないシステムでキャッシュサイズを抑えることができます。

cannot_allocate_thread_fault_injection_probability

テスト目的で使用します。

cgroups_memory_usage_observer_wait_time

cgroups の対応するしきい値によって、サーバーで許可される最大メモリ使用量が調整される秒単位の間隔。

cgroup オブザーバーを無効にするには、この値を 0 に設定します。

compiled_expression_cache_elements_size

compiled expressions 用のキャッシュのサイズ(要素数)を設定します。

compiled_expression_cache_size

コンパイル済み式用キャッシュのサイズ(バイト単位)を設定します。

compression

MergeTree エンジンのテーブルに対するデータ圧縮設定です。

注記

ClickHouse を使い始めたばかりの場合は、これを変更しないことを推奨します。

設定テンプレート:

<compression>
    <case>
      <min_part_size>...</min_part_size>
      <min_part_size_ratio>...</min_part_size_ratio>
      <method>...</method>
      <level>...</level>
    </case>
    ...
</compression>

<case> フィールド:

  • min_part_size – データパーツの最小サイズ。
  • min_part_size_ratio – データパーツサイズとテーブルサイズの比率。
  • method – 圧縮方式。指定可能な値: lz4, lz4hc, zstd, deflate_qpl
  • level – 圧縮レベル。Codecsを参照してください。
注記

複数の <case> セクションを設定できます。

条件が満たされたときの動作:

  • データパーツが条件セットに一致した場合、ClickHouse は指定された圧縮方式を使用します。
  • データパーツが複数の条件セットに一致した場合、ClickHouse は最初に一致した条件セットを使用します。
注記

データパーツがいずれの条件も満たさない場合、ClickHouse は lz4 圧縮を使用します。

<compression incl="clickhouse_compression">
    <case>
        <min_part_size>10000000000</min_part_size>
        <min_part_size_ratio>0.01</min_part_size_ratio>
        <method>zstd</method>
        <level>1</level>
    </case>
</compression>

concurrent_threads_scheduler

concurrent_threads_soft_limit_numconcurrent_threads_soft_limit_ratio_to_cores によって指定される CPU スロットのスケジューリング方法を制御するポリシーです。制限された数の CPU スロットを同時実行中のクエリ間でどのように分配するかを決定するアルゴリズムです。スケジューラはサーバーを再起動せずに実行時に変更できます。

設定可能な値:

  • round_robinuse_concurrency_control = 1 に設定された各クエリは、最大で max_threads 個の CPU スロットを確保します。スレッドごとに 1 スロットです。競合が発生した場合、CPU スロットはラウンドロビン方式でクエリに割り当てられます。最初のスロットは無条件に付与される点に注意してください。このため、多数の max_threads = 1 のクエリが存在する状況では、max_threads が大きいクエリに対して不公平となり、そのレイテンシーが増加する可能性があります。
  • fair_round_robinuse_concurrency_control = 1 に設定された各クエリは、最大で max_threads - 1 個の CPU スロットを確保します。これは、各クエリの最初のスレッドに CPU スロットを必要としない round_robin のバリエーションです。このため、max_threads = 1 のクエリはスロットをまったく必要とせず、スロットを不公平に独占することはできません。無条件に付与されるスロットは存在しません。

concurrent_threads_soft_limit_num

リモートサーバーからデータを取得するためのスレッドを除き、すべてのクエリの処理に使用できるクエリ処理スレッドの最大数です。これは厳密な上限値ではありません。上限に達した場合でも、そのクエリには少なくとも 1 つのスレッドが割り当てられて実行されます。実行中に追加のスレッドが利用可能になった場合、クエリは必要なスレッド数までスケールアップできます。

注記

0(デフォルト)の値は無制限を意味します。

concurrent_threads_soft_limit_ratio_to_cores

concurrent_threads_soft_limit_num と同様ですが、値を CPU コア数に対する比率で指定します。

config_reload_interval_ms

ClickHouse が設定を再読み込みし、変更の有無を確認する間隔

core_dump

コアダンプファイルサイズのソフトリミットを設定します。

注記

ハードリミットはシステムツールで設定します。

<core_dump>
     <size_limit>1073741824</size_limit>
</core_dump>

cpu_slot_preemption

CPU リソース(MASTER THREAD および WORKER THREAD)のワークロードスケジューリングをどのように行うかを定義します。

  • true(推奨)の場合、実際に消費された CPU 時間に基づいて計測が行われます。競合するワークロードに対して、公平な量の CPU 時間が割り当てられます。スロットは一定期間だけ割り当てられ、有効期限後に再要求されます。CPU リソースが過負荷の場合、スロットの要求がスレッドの実行をブロックすることがあり、その結果プリエンプションが発生する可能性があります。これにより CPU 時間の公平性が保証されます。
  • false(デフォルト)の場合、計測は割り当てられた CPU スロット数に基づいて行われます。競合するワークロードに対して、公平な数の CPU スロットが割り当てられます。スロットはスレッドの開始時に割り当てられ、実行が終了するまで継続的に保持され、その後解放されます。クエリ実行に割り当てられるスレッド数は 1 から max_threads まで増加することはあっても減少することはありません。これは長時間実行されるクエリに有利であり、短いクエリの CPU リソース枯渇を引き起こす可能性があります。

<cpu_slot_preemption>true</cpu_slot_preemption>

関連項目

cpu_slot_preemption_timeout_ms

ワーカースレッドがプリエンプション時、すなわち別の CPU スロットが付与されるのを待機できる最大時間(ミリ秒)を定義します。このタイムアウト後もスレッドが新しい CPU スロットを取得できない場合、そのスレッドは終了し、クエリは同時に実行されるスレッド数がより少ない状態へ動的にスケールダウンされます。マスタースレッドは決してスケールダウンされませんが、無期限にプリエンプションを受ける可能性がある点に注意してください。これは cpu_slot_preemption が有効化されており、WORKER THREAD に対して CPU リソースが定義されている場合にのみ意味を持ちます。

<cpu_slot_preemption_timeout_ms>1000</cpu_slot_preemption_timeout_ms>

関連項目

cpu_slot_quantum_ns

スレッドが CPU スロットを取得してから、別の CPU スロットを要求するまでに消費できる CPU ナノ秒数を定義します。cpu_slot_preemption が有効であり、MASTER THREAD または WORKER THREAD に対して CPU リソースが定義されている場合にのみ有効です。

<cpu_slot_quantum_ns>10000000</cpu_slot_quantum_ns>

関連項目

crash_log

crash_log システムテーブルの動作に関する設定です。

以下の設定はサブタグとして構成できます:

Setting説明デフォルト注記
databaseデータベース名。
tableシステムテーブル名。
engineシステムテーブル用の MergeTree エンジン定義partition_by または order_by が定義されている場合は使用できません。指定されていない場合はデフォルトで MergeTree が選択されます
partition_byシステムテーブル用のカスタムパーティションキーシステムテーブルに対して engine が指定されている場合、partition_by パラメータは直接 'engine' の中で指定する必要があります
ttlテーブルの TTL を指定します。システムテーブルに対して engine が指定されている場合、ttl パラメータは直接 'engine' の中で指定する必要があります
order_byシステムテーブル用のカスタムソートキーengine が定義されている場合は使用できません。システムテーブルに対して engine が指定されている場合、order_by パラメータは直接 'engine' の中で指定する必要があります
storage_policyテーブルに使用するストレージポリシー名 (任意)。システムテーブルに対して engine が指定されている場合、storage_policy パラメータは直接 'engine' の中で指定する必要があります
settingsMergeTree の動作を制御する追加パラメータ (任意)。システムテーブルに対して engine が指定されている場合、settings パラメータは直接 'engine' の中で指定する必要があります
flush_interval_millisecondsメモリ上のバッファからテーブルへデータをフラッシュする間隔。7500
max_size_rowsログの最大行数。未フラッシュのログ数が max_size_rows に達すると、ログがディスクにダンプされます。1024
reserved_size_rowsログ用に事前確保されるメモリサイズ (行数)。1024
buffer_size_rows_flush_threshold行数のしきい値。このしきい値に達すると、バックグラウンドでログをディスクにフラッシュする処理が開始されます。max_size_rows / 2
flush_on_crashクラッシュ時にログをディスクへダンプするかどうかを設定します。false

デフォルトのサーバー設定ファイル config.xml には、次の settings セクションが含まれます:

<crash_log>
    <database>system</database>
    <table>crash_log</table>
    <partition_by>toYYYYMM(event_date)</partition_by>
    <flush_interval_milliseconds>7500</flush_interval_milliseconds>
    <max_size_rows>1024</max_size_rows>
    <reserved_size_rows>1024</reserved_size_rows>
    <buffer_size_rows_flush_threshold>512</buffer_size_rows_flush_threshold>
    <flush_on_crash>false</flush_on_crash>
</crash_log>

custom_cached_disks_base_directory

この設定は、カスタム(SQL で作成された)キャッシュディスクのキャッシュパスを指定します。 custom_cached_disks_base_directory は、カスタムディスクに対しては filesystem_caches_pathfilesystem_caches_path.xml に定義)よりも優先され、 custom_cached_disks_base_directory が存在しない場合にのみ filesystem_caches_path が使用されます。 ファイルシステムキャッシュのパス設定は、このディレクトリ配下になければならず、 そうでない場合はディスクの作成を阻止する例外がスローされます。

注記

これは、以前のバージョンで作成され、その後サーバーがアップグレードされたディスクには影響しません。 この場合、サーバーが正常に起動できるように、例外はスローされません。

例:

<custom_cached_disks_base_directory>/var/lib/clickhouse/caches/</custom_cached_disks_base_directory>

custom_settings_prefixes

カスタム設定で使用するプレフィックスの一覧です。プレフィックスはカンマ区切りで指定する必要があります。

<custom_settings_prefixes>custom_</custom_settings_prefixes>

関連項目

database_atomic_delay_before_drop_table_sec

削除されたテーブルを UNDROP 文を使用して復元できるまでの遅延時間を表します。DROP TABLESYNC 修飾子付きで実行された場合、この設定は無視されます。 この設定のデフォルト値は 480(8 分)です。

database_catalog_drop_error_cooldown_sec

テーブルの削除に失敗した場合、ClickHouse はこのタイムアウトまで待機してから、操作を再試行します。

database_catalog_drop_table_concurrency

テーブル削除処理に使用されるスレッドプールのサイズ。

database_catalog_unused_dir_cleanup_period_sec

store/ ディレクトリから不要なデータをクリーンアップするタスクのパラメータです。 このタスクの実行間隔(スケジュール周期)を設定します。

注記

値が 0 の場合は「実行しない」を意味します。デフォルト値は 1 日に相当します。

database_catalog_unused_dir_hide_timeout_sec

store/ ディレクトリ内の不要なデータをクリーンアップするタスクのパラメータです。 あるサブディレクトリが clickhouse-server によって使用されておらず、かつ直近 database_catalog_unused_dir_hide_timeout_sec 秒間にそのディレクトリが変更されていない場合、このタスクは すべてのアクセス権を削除することでそのディレクトリを「隠し」ます。これは、clickhouse-server が store/ の内部に存在することを想定していないディレクトリにも適用されます。

注記

0 の値は「即時」を意味します。

database_catalog_unused_dir_rm_timeout_sec

store/ ディレクトリから不要なデータをクリーンアップするタスクのパラメータです。 あるサブディレクトリが clickhouse-server によって使用されておらず、以前に「非表示」にされていて (database_catalog_unused_dir_hide_timeout_sec を参照) かつ直近 database_catalog_unused_dir_rm_timeout_sec 秒の間に更新されていない場合、そのタスクはそのディレクトリを削除します。 また、clickhouse-server が store/ 内に存在することを想定していないディレクトリに対しても動作します。

注記

0 の値は「決して削除しない」ことを意味します。デフォルト値は 30 日に相当します。

database_replicated_allow_detach_permanently

Replicated データベースでテーブルを永続的にデタッチすることを許可します

database_replicated_drop_broken_tables

Replicated データベース内の予期しないテーブルを、別のローカルデータベースに移動する代わりに削除します

dead_letter_queue

'dead_letter_queue' システムテーブル用の設定です。

The following settings can be configured by sub-tags:

SettingDescriptionDefaultNote
databaseデータベース名。
tableシステムテーブル名。
engineシステムテーブルに対する MergeTree エンジン定義partition_by または order_by が定義されている場合は使用できません。指定しない場合はデフォルトで MergeTree が選択されます
partition_byシステムテーブルに対するカスタムパーティショニングキーシステムテーブルに engine を指定する場合、partition_by パラメータは engine の設定内で直接指定する必要があります
ttlテーブルの TTL を指定します。システムテーブルに engine を指定する場合、ttl パラメータは engine の設定内で直接指定する必要があります
order_byシステムテーブルに対するカスタムソートキーengine が定義されている場合は使用できません。システムテーブルに engine を指定する場合、order_by パラメータは engine の設定内で直接指定する必要があります
storage_policyテーブルに使用するストレージポリシー名(任意)。システムテーブルに engine を指定する場合、storage_policy パラメータは engine の設定内で直接指定する必要があります
settingsMergeTree の動作を制御する追加パラメータ(任意)。システムテーブルに engine を指定する場合、settings パラメータは engine の設定内で直接指定する必要があります
flush_interval_millisecondsメモリ上のバッファからテーブルへデータをフラッシュする間隔。7500
max_size_rowsログの最大行数。未フラッシュのログ数が max_size_rows に達すると、ログがディスクにダンプされます。1048576
reserved_size_rowsログ用に事前確保されるメモリ容量(行数)。8192
buffer_size_rows_flush_threshold行数のしきい値。このしきい値に達すると、バックグラウンドでログをディスクへフラッシュする処理が起動します。max_size_rows / 2
flush_on_crashクラッシュ発生時にログをディスクへダンプするかどうかを設定します。false

デフォルトの設定は次のとおりです。

<dead_letter_queue>
    <database>system</database>
    <table>dead_letter</table>
    <partition_by>toYYYYMM(event_date)</partition_by>
    <flush_interval_milliseconds>7500</flush_interval_milliseconds>
</dead_letter_queue>

default_database

既定のデータベース名です。

default_password_type

CREATE USER u IDENTIFIED BY 'p' のようなクエリで、自動的に設定されるパスワードの種類を指定します。

指定可能な値は次のとおりです:

  • plaintext_password
  • sha256_password
  • double_sha1_password
  • bcrypt_password
<default_password_type>sha256_password</default_password_type>

default_profile

デフォルトの設定プロファイルです。設定プロファイルは、設定 user_config で指定されたファイル内にあります。

<default_profile>default</default_profile>

default_replica_name

ZooKeeper 内でのレプリカ名。

<default_replica_name>{replica}</default_replica_name>

default_replica_path

ZooKeeper 内のテーブルのパス。

<default_replica_path>/clickhouse/tables/{uuid}/{shard}</default_replica_path>

default_session_timeout

デフォルトのセッションタイムアウト時間(秒)。

<default_session_timeout>60</default_session_timeout>

dictionaries_config

dictionaries の設定ファイルへのパスです。

パス:

  • 絶対パス、またはサーバーの設定ファイルからの相対パスを指定します。
  • パスにはワイルドカードの * および ? を含めることができます。

関連項目:

<dictionaries_config>*_dictionary.xml</dictionaries_config>

dictionaries_lazy_load

Dictionary の遅延読み込みを行います。

  • true の場合、各 Dictionary は最初に使用されたタイミングで読み込まれます。読み込みに失敗した場合、その Dictionary を使用していた関数は例外をスローします。
  • false の場合、サーバーは起動時にすべての Dictionary を読み込みます。
注記

サーバーは、いかなる接続も受け付ける前に、すべての Dictionary の読み込みが完了するまで起動処理で待機します (例外: wait_dictionaries_load_at_startupfalse に設定されている場合)。

<dictionaries_lazy_load>true</dictionaries_lazy_load>

dictionary_background_reconnect_interval

background_reconnect が有効な MySQL および Postgres Dictionary で接続に失敗した場合に、再接続を試行する間隔(ミリ秒単位)。

disable_insertion_and_mutation

insert/alter/delete クエリを無効にします。読み取り専用ノードが必要で、挿入やミューテーションが読み取りパフォーマンスに影響するのを防ぎたい場合に、この設定を有効にします。S3、DataLake、MySQL、PostrgeSQL、Kafka などの外部エンジンへの insert は、この設定に関係なく許可されます。

disable_internal_dns_cache

内部 DNS キャッシュを無効化します。Kubernetes のようにインフラストラクチャが頻繁に変化するシステムで ClickHouse を運用する場合に推奨されます。

disable_tunneling_for_https_requests_over_http_proxy

デフォルトでは、トンネリング(つまり HTTP CONNECT)を使用して、HTTP プロキシ経由で HTTPS リクエストを送信します。この設定でトンネリングを無効化できます。

no_proxy

デフォルトでは、すべてのリクエストがプロキシを経由します。特定のホストに対してプロキシを無効化するには、no_proxy 変数を設定する必要があります。 これは、list および remote リゾルバ用の <proxy> 句の中、もしくは environment リゾルバ用には環境変数として設定できます。 IP アドレス、ドメイン、サブドメイン、および完全にバイパスするためのワイルドカード '*' をサポートします。先頭のドットは、curl と同様に取り除かれます。

Example

以下の設定では、clickhouse.cloud およびそのすべてのサブドメイン(例: auth.clickhouse.cloud)へのリクエストはプロキシをバイパスします。 GitLab についても同様で、先頭にドットが付いていても同じ動作になります。gitlab.comabout.gitlab.com の両方がプロキシをバイパスします。

<proxy>
    <no_proxy>clickhouse.cloud,.gitlab.com</no_proxy>
    <http>
        <uri>http://proxy1</uri>
        <uri>http://proxy2:3128</uri>
    </http>
    <https>
        <uri>http://proxy1:3128</uri>
    </https>
</proxy>

disk_connections_hard_limit

この制限に達した状態でさらに作成を試みると、例外がスローされます。0 に設定するとハード制限が無効になります。この制限はディスク接続に適用されます。

disk_connections_soft_limit

この上限を超えた接続の TTL は大幅に短くなります。この上限はディスクへの接続に適用されます。

disk_connections_store_limit

この上限を超えた接続は、使用後にリセットされます。0 に設定すると、接続キャッシュを無効にします。この上限はディスク接続に適用されます。

disk_connections_warn_limit

使用中の接続数がこの上限を超えると、警告メッセージがログに書き込まれます。この上限はディスクへの接続に適用されます。

display_secrets_in_show_and_select

テーブル、データベース、テーブル関数、およびディクショナリに対する SHOW および SELECT クエリでシークレットを表示するかどうかを制御します。

シークレットを表示するには、ユーザーは format_display_secrets_in_show_and_select フォーマット設定 を有効にし、 displaySecretsInShowAndSelect 権限も持っている必要があります。

設定可能な値:

  • 0 — 無効。
  • 1 — 有効。

distributed_cache_apply_throttling_settings_from_client

キャッシュサーバーがクライアントから受信したスロットリング設定を適用するかどうかを指定します。

distributed_cache_keep_up_free_connections_ratio

分散キャッシュが空きとして保持しようとするアクティブ接続数のソフト上限を指定します。空き接続数が distributed_cache_keep_up_free_connections_ratio * max_connections を下回ると、空き接続数がこの制限を上回るまで、最後のアクティビティ時刻が最も古い接続から順にクローズされます。

distributed_ddl

クラスタ上で distributed ddl queriesCREATEDROPALTERRENAME)を実行する処理を管理します。 ZooKeeper が有効になっている場合にのみ動作します。

<distributed_ddl> 内で設定可能な項目は次のとおりです。

SettingDescriptionDefault Value
pathDDL クエリ用の task_queue に対応する Keeper 内のパス
profileDDL クエリの実行に使用されるプロファイル
pool_size同時に実行できる ON CLUSTER クエリの数
max_tasks_in_queueキューに入れられるタスクの最大数1,000
task_max_lifetimeノードの経過時間がこの値を超えた場合に、そのノードを削除します。7 * 24 * 60 * 60(1 週間を秒で表現)
cleanup_delay_period新しいノードイベントを受信した際、直近のクリーンアップが cleanup_delay_period 秒より前に実行されている場合にクリーンアップを開始します。60

Example

<distributed_ddl>
    <!-- Path in ZooKeeper to queue with DDL queries -->
    <path>/clickhouse/task_queue/ddl</path>

    <!-- Settings from this profile will be used to execute DDL queries -->
    <profile>default</profile>

    <!-- Controls how much ON CLUSTER queries can be run simultaneously. -->
    <pool_size>1</pool_size>

    <!--
         Cleanup settings (active tasks will not be removed)
    -->

    <!-- Controls task TTL (default 1 week) -->
    <task_max_lifetime>604800</task_max_lifetime>

    <!-- Controls how often cleanup should be performed (in seconds) -->
    <cleanup_delay_period>60</cleanup_delay_period>

    <!-- Controls how many tasks could be in the queue -->
    <max_tasks_in_queue>1000</max_tasks_in_queue>
</distributed_ddl>

distributed_ddl_use_initial_user_and_roles

有効にすると、ON CLUSTER クエリはリモート分片での実行時にも、クエリを開始したユーザーおよびロールを保持して使用します。これによりクラスタ全体で一貫したアクセス制御が行えますが、そのユーザーとロールがすべてのノード上に存在している必要があります。

dns_allow_resolve_names_to_ipv4

DNS 名を IPv4 アドレスに解決することを許可します。

dns_allow_resolve_names_to_ipv6

ホスト名を IPv6 アドレスに解決できるようにします。

dns_cache_max_entries

内部 DNS キャッシュの最大件数。

dns_cache_update_period

内部 DNS キャッシュを更新する間隔(秒単位)。

dns_max_consecutive_failures

ホスト名を ClickHouse の DNS キャッシュから削除する前に許容される、そのホスト名に対する DNS 解決の最大連続失敗回数。

drop_distributed_cache_pool_size

分散キャッシュの破棄に使用されるスレッドプールのサイズです。

drop_distributed_cache_queue_size

分散キャッシュを破棄する処理に使用されるスレッドプールのキューサイズです。

enable_azure_sdk_logging

Azure SDK のログ出力を有効にします

encryption

encryption codecs で使用するキーを取得するためのコマンドを設定します。キー(複数可)は環境変数に書き込むか、設定ファイルで設定する必要があります。

キーは長さが 16 バイトの 16 進数または文字列である必要があります。

設定ファイルからの読み込み:

<encryption_codecs>
    <aes_128_gcm_siv>
        <key>1234567812345678</key>
    </aes_128_gcm_siv>
</encryption_codecs>
注記

キーを設定ファイルに保存することは推奨されません。安全とは言えません。キーは安全なディスク上の別の設定ファイルに移動し、その設定ファイルへのシンボリックリンクを config.d/ フォルダに配置できます。

キーが 16 進数形式の場合に、設定から読み込む例:

<encryption_codecs>
    <aes_128_gcm_siv>
        <key_hex>00112233445566778899aabbccddeeff</key_hex>
    </aes_128_gcm_siv>
</encryption_codecs>

環境変数からキーを読み込む:

<encryption_codecs>
    <aes_128_gcm_siv>
        <key_hex from_env="ENVVAR"></key_hex>
    </aes_128_gcm_siv>
</encryption_codecs>

ここで current_key_id は暗号化に使用する現在の鍵を設定し、指定されたすべての鍵を復号に使用できます。

これらの各方法は、複数の鍵に対して適用できます。

<encryption_codecs>
    <aes_128_gcm_siv>
        <key_hex id="0">00112233445566778899aabbccddeeff</key_hex>
        <key_hex id="1" from_env="ENVVAR"></key_hex>
        <current_key_id>1</current_key_id>
    </aes_128_gcm_siv>
</encryption_codecs>

ここで current_key_id は、暗号化に使用中の現在のキーを示します。

また、ユーザーは nonce を指定することもできます。nonce の長さは 12 バイトである必要があります(デフォルトでは、暗号化および復号処理には、ゼロバイトのみで構成された nonce が使用されます)。

<encryption_codecs>
    <aes_128_gcm_siv>
        <nonce>012345678910</nonce>
    </aes_128_gcm_siv>
</encryption_codecs>

または 16 進数表記で指定できます:

<encryption_codecs>
    <aes_128_gcm_siv>
        <nonce_hex>abcdefabcdef</nonce_hex>
    </aes_128_gcm_siv>
</encryption_codecs>
注記

上記で説明した内容はすべて aes_256_gcm_siv にも適用できます(ただしキーの長さは 32 バイトである必要があります)。

error_log

デフォルトでは無効になっています。

有効化

エラー履歴の収集 system.error_log を手動で有効化するには、次の内容で /etc/clickhouse-server/config.d/error_log.xml を作成します。

<clickhouse>
    <error_log>
        <database>system</database>
        <table>error_log</table>
        <flush_interval_milliseconds>7500</flush_interval_milliseconds>
        <collect_interval_milliseconds>1000</collect_interval_milliseconds>
        <max_size_rows>1048576</max_size_rows>
        <reserved_size_rows>8192</reserved_size_rows>
        <buffer_size_rows_flush_threshold>524288</buffer_size_rows_flush_threshold>
        <flush_on_crash>false</flush_on_crash>
    </error_log>
</clickhouse>

無効化

error_log の設定を無効にするには、次の内容で /etc/clickhouse-server/config.d/disable_error_log.xml ファイルを作成します。

<clickhouse>
    <error_log remove="1" />
</clickhouse>

The following settings can be configured by sub-tags:

SettingDescriptionDefaultNote
databaseデータベース名。
tableシステムテーブル名。
engineシステムテーブルに対する MergeTree エンジン定義partition_by または order_by が定義されている場合は使用できません。指定しない場合はデフォルトで MergeTree が選択されます
partition_byシステムテーブルに対するカスタムパーティショニングキーシステムテーブルに engine を指定する場合、partition_by パラメータは engine の設定内で直接指定する必要があります
ttlテーブルの TTL を指定します。システムテーブルに engine を指定する場合、ttl パラメータは engine の設定内で直接指定する必要があります
order_byシステムテーブルに対するカスタムソートキーengine が定義されている場合は使用できません。システムテーブルに engine を指定する場合、order_by パラメータは engine の設定内で直接指定する必要があります
storage_policyテーブルに使用するストレージポリシー名(任意)。システムテーブルに engine を指定する場合、storage_policy パラメータは engine の設定内で直接指定する必要があります
settingsMergeTree の動作を制御する追加パラメータ(任意)。システムテーブルに engine を指定する場合、settings パラメータは engine の設定内で直接指定する必要があります
flush_interval_millisecondsメモリ上のバッファからテーブルへデータをフラッシュする間隔。7500
max_size_rowsログの最大行数。未フラッシュのログ数が max_size_rows に達すると、ログがディスクにダンプされます。1048576
reserved_size_rowsログ用に事前確保されるメモリ容量(行数)。8192
buffer_size_rows_flush_threshold行数のしきい値。このしきい値に達すると、バックグラウンドでログをディスクへフラッシュする処理が起動します。max_size_rows / 2
flush_on_crashクラッシュ発生時にログをディスクへダンプするかどうかを設定します。false

format_parsing_thread_pool_queue_size

入力データのパースのためにスレッドプールのキューに登録できるジョブの最大数。

注記

値が 0 の場合は無制限を意味します。

format_schema_path

入力データ用のスキーマが格納されているディレクトリへのパスです。例えば、CapnProto フォーマット用のスキーマなどです。

<!-- Directory containing schema files for various input formats. -->
<format_schema_path>format_schemas/</format_schema_path>

global_profiler_cpu_time_period_ns

グローバルプロファイラの CPU クロックタイマーの周期(ナノ秒)。CPU クロックのグローバルプロファイラを無効にするには 0 を設定します。推奨値は、単一クエリのプロファイリングには少なくとも 10000000(1 秒あたり 100 回)、クラスタ全体のプロファイリングには 1000000000(1 秒に 1 回)です。

global_profiler_real_time_period_ns

グローバルプロファイラのリアルクロックタイマーの周期を指定します(ナノ秒単位)。リアルクロックグローバルプロファイラを無効にするには、0 を設定します。推奨値は、単一クエリのプロファイリングには少なくとも 10000000(1 秒間に 100 回)、クラスタ全体のプロファイリングには 1000000000(1 秒に 1 回)です。

google_protos_path

Protobuf 型の proto ファイルを含むディレクトリを指定します。

例:

<google_protos_path>/usr/share/clickhouse/protos/</google_protos_path>

graphite

Graphite にデータを送信します。

設定項目:

  • host – Graphite サーバー。
  • port – Graphite サーバー上のポート。
  • interval – 送信間隔(秒)。
  • timeout – データ送信のタイムアウト(秒)。
  • root_path – キーのプレフィックス。
  • metricssystem.metrics テーブルのデータを送信。
  • eventssystem.events テーブルに一定期間蓄積された差分データを送信。
  • events_cumulativesystem.events テーブルの累積データを送信。
  • asynchronous_metricssystem.asynchronous_metrics テーブルのデータを送信。

複数の <graphite> 句を設定できます。たとえば、異なる間隔で異なるデータを送信するために使用できます。

<graphite>
    <host>localhost</host>
    <port>42000</port>
    <timeout>0.1</timeout>
    <interval>60</interval>
    <root_path>one_min</root_path>
    <metrics>true</metrics>
    <events>true</events>
    <events_cumulative>false</events_cumulative>
    <asynchronous_metrics>true</asynchronous_metrics>
</graphite>

graphite_rollup

Graphite データの間引き設定です。

詳細については、GraphiteMergeTree を参照してください。

<graphite_rollup_example>
    <default>
        <function>max</function>
        <retention>
            <age>0</age>
            <precision>60</precision>
        </retention>
        <retention>
            <age>3600</age>
            <precision>300</precision>
        </retention>
        <retention>
            <age>86400</age>
            <precision>3600</precision>
        </retention>
    </default>
</graphite_rollup_example>

hsts_max_age

HSTS の有効期間(秒単位)。

注記

値が 0 の場合、ClickHouse は HSTS を無効にします。正の数値を指定すると HSTS が有効になり、その max-age は指定した数値になります。

<hsts_max_age>600000</hsts_max_age>

http_connections_hard_limit

この制限に達した状態で新たに作成しようとすると、例外がスローされます。ハードリミットを無効にするには 0 を設定します。この制限は、いずれのディスクやストレージにも属さない HTTP 接続に適用されます。

http_connections_soft_limit

この制限を超えた接続は、有効期間が大幅に短くなります。この制限は、いずれのディスクやストレージにも属さない http 接続に適用されます。

http_connections_store_limit

この上限を超えた接続は、使用後にリセットされます。接続キャッシュを無効にするには 0 を設定します。この制限は、いずれのディスクやストレージにも属さない HTTP 接続に適用されます。

http_connections_warn_limit

使用中の接続数がこの上限を超えた場合、警告メッセージがログに書き込まれます。この上限は、いずれのディスクやストレージにも属さない HTTP 接続に適用されます。

http_handlers

カスタム HTTP ハンドラーを定義できます。 新しい http ハンドラーを追加するには、新しい <rule> 要素を追加します。 ルールは定義された順に上から順にチェックされ、 最初にマッチしたもののハンドラーが実行されます。

以下の設定はサブタグで構成できます:

Sub-tagsDefinition
urlリクエスト URL をマッチさせるために使用します。正規表現マッチを使用するには、プレフィックス 'regex:' を付けてください(任意)
methodsリクエストメソッドをマッチさせるために使用します。複数のメソッドをマッチさせるには、カンマ区切りで指定します(任意)
headersリクエストヘッダーをマッチさせるために使用します。各子要素をマッチさせます(子要素名がヘッダー名)。正規表現マッチを使用するには、プレフィックス 'regex:' を付けてください(任意)
handlerリクエストハンドラー
empty_query_stringURL にクエリ文字列が存在しないことをチェックします

handler には、以下の設定が含まれており、サブタグで構成できます:

Sub-tagsDefinition
urlリダイレクト先の URL
typeサポートされる type: static, dynamic_query_handler, predefined_query_handler, redirect
statusstatic type と併用します。レスポンスのステータスコード
query_param_namedynamic_query_handler type と併用します。HTTP リクエストパラメータ内の <query_param_name> に対応する値を抽出して実行します
querypredefined_query_handler type と併用します。ハンドラーが呼び出されたときにクエリを実行します
content_typestatic type と併用します。レスポンスの Content-Type
response_contentstatic type と併用します。クライアントに送信されるレスポンスコンテンツです。プレフィックス 'file://' または 'config://' を使用する場合、ファイルまたは設定からコンテンツを取得してクライアントに送信します

ルールのリストと合わせて、すべてのデフォルトハンドラーを有効にする <defaults/> を指定できます。

Example:

<http_handlers>
    <rule>
        <url>/</url>
        <methods>POST,GET</methods>
        <headers><pragma>no-cache</pragma></headers>
        <handler>
            <type>dynamic_query_handler</type>
            <query_param_name>query</query_param_name>
        </handler>
    </rule>

    <rule>
        <url>/predefined_query</url>
        <methods>POST,GET</methods>
        <handler>
            <type>predefined_query_handler</type>
            <query>SELECT * FROM system.settings</query>
        </handler>
    </rule>

    <rule>
        <handler>
            <type>static</type>
            <status>200</status>
            <content_type>text/plain; charset=UTF-8</content_type>
            <response_content>config://http_server_default_response</response_content>
        </handler>
    </rule>
</http_handlers>

http_options_response

OPTIONS HTTP リクエストのレスポンスにヘッダーを追加するために使用します。 OPTIONS メソッドは、CORS のプリフライトリクエストを送信する際に使用されます。

詳細については、OPTIONS を参照してください。

例:

<http_options_response>
     <header>
            <name>Access-Control-Allow-Origin</name>
            <value>*</value>
     </header>
     <header>
          <name>Access-Control-Allow-Headers</name>
          <value>origin, x-requested-with, x-clickhouse-format, x-clickhouse-user, x-clickhouse-key, Authorization</value>
     </header>
     <header>
          <name>Access-Control-Allow-Methods</name>
          <value>POST, GET, OPTIONS</value>
     </header>
     <header>
          <name>Access-Control-Max-Age</name>
          <value>86400</value>
     </header>
</http_options_response>

http_server_default_response

ClickHouse の HTTP(S) サーバーにアクセスした際に、デフォルトで表示されるページです。 デフォルト値は "Ok."(末尾に改行が付きます)です。

http://localhost: http_port にアクセスしたときに https://tabix.io/ を開きます。

<http_server_default_response>
  <![CDATA[<html ng-app="SMI2"><head><base href="http://ui.tabix.io/"></head><body><div ui-view="" class="content-ui"></div><script src="http://loader.tabix.io/master.js"></script></body></html>]]>
</http_server_default_response>

iceberg_catalog_threadpool_pool_size

Iceberg カタログのバックグラウンドスレッドプールのサイズ

iceberg_catalog_threadpool_queue_size

Iceberg カタログプールのキューに投入可能なタスク数の上限

iceberg_metadata_files_cache_max_entries

iceberg メタデータファイルキャッシュの最大エントリ数。0 を指定すると無効になります。

iceberg_metadata_files_cache_policy

Iceberg メタデータファイルのキャッシュポリシー名。

iceberg_metadata_files_cache_size

iceberg メタデータキャッシュの最大サイズ(バイト単位)。0 にすると無効になります。

iceberg_metadata_files_cache_size_ratio

Iceberg メタデータキャッシュにおける、キャッシュ全体サイズに対する(SLRU ポリシーの場合の)保護キューのサイズの割合。

ignore_empty_sql_security_in_create_view_query

true の場合、ClickHouse は SQL セキュリティステートメントが空の CREATE VIEW クエリに既定値を書き込みません。

注記

この設定が必要なのは移行期間中のみであり、24.4 以降は廃止される予定です。

include_from

置換定義を記述したファイルへのパスです。XML と YAML の両方の形式がサポートされています。

詳細については「Configuration files」セクションを参照してください。

<include_from>/etc/metrica.xml</include_from>

index_mark_cache_policy

セカンダリ索引マークキャッシュのポリシー名。

index_mark_cache_size

インデックスマークキャッシュの最大サイズ。

注記

値を 0 にすると、無効化されます。

この設定は実行時に変更でき、即座に反映されます。

index_mark_cache_size_ratio

セカンダリ索引マークキャッシュにおける(SLRU ポリシーの場合の)保護キューのサイズが、そのキャッシュ全体のサイズに占める割合を指定します。

index_uncompressed_cache_policy

セカンダリ索引用の非圧縮キャッシュポリシーの名前。

index_uncompressed_cache_size

MergeTree の索引における非圧縮ブロック用キャッシュの最大サイズ。

注記

0 を指定すると無効になります。

この設定は実行時に変更でき、直ちに反映されます。

index_uncompressed_cache_size_ratio

セカンダリ索引の非圧縮キャッシュにおける保護キュー(SLRU ポリシー使用時)のサイズを、キャッシュ全体サイズに対する比率で指定します。

interserver_http_credentials

レプリケーション中に他のサーバーへ接続するために使用されるユーザー名とパスワードです。さらに、サーバーはこれらの認証情報を使って他のレプリカを認証します。 したがって、interserver_http_credentials はクラスター内のすべてのレプリカで同一である必要があります。

注記
  • デフォルトでは、interserver_http_credentials セクションが省略されている場合、レプリケーション時に認証は使用されません。
  • interserver_http_credentials の設定は、ClickHouse クライアント認証情報の構成とは関係ありません。
  • これらの認証情報は、HTTP および HTTPS によるレプリケーションで共通です。

以下の設定はサブタグで設定できます:

  • user — ユーザー名。
  • password — パスワード。
  • allow_emptytrue の場合、認証情報が設定されていても、他のレプリカが認証なしで接続することを許可します。false の場合、認証なしの接続は拒否されます。デフォルト: false
  • old — 認証情報ローテーション中に使用される古い userpassword を保持します。複数の old セクションを指定できます。

認証情報のローテーション

ClickHouse は、すべてのレプリカを同時に停止して設定を更新することなく、サーバー間 HTTP 認証情報の動的なローテーションをサポートします。認証情報は複数のステップで変更できます。

認証を有効にするには、interserver_http_credentials.allow_emptytrue に設定し、認証情報を追加します。これにより、認証ありおよび認証なしの両方の接続が許可されます。

<interserver_http_credentials>
    <user>admin</user>
    <password>111</password>
    <allow_empty>true</allow_empty>
</interserver_http_credentials>

すべてのレプリカの設定が完了したら、allow_emptyfalse に変更するか、この設定を削除してください。これにより、新しい認証情報を用いた認証が必須になります。

既存の認証情報を変更するには、interserver_http_credentials.old セクションにユーザー名とパスワードを移動し、userpassword を新しい値に更新します。この時点で、サーバーは他のレプリカへ接続する際には新しい認証情報を使用し、他のレプリカからの接続については新旧どちらの認証情報も受け付けます。

<interserver_http_credentials>
    <user>admin</user>
    <password>222</password>
    <old>
        <user>admin</user>
        <password>111</password>
    </old>
    <old>
        <user>temp</user>
        <password>000</password>
    </old>
</interserver_http_credentials>

新しい認証情報がすべてのレプリカに適用されたら、古い認証情報は削除できます。

interserver_http_host

他のサーバーがこのサーバーにアクセスするために利用するホスト名です。

省略した場合は、hostname -f コマンドと同じ方法で定義されます。

特定のネットワークインターフェイスから切り離したい場合に有用です。

<interserver_http_host>example.clickhouse.com</interserver_http_host>

interserver_http_port

ClickHouse サーバー間でデータを交換するためのポート。

<interserver_http_port>9009</interserver_http_port>

interserver_https_host

interserver_http_host と同様で、他のサーバーが HTTPS 経由でこのサーバーにアクセスする際に使用されるホスト名です。

<interserver_https_host>example.clickhouse.com</interserver_https_host>

interserver_https_port

HTTPS 経由で ClickHouse サーバー間でデータを交換するためのポートです。

<interserver_https_port>9010</interserver_https_port>

interserver_listen_host

ClickHouse サーバー間でデータをやり取りできるホストを制限します。 Keeper を使用している場合、この制限は異なる Keeper インスタンス間の通信にも適用されます。

注記

デフォルトでは、この値は listen_host 設定と同じです。

<interserver_listen_host>::ffff:a00:1</interserver_listen_host>
<interserver_listen_host>10.0.0.1</interserver_listen_host>

型:

デフォルト値:

io_thread_pool_queue_size

I/O スレッドプールでスケジュール可能なジョブ数の最大値。

注記

0 の場合は無制限を意味します。

jemalloc_collect_global_profile_samples_in_trace_log

jemalloc によるサンプリングされたメモリ割り当てを system.trace_log に保存します

jemalloc_enable_background_threads

jemalloc のバックグラウンドスレッドを有効にします。jemalloc は未使用のメモリページを解放するためにバックグラウンドスレッドを使用します。これを無効にすると、パフォーマンスの低下を招く可能性があります。

jemalloc_enable_global_profiler

すべてのスレッドでjemallocのアロケーションプロファイラを有効にします。jemallocはアロケーションをサンプリングし、サンプリングされたアロケーションに対するすべての解放を記録します。 プロファイルは、アロケーション解析に利用できる SYSTEM JEMALLOC FLUSH PROFILE を使用してフラッシュできます。 プロファイルサンプルは、設定 jemalloc_collect_global_profile_samples_in_trace_log またはクエリ設定 jemalloc_collect_profile_samples_in_trace_log を使用して system.trace_log に保存することもできます。 Allocation Profiling を参照してください。

jemalloc_flush_profile_interval_bytes

グローバルなピークメモリ使用量が jemalloc_flush_profile_interval_bytes だけ増加したタイミングで、jemalloc プロファイルがフラッシュされます

jemalloc_flush_profile_on_memory_exceeded

総メモリ超過エラー発生時に jemalloc プロファイルをフラッシュします

jemalloc_max_background_threads_num

作成する jemalloc バックグラウンドスレッドの最大数。0 に設定すると jemalloc のデフォルト値を使用します

keep_alive_timeout

ClickHouse が HTTP プロトコルでの受信リクエストを待ち、接続を閉じるまでの待機時間(秒)。

<keep_alive_timeout>10</keep_alive_timeout>

keeper_hosts

動的な設定です。ClickHouse が接続先として利用できる [Zoo]Keeper ホストの Set を含みます。<auxiliary_zookeepers> に設定された情報は反映されません。

keeper_multiread_batch_size

バッチ処理をサポートする [Zoo]Keeper への MultiRead リクエストに対するバッチの最大サイズです。0 に設定すると、バッチ処理は無効になります。ClickHouse Cloud でのみ利用可能です。

ldap_servers

ここに LDAP サーバーとその接続パラメータを列挙して、次の用途に使用します:

  • 専用ローカルユーザーに対する認証手段として使用する(password の代わりに ldap 認証メカニズムが指定されているユーザー)
  • リモートユーザーディレクトリとして使用する。

以下の設定はサブタグで構成できます:

SettingDescription
hostLDAP サーバーのホスト名または IP。必須パラメータであり、空にはできません。
portLDAP サーバーのポート。enable_tls が true に設定されている場合のデフォルトは 636、それ以外の場合は 389 です。
bind_dnバインドする DN を構成するために使用されるテンプレート。最終的な DN は、認証試行ごとに、このテンプレート内のすべての \{user_name\} 部分文字列を実際のユーザー名に置き換えることで構成されます。
user_dn_detectionバインドされたユーザーの実際のユーザー DN を検出するための LDAP 検索パラメータを含むセクション。これは主に、サーバーが Active Directory の場合に、その後のロールマッピングのための検索フィルターで使用されます。最終的なユーザー DN は、\{user_dn\} 部分文字列を置き換える際に使用されます。デフォルトではユーザー DN は bind DN と同一に設定されますが、検索が実行されると、検出された実際のユーザー DN の値で更新されます。
verification_cooldownバインドが一度成功した後、その後のリクエストについては LDAP サーバーに問い合わせることなく、ユーザーが認証済みであるとみなされる時間(秒単位)。キャッシュを無効にして、各認証リクエストごとに LDAP サーバーへ問い合わせるには、0(デフォルト)を指定します。
enable_tlsLDAP サーバーへの安全な接続の使用を有効化するためのフラグ。プレーンテキスト(ldap://)プロトコル(非推奨)には no を指定します。SSL/TLS 上の LDAP(ldaps://)プロトコル(推奨、デフォルト)には yes を指定します。レガシーな StartTLS プロトコル(プレーンテキスト(ldap://)プロトコルを TLS にアップグレード)には starttls を指定します。
tls_minimum_protocol_versionSSL/TLS の最小プロトコルバージョン。指定可能な値は ssl2ssl3tls1.0tls1.1tls1.2(デフォルト)です。
tls_require_certSSL/TLS ピア証明書の検証動作。指定可能な値は neverallowtrydemand(デフォルト)です。
tls_cert_file証明書ファイルへのパス。
tls_key_file証明書キー ファイルへのパス。
tls_ca_cert_fileCA 証明書ファイルへのパス。
tls_ca_cert_dirCA 証明書を含むディレクトリへのパス。
tls_cipher_suite許可される暗号スイート(OpenSSL 表記)。

user_dn_detection 設定はサブタグで構成できます:

SettingDescription
base_dnLDAP 検索のベース DN を構成するために使用されるテンプレート。最終的な DN は、LDAP 検索中に、このテンプレート内のすべての \{user_name\} および \{bind_dn\} 部分文字列を、実際のユーザー名および bind DN に置き換えることによって構成されます。
scopeLDAP 検索のスコープ。指定可能な値は baseone_levelchildrensubtree(デフォルト)です。
search_filterLDAP 検索の検索フィルターを構成するために使用されるテンプレート。最終的なフィルターは、LDAP 検索中に、このテンプレート内のすべての \{user_name\}\{bind_dn\}、および \{base_dn\} 部分文字列を、実際のユーザー名、bind DN、base DN に置き換えることで構成されます。特殊文字は XML 内で正しくエスケープする必要がある点に注意してください。

Example:

<my_ldap_server>
    <host>localhost</host>
    <port>636</port>
    <bind_dn>uid={user_name},ou=users,dc=example,dc=com</bind_dn>
    <verification_cooldown>300</verification_cooldown>
    <enable_tls>yes</enable_tls>
    <tls_minimum_protocol_version>tls1.2</tls_minimum_protocol_version>
    <tls_require_cert>demand</tls_require_cert>
    <tls_cert_file>/path/to/tls_cert_file</tls_cert_file>
    <tls_key_file>/path/to/tls_key_file</tls_key_file>
    <tls_ca_cert_file>/path/to/tls_ca_cert_file</tls_ca_cert_file>
    <tls_ca_cert_dir>/path/to/tls_ca_cert_dir</tls_ca_cert_dir>
    <tls_cipher_suite>ECDHE-ECDSA-AES256-GCM-SHA384:ECDHE-RSA-AES256-GCM-SHA384:AES256-GCM-SHA384</tls_cipher_suite>
</my_ldap_server>

例:典型的な Active Directory 環境で、後続のロールマッピングのためにユーザー DN 検出を設定したもの

<my_ad_server>
    <host>localhost</host>
    <port>389</port>
    <bind_dn>EXAMPLE\{user_name}</bind_dn>
    <user_dn_detection>
        <base_dn>CN=Users,DC=example,DC=com</base_dn>
        <search_filter>(&amp;(objectClass=user)(sAMAccountName={user_name}))</search_filter>
    </user_dn_detection>
    <enable_tls>no</enable_tls>
</my_ad_server>

license_file

ClickHouse Enterprise Edition 用のライセンスファイルの内容

license_public_key_for_testing

ライセンス用デモキー。CI 専用。

listen_backlog

listen ソケットの backlog(保留中接続のキューサイズ)です。デフォルト値 4096 は Linux 5.4+ と同じです。

通常、この値を変更する必要はありません。理由は次のとおりです。

  • デフォルト値が十分に大きいこと
  • クライアント接続の accept 用にサーバー側で専用スレッドがあること

したがって、TcpExtListenOverflowsnstat の値)が 0 以外であり、ClickHouse サーバーでこのカウンタが増加していても、この値を増やす必要があるとは限りません。理由は次のとおりです。

  • 通常、4096 で足りない場合は ClickHouse 内部のスケーリング上の問題を示しているため、Issue を報告した方がよいです。
  • この値を増やしても、後でサーバーがより多くの接続を処理できることを意味しません(仮に処理できたとしても、その時点までにクライアントはすでに離脱しているか切断されている可能性があります)。

<listen_backlog>4096</listen_backlog>

listen_host

リクエストの接続元ホストを制限します。すべてのホストからのリクエストをサーバーで受け付ける場合は、:: を指定します。

例:

<listen_host>::1</listen_host>
<listen_host>127.0.0.1</listen_host>

listen_reuse_port

複数のサーバーが同じアドレスとポート番号で待ち受けられるようにします。リクエストはオペレーティングシステムによってランダムなサーバーにルーティングされます。この設定を有効化することは推奨されません。

<listen_reuse_port>0</listen_reuse_port>

型:

デフォルト:

listen_try

listen を試みている間に IPv6 または IPv4 ネットワークが使用不能でも、サーバーは終了しません。

<listen_try>0</listen_try>

load_marks_threadpool_pool_size

マーク読み込み用バックグラウンドスレッドプールのサイズ

load_marks_threadpool_queue_size

プリフェッチプールに投入できるタスク数の上限

logger

ログメッセージの出力先とフォーマットを設定します。

キー:

KeyDescription
levelログレベル。指定可能な値: none(ログ出力を無効化)、fatal, critical, error, warning, notice, information,debug, trace, test
logログファイルへのパス。
errorlogエラーログファイルへのパス。
sizeローテーションポリシー: ログファイルの最大サイズ(バイト単位)。ログファイルサイズがこの閾値を超えると、名前が変更されてアーカイブされ、新しいログファイルが作成されます。
rotationローテーションポリシー: ログファイルをいつローテーションするかを制御します。サイズ、時間、またはその両方の組み合わせに基づいてローテーションできます。例: 100M, daily, 100M,daily。ログファイルが指定サイズを超えるか、指定された時間間隔に達すると、名前が変更されてアーカイブされ、新しいログファイルが作成されます。
countローテーションポリシー: 保持される ClickHouse の履歴ログファイル数の上限。
stream_compressLZ4 を使用してログメッセージを圧縮します。有効化するには 1 または true を設定します。
consoleコンソールへのログ出力を有効化します。有効化するには 1 または true を設定します。ClickHouse がデーモンモードで動作していない場合のデフォルトは 1、それ以外は 0 です。
console_log_levelコンソール出力用のログレベル。デフォルトは level と同じです。
formatting.typeコンソール出力のログフォーマット。現在は json のみサポートされています。
use_syslog併せて syslog にもログ出力を転送します。
syslog_levelsyslog へのログ出力用のログレベル。
asynctrue(デフォルト)の場合、ログ出力は非同期で行われます(出力チャネルごとに 1 つのバックグラウンドスレッド)。false の場合は LOG を呼び出したスレッド内でログを出力します。
async_queue_max_size非同期ロギングを使用する場合、フラッシュ待ちのメッセージをキューに保持しておける最大数。これを超えたメッセージは破棄されます。
startup_levelサーバー起動時にルートロガーのレベルを設定するための起動時レベル。起動後はログレベルが level 設定に戻されます。
shutdown_levelサーバーのシャットダウン時にルートロガーのレベルを設定するためのシャットダウン時レベル。

ログフォーマット指定子

log および errorLog パス内のファイル名では、最終的なファイル名に対して以下のフォーマット指定子を使用できます(ディレクトリ部分では使用できません)。

列 "Example" には、2023-07-06 18:32:07 における出力例が示されています。

書式指定子説明
%%パーセント記号そのもの%
%n改行文字
%t水平タブ文字
%Y年を10進数で表した値 (例: 2017)2023
%y年の末尾2桁を10進数で表したもの(範囲 [00,99])23
%C年の先頭2桁を10進数で表した値(範囲 [00,99])20
%G4桁のISO 8601 週番号に基づく年。指定された週を含む年を表します。通常は %V と組み合わせてのみ使用されます2023
%gISO 8601 週番号付き年の下2桁。指定された週を含む年を指す。23
%b月名の省略形。例: Oct(ロケール依存)Jul
%h%b と同じJul
%B月名(フルスペル)。例: October(ロケールに依存)7月
%m月を 10 進数で表した値(範囲 [01,12])07
%U年内の週番号(10進数表記、週の最初の曜日は日曜日)([00,53] の範囲)27
%W年内の週番号を10進数で表したもの(週の開始曜日は月曜日)(範囲 [00,53])27
%VISO 8601 に基づく週番号(範囲 [01,53])27
%j年内通算日を表す10進数(範囲 [001,366])187
%d月の日付をゼロ埋めした10進数で表します(範囲 [01,31])。1桁の場合は先頭にゼロが付きます。06
%e月の日付を、スペースで桁埋めした 10 進数で表します(範囲 [1,31])。1 桁の場合は前にスペースが付きます。&nbsp; 6
%a曜日名の省略形。例: Fri(ロケール依存)Thu
%A曜日名の完全表記。例: Friday(ロケールに依存)木曜日
%w日曜日を0とする曜日を表す整数値(範囲 [0-6])4
%u月曜日を1とする曜日の10進数表現(ISO 8601 形式、範囲 [1-7])4
%H時を10進数で表したもの(24時間制、範囲 [00-23])18
%I10 進数で表した時(12 時間制、範囲 [01,12])06
%M分を10進数で表した数値(範囲 [00,59])32
%S10進数の秒数(範囲 [00,60])07
%c標準的な日付と時刻の文字列。例: Sun Oct 17 04:41:13 2010(ロケールに依存)Thu Jul 6 18:32:07 2023
%xローカライズされた日付表現(ロケール依存)2023/07/06
%Xローカライズされた時刻表記。例: 18:40:20 または 6:40:20 PM(ロケールに依存)18:32:07
%D短い MM/DD/YY 形式の日付(%m/%d/%y と同等)07/06/23
%F短い YYYY-MM-DD 形式の日付(%Y-%m-%d と同等)2023-07-06
%rロケールに依存する12時間制の時刻表記午後06:32:07
%R"%H:%M" と同じ18:32
%T"%H:%M:%S" と同じ(ISO 8601 の時刻形式)18:32:07
%pロケールに応じた午前/午後の表記(ロケール依存)PM
%zISO 8601 形式の UTC からのオフセット(例: -0430)、またはタイムゾーン情報が利用できない場合は何も出力しない+0800
%Zロケールに依存するタイムゾーン名または略語。タイムゾーン情報が利用できない場合は何も出力されませんZ AWST

<logger>
    <level>trace</level>
    <log>/var/log/clickhouse-server/clickhouse-server-%F-%T.log</log>
    <errorlog>/var/log/clickhouse-server/clickhouse-server-%F-%T.err.log</errorlog>
    <size>1000M</size>
    <count>10</count>
    <stream_compress>true</stream_compress>
</logger>

コンソールにのみログメッセージを出力するには、次のようにします。

<logger>
    <level>information</level>
    <console>true</console>
</logger>

レベルごとのオーバーライド

個々のログ名ごとにログレベルを上書きできます。たとえば、ロガー「Backup」と「RBAC」のすべてのメッセージを抑制するには次のようにします。

<logger>
    <levels>
        <logger>
            <name>Backup</name>
            <level>none</level>
        </logger>
        <logger>
            <name>RBAC</name>
            <level>none</level>
        </logger>
    </levels>
</logger>

syslog

ログメッセージを syslog にも出力するには、次のようにします。

<logger>
    <use_syslog>1</use_syslog>
    <syslog>
        <address>syslog.remote:10514</address>
        <hostname>myhost.local</hostname>
        <facility>LOG_LOCAL6</facility>
        <format>syslog</format>
    </syslog>
</logger>

&lt;syslog&gt; 用のキー:

KeyDescription
addresshost\[:port\] 形式の syslog のアドレス。省略した場合、ローカルのデーモンが使用されます。
hostnameログを送信するホストの名前(任意)。
facilitysyslog の facility keyword。必ず先頭に "LOG_" を付け、大文字で指定する必要があります(例: LOG_USER, LOG_DAEMON, LOG_LOCAL3 など)。デフォルト: address が指定されている場合は LOG_USER、それ以外は LOG_DAEMON
formatログメッセージのフォーマット。指定可能な値: bsd および syslog

ログフォーマット

コンソールログに出力されるログのフォーマットを指定できます。現在は JSON のみがサポートされています。

出力される JSON ログの例を次に示します。

{
  "date_time_utc": "2024-11-06T09:06:09Z",
  "date_time": "1650918987.180175",
  "thread_name": "#1",
  "thread_id": "254545",
  "level": "Trace",
  "query_id": "",
  "logger_name": "BaseDaemon",
  "message": "Received signal 2",
  "source_file": "../base/daemon/BaseDaemon.cpp; virtual void SignalListener::run()",
  "source_line": "192"
}

JSON ログ出力を有効にするには、次のスニペットを使用してください。

<logger>
    <formatting>
        <type>json</type>
        <!-- Can be configured on a per-channel basis (log, errorlog, console, syslog), or globally for all channels (then just omit it). -->
        <!-- <channel></channel> -->
        <names>
            <date_time>date_time</date_time>
            <thread_name>thread_name</thread_name>
            <thread_id>thread_id</thread_id>
            <level>level</level>
            <query_id>query_id</query_id>
            <logger_name>logger_name</logger_name>
            <message>message</message>
            <source_file>source_file</source_file>
            <source_line>source_line</source_line>
        </names>
    </formatting>
</logger>

JSON ログのキー名の変更

キー名は、<names> タグ内のタグ値を変更することで変更できます。たとえば、DATE_TIMEMY_DATE_TIME に変更するには、<date_time>MY_DATE_TIME</date_time> を使用します。

JSON ログのキーの省略

ログのプロパティは、そのプロパティをコメントアウトすることで省略できます。たとえば、ログに query_id を出力したくない場合は、<query_id> タグをコメントアウトします。

macros

レプリケートテーブル向けのパラメータ置換に使用されます。

レプリケートテーブルを使用しない場合は省略できます。

詳細は、レプリケートテーブルの作成 セクションを参照してください。

<macros incl="macros" optional="true" />

mark_cache_policy

mark cache のポリシー名。

mark_cache_prewarm_ratio

プリウォームで事前に埋めておく mark cache の総サイズの比率。

mark_cache_size

MergeTree ファミリーのテーブルで使用されるマーク索引のキャッシュの最大サイズ。

注記

この設定は実行時に変更でき、直ちに反映されます。

mark_cache_size_ratio

マークキャッシュにおいて(SLRU ポリシーの場合)保護キューのサイズがキャッシュ全体サイズに対して占める割合。

max_active_parts_loading_thread_pool_size

起動時にアクティブ状態のデータパーツ集合を読み込むためのスレッド数。

max_authentication_methods_per_user

1人のユーザーに対して、作成時または変更時に設定できる認証方法の最大数です。 この設定を変更しても、既存のユーザーには影響しません。この設定で指定した上限を超える認証関連の CREATE / ALTER クエリは失敗します。 認証に関係しない CREATE / ALTER クエリは成功します。

注記

値が 0 の場合は、無制限を意味します。

max_backup_bandwidth_for_server

サーバー上のすべてのバックアップに対する、1 秒あたりの最大読み取り速度(バイト単位)。0 は無制限を意味します。

max_backups_io_thread_pool_free_size

Backups IO Thread プール内のアイドルスレッド数が max_backup_io_thread_pool_free_size を超えた場合、ClickHouse はアイドル状態にあるスレッドが占有しているリソースを解放し、プールのサイズを縮小します。必要に応じてスレッドは再度作成されます。

max_backups_io_thread_pool_size

ClickHouse は S3 バックアップの I/O 操作を実行するために Backups IO Thread プールからスレッドを使用します。max_backups_io_thread_pool_size は、このプール内のスレッド数の最大値を制御します。

max_build_vector_similarity_index_thread_pool_size

ベクトル索引を構築する際に使用するスレッドの最大数。

注記

値が 0 の場合、すべてのコアを使用します。

max_concurrent_insert_queries

同時に実行できる INSERT クエリ総数の上限。

注記

値が 0(デフォルト)の場合は無制限を意味します。

この設定は実行時に変更でき、変更は即座に反映されます。すでに実行中のクエリには影響しません。

max_concurrent_queries

同時に実行されるクエリの総数の上限を指定します。INSERT および SELECT クエリに対する制限や、ユーザーごとのクエリ数の最大値に対する制限も合わせて考慮する必要があります。

参照:

注記

0(デフォルト)は無制限を意味します。

この設定は実行時に変更でき、即座に反映されます。すでに実行中のクエリには影響しません。

max_concurrent_select_queries

同時に実行できる SELECT クエリの総数の上限。

注記

値が 0(デフォルト)の場合は無制限であることを意味します。

この設定は実行時に変更でき、直ちに反映されます。すでに実行中のクエリには影響しません。

max_connections

サーバーへの最大同時接続数。

max_database_num_to_throw

データベースの数がこの値を超えた場合、サーバーは例外を発生させます。0 の場合は制限なしを意味します。

max_database_num_to_warn

ATTACH されているデータベース数が指定された値を超えた場合、ClickHouse サーバーは警告メッセージを system.warnings テーブルに追加します。

<max_database_num_to_warn>50</max_database_num_to_warn>

max_database_replicated_create_table_thread_pool_size

DatabaseReplicated でレプリカ復旧中にテーブルを作成するスレッド数。0 の場合は、スレッド数はコア数と同じになります。

max_dictionary_num_to_throw

Dictionary の数がこの値より大きい場合、サーバーは例外を送出します。

次のデータベースエンジンを使用するテーブルだけがカウント対象です:

  • Atomic
  • Ordinary
  • Replicated
  • Lazy
注記

値が 0 の場合、制限はありません。

<max_dictionary_num_to_throw>400</max_dictionary_num_to_throw>

max_dictionary_num_to_warn

アタッチされている Dictionary の数が指定された値を超えると、ClickHouse サーバーは system.warnings テーブルに警告メッセージを追加します。

<max_dictionary_num_to_warn>400</max_dictionary_num_to_warn>

max_distributed_cache_read_bandwidth_for_server

サーバーでの分散キャッシュからの読み取り速度の合計上限(1秒あたりのバイト数)。0 の場合は無制限を意味します。

max_distributed_cache_write_bandwidth_for_server

サーバー上の分散キャッシュへの合計書き込み速度の上限(1 秒あたりのバイト数)。0 は無制限を意味します。

max_entries_for_hash_table_stats

集約中に収集されるハッシュテーブル統計情報に含めることができるエントリ数の上限

max_fetch_partition_thread_pool_size

ALTER TABLE FETCH PARTITION に使用するスレッド数。

max_format_parsing_thread_pool_free_size

入力データのパース用スレッドプールに保持しておくアイドル状態のスレッド数の上限。

max_format_parsing_thread_pool_size

入力データの解析に使用するスレッドの合計最大数。

max_io_thread_pool_free_size

IO スレッドプール内のアイドル状態のスレッド数が max_io_thread_pool_free_size を超えると、ClickHouse はアイドル状態のスレッドによって占有されているリソースを解放し、プールサイズを縮小します。必要に応じてスレッドは再作成されます。

max_io_thread_pool_size

ClickHouse は IO スレッドプール内のスレッドを使用して、一部の IO 処理(例: S3 とのやり取り)を実行します。max_io_thread_pool_size は、このプール内のスレッド数の最大値を設定します。

max_keep_alive_requests

単一の keep-alive 接続で処理できるリクエストの最大数。この上限に達すると、接続は ClickHouse サーバーによって閉じられます。

<max_keep_alive_requests>10</max_keep_alive_requests>

max_local_read_bandwidth_for_server

ローカル読み取りの最大速度(バイト/秒)。

注記

値が 0 の場合は無制限です。

max_local_write_bandwidth_for_server

ローカル書き込みの最大速度(1 秒あたりのバイト数)。

注記

0 を指定すると無制限になります。

max_materialized_views_count_for_table

テーブルに紐付けられる materialized view の数の上限です。

注記

ここで対象となるのは直接依存しているビューのみであり、あるビューの上にさらに別のビューを作成しても考慮されません。

max_merges_bandwidth_for_server

サーバー上のすべてのマージ処理における最大読み取り速度(バイト/秒単位)。0 の場合は無制限です。

max_mutations_bandwidth_for_server

サーバー上のすべてのミューテーションに対する最大読み取り帯域幅(1 秒あたりのバイト数)。0 は無制限を意味します。

max_named_collection_num_to_throw

名前付きコレクションの数がこの値を超えると、サーバーは例外を発生させます。

注記

0 の値は制限なしを意味します。

<max_named_collection_num_to_throw>400</max_named_collection_num_to_throw>

max_named_collection_num_to_warn

名前付きコレクションの数が指定した値を超えると、ClickHouse サーバーは警告メッセージを system.warnings テーブルに追加します。

<max_named_collection_num_to_warn>400</max_named_collection_num_to_warn>

max_open_files

同時に開いておくことができるファイルの最大数。

注記

macOS では getrlimit() 関数が誤った値を返すため、このオプションの使用を推奨します。

<max_open_files>262144</max_open_files>

max_os_cpu_wait_time_ratio_to_drop_connection

接続を切断するかどうかを判断するための、OS における CPU の待ち時間(OSCPUWaitMicroseconds メトリクス)と CPU のビジー時間(OSCPUVirtualTimeMicroseconds メトリクス)の最大比率です。確率を計算するために最小比率と最大比率の間で線形補間が行われ、この最大比率の時点では確率は 1 になります。 詳細については、サーバー CPU 過負荷時の動作制御 を参照してください。

max_outdated_parts_loading_thread_pool_size

起動時に非アクティブな(古い)データパーツ集合を読み込むスレッド数。

max_part_num_to_warn

アクティブなパーツ数が指定した値を超えると、ClickHouse サーバーは警告メッセージを system.warnings テーブルに追加します。

<max_part_num_to_warn>400</max_part_num_to_warn>

max_partition_size_to_drop

パーティション削除に関する制限。

MergeTree テーブルのサイズが max_partition_size_to_drop(バイト単位)を超える場合、DROP PARTITION クエリを使用してパーティションを削除することはできません。 この設定を適用するために ClickHouse サーバーの再起動は不要です。この制限を無効化する別の方法としては、<clickhouse-path>/flags/force_drop_table ファイルを作成することもできます。

注記

0 は、制限なしでパーティションを削除できることを意味します。

この制限は DROP TABLE および TRUNCATE TABLE には影響しません。詳しくは max_table_size_to_drop を参照してください。

<max_partition_size_to_drop>0</max_partition_size_to_drop>

max_parts_cleaning_thread_pool_size

非アクティブなデータパーツを並列に削除するためのスレッド数。

max_pending_mutations_execution_time_to_warn

保留中の mutation の実行時間が指定した秒数を超えた場合、clickhouse サーバーは警告メッセージを system.warnings テーブルに追加します。

<max_pending_mutations_execution_time_to_warn>10000</max_pending_mutations_execution_time_to_warn>

max_pending_mutations_to_warn

保留中のミューテーションの数が指定値を超えると、ClickHouse サーバーは警告メッセージを system.warnings テーブルに追加します。

<max_pending_mutations_to_warn>400</max_pending_mutations_to_warn>

max_prefixes_deserialization_thread_pool_free_size

prefixes のデシリアライズ用スレッドプール内のアイドルスレッド数が max_prefixes_deserialization_thread_pool_free_size を超える場合、ClickHouse はアイドル状態のスレッドが占有しているリソースを解放し、プールサイズを縮小します。必要に応じてスレッドは再度作成されます。

max_prefixes_deserialization_thread_pool_size

ClickHouse は、MergeTree の Wide パーツにおけるファイルプレフィックスからカラムおよびサブカラムのメタデータを並列に読み取るために、prefixes デシリアライズ用スレッドプールのスレッドを使用します。max_prefixes_deserialization_thread_pool_size は、そのプール内のスレッド数の上限を設定します。

max_remote_read_network_bandwidth_for_server

読み取り時における、ネットワーク経由でのデータ転送の最大速度(1 秒あたりのバイト数)。

注記

0(デフォルト)の場合は無制限を意味します。

max_remote_write_network_bandwidth_for_server

書き込み時に、ネットワーク経由で行われるデータ交換の最大速度(1 秒あたりのバイト数)。

注記

0(デフォルト)の場合は無制限を意味します。

max_replicated_fetches_network_bandwidth_for_server

レプリケートフェッチに対する、ネットワーク上でのデータ交換の最大速度(バイト/秒)。0 は無制限を意味します。

max_replicated_sends_network_bandwidth_for_server

レプリケート送信に対し、ネットワーク経由でのデータ送受信の最大速度をバイト/秒で指定します。0 を指定すると無制限になります。

max_replicated_table_num_to_throw

レプリケートテーブルの数がこの値を超えると、サーバーは例外をスローします。

次のデータベースエンジンに属するテーブルのみをカウントします:

  • Atomic
  • Ordinary
  • Replicated
  • Lazy
注記

値が 0 の場合は、制限がないことを意味します。

<max_replicated_table_num_to_throw>400</max_replicated_table_num_to_throw>

max_server_memory_usage

サーバーが使用することを許可されているメモリの最大量(バイト単位)を指定します。

注記

サーバーの最大メモリ使用量は、max_server_memory_usage_to_ram_ratio の設定によってさらに制限されます。

特別なケースとして、値が 0(デフォルト)の場合、サーバーは(max_server_memory_usage_to_ram_ratio による追加の制限を除き)利用可能なメモリをすべて使用できることを意味します。

max_server_memory_usage_to_ram_ratio

サーバーが使用することを許可されているメモリの最大量を、利用可能なメモリ全体に対する比率で指定します。

たとえば、値が 0.9(デフォルト)の場合、サーバーは利用可能なメモリの 90% を使用できます。

メモリ容量の少ないシステムでメモリ使用量を抑えるために利用できます。 RAM とスワップが少ないホストでは、max_server_memory_usage_to_ram_ratio を 1 より大きな値に設定する必要が生じる場合があります。

注記

サーバーの最大メモリ使用量は、max_server_memory_usage の設定によってさらに制限されます。

max_session_timeout

セッションの最大タイムアウト値(秒単位)。

例:

<max_session_timeout>3600</max_session_timeout>

max_table_num_to_throw

テーブル数がこの値より大きい場合、サーバーは例外をスローします。

次の種類のテーブルはカウントの対象外です:

  • view
  • remote
  • dictionary
  • system

次のデータベースエンジンを使用するテーブルのみがカウントされます:

  • Atomic
  • Ordinary
  • Replicated
  • Lazy
注記

0 は制限がないことを意味します。

<max_table_num_to_throw>400</max_table_num_to_throw>

max_table_num_to_warn

アタッチされているテーブルの数が指定された値を超えると、ClickHouse サーバーは警告メッセージを system.warnings テーブルに追加します。

<max_table_num_to_warn>400</max_table_num_to_warn>

max_table_size_to_drop

テーブルの削除に対する制限。

MergeTree テーブルのサイズが max_table_size_to_drop(バイト単位)を超える場合、DROP クエリまたは TRUNCATE クエリを使用して削除することはできません。

注記

値が 0 の場合、任意のテーブルを制限なしに削除できます。

この設定を適用するために ClickHouse サーバーの再起動は不要です。この制限を無効化する別の方法として、<clickhouse-path>/flags/force_drop_table ファイルを作成することもできます。

<max_table_size_to_drop>0</max_table_size_to_drop>

max_temporary_data_on_disk_size

外部集約、結合、ソートのためにディスク上に使用できる一時データ領域の最大サイズ。 この制限を超えたクエリは、例外を発生させて失敗します。

注記

値が 0 の場合は無制限を意味します。

あわせて参照:

max_thread_pool_free_size

グローバルスレッドプール内のアイドルスレッド数が max_thread_pool_free_size を上回る場合、ClickHouse は一部のスレッドが占有しているリソースを解放し、プールサイズを縮小します。必要に応じてスレッドは再度作成されます。

<max_thread_pool_free_size>1200</max_thread_pool_free_size>

max_thread_pool_size

ClickHouse はクエリを処理するためにグローバルスレッドプールのスレッドを使用します。クエリを処理するための空きスレッドがない場合は、プール内に新しいスレッドが作成されます。max_thread_pool_size はプール内のスレッド数の最大値を制限します。

<max_thread_pool_size>12000</max_thread_pool_size>

max_unexpected_parts_loading_thread_pool_size

起動時に、非アクティブな(予期しない)データパーツのセットを読み込むために使用するスレッド数。

max_view_num_to_throw

ビューの数がこの値を超えると、サーバーは例外をスローします。

次のデータベースエンジンのテーブルのみをカウントします:

  • Atomic
  • Ordinary
  • Replicated
  • Lazy
注記

値が 0 の場合は、制限なしを意味します。

<max_view_num_to_throw>400</max_view_num_to_throw>

max_view_num_to_warn

アタッチされている VIEW の数が指定した値を超えると、ClickHouse サーバーは system.warnings テーブルに警告メッセージを追加します。

<max_view_num_to_warn>400</max_view_num_to_warn>

max_waiting_queries

同時に待機状態になっているクエリの総数に対する上限です。 待機中のクエリの実行は、必要なテーブルが非同期にロードされている間ブロックされます(async_load_databases を参照)。

注記

次の設定で制御される制限値を判定する際には、待機中のクエリはカウントされません。

これは、サーバー起動直後にこれらの制限にすぐ達してしまうことを避けるための調整です。

注記

値が 0(デフォルト)の場合は無制限を意味します。

この設定は実行時に変更でき、即座に反映されます。すでに実行中のクエリには影響しません。

memory_worker_correct_memory_tracker

バックグラウンドメモリワーカーが、jemalloc や cgroups などの外部ソースからの情報に基づいて内部メモリトラッカーを補正するかどうかを制御します。

memory_worker_period_ms

メモリトラッカーによるメモリ使用量を補正し、メモリ使用量が高い場合に未使用ページをクリーンアップするバックグラウンドメモリワーカーのティック間隔を指定します。0 に設定すると、メモリ使用元に応じてデフォルト値が使用されます。

memory_worker_use_cgroup

現在の cgroup におけるメモリ使用量の情報を使用して、メモリトラッキングを補正します。

merge_tree

MergeTree テーブル向けの細かなチューニングを行います。

詳細については、MergeTreeSettings.h ヘッダーファイルを参照してください。

<merge_tree>
    <max_suspicious_broken_parts>5</max_suspicious_broken_parts>
</merge_tree>

merge_workload

マージ処理とその他のワークロード間で、リソースの利用および共有方法を調整するために使用します。指定した値は、すべてのバックグラウンドでのマージ処理に対する workload 設定値として使用されます。MergeTree の設定によって上書きできます。

関連項目

merges_mutations_memory_usage_soft_limit

マージおよびミューテーション処理を実行するために使用できる RAM の使用量上限を設定します。 ClickHouse がこの上限に達すると、新しいバックグラウンドのマージおよびミューテーション処理はスケジュールされなくなりますが、すでにスケジュール済みのタスクの実行は継続されます。

注記

値が 0 の場合は無制限を意味します。

<merges_mutations_memory_usage_soft_limit>0</merges_mutations_memory_usage_soft_limit>

merges_mutations_memory_usage_to_ram_ratio

merges_mutations_memory_usage_soft_limit のデフォルト値は、memory_amount * merges_mutations_memory_usage_to_ram_ratio として計算されます。

関連項目:

metric_log

デフォルトでは無効になっています。

有効化

メトリクス履歴の収集 system.metric_log を手動で有効化するには、次の内容で /etc/clickhouse-server/config.d/metric_log.xml を作成します。

<clickhouse>
    <metric_log>
        <database>system</database>
        <table>metric_log</table>
        <flush_interval_milliseconds>7500</flush_interval_milliseconds>
        <collect_interval_milliseconds>1000</collect_interval_milliseconds>
        <max_size_rows>1048576</max_size_rows>
        <reserved_size_rows>8192</reserved_size_rows>
        <buffer_size_rows_flush_threshold>524288</buffer_size_rows_flush_threshold>
        <flush_on_crash>false</flush_on_crash>
    </metric_log>
</clickhouse>

無効化

metric_log 設定を無効にするには、次の内容でファイル /etc/clickhouse-server/config.d/disable_metric_log.xml を作成します。

<clickhouse>
    <metric_log remove="1" />
</clickhouse>

The following settings can be configured by sub-tags:

SettingDescriptionDefaultNote
databaseデータベース名。
tableシステムテーブル名。
engineシステムテーブルに対する MergeTree エンジン定義partition_by または order_by が定義されている場合は使用できません。指定しない場合はデフォルトで MergeTree が選択されます
partition_byシステムテーブルに対するカスタムパーティショニングキーシステムテーブルに engine を指定する場合、partition_by パラメータは engine の設定内で直接指定する必要があります
ttlテーブルの TTL を指定します。システムテーブルに engine を指定する場合、ttl パラメータは engine の設定内で直接指定する必要があります
order_byシステムテーブルに対するカスタムソートキーengine が定義されている場合は使用できません。システムテーブルに engine を指定する場合、order_by パラメータは engine の設定内で直接指定する必要があります
storage_policyテーブルに使用するストレージポリシー名(任意)。システムテーブルに engine を指定する場合、storage_policy パラメータは engine の設定内で直接指定する必要があります
settingsMergeTree の動作を制御する追加パラメータ(任意)。システムテーブルに engine を指定する場合、settings パラメータは engine の設定内で直接指定する必要があります
flush_interval_millisecondsメモリ上のバッファからテーブルへデータをフラッシュする間隔。7500
max_size_rowsログの最大行数。未フラッシュのログ数が max_size_rows に達すると、ログがディスクにダンプされます。1048576
reserved_size_rowsログ用に事前確保されるメモリ容量(行数)。8192
buffer_size_rows_flush_threshold行数のしきい値。このしきい値に達すると、バックグラウンドでログをディスクへフラッシュする処理が起動します。max_size_rows / 2
flush_on_crashクラッシュ発生時にログをディスクへダンプするかどうかを設定します。false

min_os_cpu_wait_time_ratio_to_drop_connection

接続を切断するかどうかを判断するための、OS の CPU 待ち時間(OSCPUWaitMicroseconds メトリック)とビジー時間(OSCPUVirtualTimeMicroseconds メトリック)との最小比です。最小比と最大比の間で線形補間を用いて確率を計算し、この比における確率は 0 になります。 詳細については、サーバー CPU 過負荷時の動作制御 を参照してください。

mlock_executable

起動後に mlockall を実行して、最初のクエリのレイテンシーを下げ、高い IO 負荷時に ClickHouse の実行ファイルがスワップアウトされるのを防ぎます。

注記

このオプションを有効にすることは推奨されます。ただし、起動時間が数秒程度長くなる場合があります。 また、この設定は "CAP_IPC_LOCK" ケーパビリティがないと動作しないことに注意してください。

<mlock_executable>false</mlock_executable>

mmap_cache_size

この設定により、頻繁な open/close 呼び出し(連続するページフォールトのため非常にコストが高い)を回避し、複数のスレッドやクエリ間でマッピングを再利用できます。設定値はマッピングされる領域の数(通常はマッピングされるファイル数と同じ)を表します。

マップされたファイル内のデータ量は、次の system テーブルにあるメトリクスで監視できます。

注記

マップされたファイル内のデータ量はメモリを直接消費せず、クエリやサーバーのメモリ使用量としても計上されません。これは、このメモリが OS のページキャッシュと同様に破棄可能であるためです。MergeTree ファミリーに属するテーブルで古いパーツが削除されるときにキャッシュ(ファイル)は自動的にドロップされますが、SYSTEM DROP MMAP CACHE クエリを使用して手動でドロップすることもできます。

この設定は実行時に変更でき、即座に反映されます。

mutation_workload

ミューテーションと他のワークロード間で、リソースの利用と共有方法を制御するために使用します。指定した値は、すべてのバックグラウンドミューテーションに対する workload 設定値として使用されます。MergeTree エンジンの設定で上書きできます。

関連項目

mysql_port

MySQL プロトコルでクライアントと通信するためのポート。

注記
  • 正の整数を指定すると、そのポート番号で待ち受けます
  • 空の値を指定すると、MySQL プロトコルでのクライアントとの通信は無効になります。

<mysql_port>9004</mysql_port>

mysql_require_secure_transport

true に設定した場合、mysql_port 経由でクライアントとのセキュアな通信が必須となります。--ssl-mode=none オプションによる接続は拒否されます。OpenSSL の設定と併せて使用してください。

openSSL

SSL クライアント/サーバーの構成。

SSL のサポートは libpoco ライブラリによって提供されます。利用可能な構成オプションについては、SSLManager.h を参照してください。デフォルト値は SSLManager.cpp に記載されています。

サーバー/クライアント構成用のキー:

オプション説明デフォルト値
privateKeyFilePEM 証明書の秘密鍵が格納されたファイルへのパス。鍵と証明書を同一ファイルに含めることもできます。
certificateFilePEM 形式のクライアント証明書/サーバー証明書ファイルへのパス。privateKeyFile に証明書が含まれている場合は省略できます。
caConfig信頼された CA 証明書を含むファイルまたはディレクトリへのパス。このパスがファイルを指す場合、そのファイルは PEM 形式である必要があり、複数の CA 証明書を含めることができます。このパスがディレクトリを指す場合、そのディレクトリには CA 証明書ごとに 1 つの .pem ファイルを含める必要があります。ファイル名は CA 証明書のサブジェクト名ハッシュ値で検索されます。詳細は SSL_CTX_load_verify_locations の man ページを参照してください。
verificationModeノードの証明書の検証方式を指定します。詳細は Context クラスの説明を参照してください。指定可能な値: none, relaxed, strict, oncerelaxed
verificationDepth検証チェーンの最大長です。証明書チェーンの長さがこの設定値を超えると、検証は失敗します。9
loadDefaultCAFileOpenSSL の組み込み CA 証明書を使用するかどうかを指定します。ClickHouse は、組み込みの CA 証明書がファイル /etc/ssl/cert.pem(またはディレクトリ /etc/ssl/certs)にあるか、環境変数 SSL_CERT_FILE(または SSL_CERT_DIR)で指定されたファイル(またはディレクトリ)内に存在すると仮定します。true
cipherListサポートされる OpenSSL 暗号スイート。ALL:!ADH:!LOW:!EXP:!MD5:!3DES:@STRENGTH
cacheSessionsセッションのキャッシュを有効または無効にします。sessionIdContext と組み合わせて使用する必要があります。指定可能な値: true, falsefalse
sessionIdContextサーバーが生成する各識別子に追加される一意なランダム文字列です。文字列の長さは SSL_MAX_SSL_SESSION_ID_LENGTH を超えてはなりません。サーバーがセッションをキャッシュする場合とクライアントがキャッシュを要求する場合の両方で問題を回避するのに役立つため、このパラメーターは常に設定することを推奨します。$\{application.name\}
sessionCacheSizeサーバーがキャッシュできるセッションの最大数。0 を指定すると無制限になります。1024*20
sessionTimeoutサーバー側でのセッションキャッシュの保持時間(時間単位)。2
extendedVerification有効にすると、証明書の CN または SAN がピアのホスト名と一致しているかを検証します。false
requireTLSv1TLSv1 の接続を必須とします。有効な値: true, falsefalse
requireTLSv1_1TLSv1.1 接続を必須とします。有効な値: true, falsefalse
requireTLSv1_2TLSv1.2 接続を必須にします。指定可能な値: true, falsefalse
fipsOpenSSL の FIPS モードを有効にします。ライブラリで使用している OpenSSL のバージョンが FIPS をサポートしている場合にのみ利用可能です。false
privateKeyPassphraseHandler秘密鍵にアクセスするためのパスフレーズを要求するクラス(PrivateKeyPassphraseHandler のサブクラス)。例:<privateKeyPassphraseHandler>, <name>KeyFileHandler</name>, <options><password>test</password></options>, </privateKeyPassphraseHandler>KeyConsoleHandler
invalidCertificateHandler無効な証明書を検証するためのクラス(CertificateHandler のサブクラス)。例:<invalidCertificateHandler> <name>RejectCertificateHandler</name> </invalidCertificateHandler>RejectCertificateHandler
disableProtocols使用を禁止するプロトコル。
preferServerCiphersサーバー側優先の暗号スイート。false

設定例:

<openSSL>
    <server>
        <!-- openssl req -subj "/CN=localhost" -new -newkey rsa:2048 -days 365 -nodes -x509 -keyout /etc/clickhouse-server/server.key -out /etc/clickhouse-server/server.crt -->
        <certificateFile>/etc/clickhouse-server/server.crt</certificateFile>
        <privateKeyFile>/etc/clickhouse-server/server.key</privateKeyFile>
        <!-- openssl dhparam -out /etc/clickhouse-server/dhparam.pem 4096 -->
        <dhParamsFile>/etc/clickhouse-server/dhparam.pem</dhParamsFile>
        <verificationMode>none</verificationMode>
        <loadDefaultCAFile>true</loadDefaultCAFile>
        <cacheSessions>true</cacheSessions>
        <disableProtocols>sslv2,sslv3</disableProtocols>
        <preferServerCiphers>true</preferServerCiphers>
    </server>
    <client>
        <loadDefaultCAFile>true</loadDefaultCAFile>
        <cacheSessions>true</cacheSessions>
        <disableProtocols>sslv2,sslv3</disableProtocols>
        <preferServerCiphers>true</preferServerCiphers>
        <!-- Use for self-signed: <verificationMode>none</verificationMode> -->
        <invalidCertificateHandler>
            <!-- Use for self-signed: <name>AcceptCertificateHandler</name> -->
            <name>RejectCertificateHandler</name>
        </invalidCertificateHandler>
    </client>
</openSSL>

opentelemetry_span_log

opentelemetry_span_log システムテーブル用の設定。

The following settings can be configured by sub-tags:

SettingDescriptionDefaultNote
databaseデータベース名。
tableシステムテーブル名。
engineシステムテーブルに対する MergeTree エンジン定義partition_by または order_by が定義されている場合は使用できません。指定しない場合はデフォルトで MergeTree が選択されます
partition_byシステムテーブルに対するカスタムパーティショニングキーシステムテーブルに engine を指定する場合、partition_by パラメータは engine の設定内で直接指定する必要があります
ttlテーブルの TTL を指定します。システムテーブルに engine を指定する場合、ttl パラメータは engine の設定内で直接指定する必要があります
order_byシステムテーブルに対するカスタムソートキーengine が定義されている場合は使用できません。システムテーブルに engine を指定する場合、order_by パラメータは engine の設定内で直接指定する必要があります
storage_policyテーブルに使用するストレージポリシー名(任意)。システムテーブルに engine を指定する場合、storage_policy パラメータは engine の設定内で直接指定する必要があります
settingsMergeTree の動作を制御する追加パラメータ(任意)。システムテーブルに engine を指定する場合、settings パラメータは engine の設定内で直接指定する必要があります
flush_interval_millisecondsメモリ上のバッファからテーブルへデータをフラッシュする間隔。7500
max_size_rowsログの最大行数。未フラッシュのログ数が max_size_rows に達すると、ログがディスクにダンプされます。1048576
reserved_size_rowsログ用に事前確保されるメモリ容量(行数)。8192
buffer_size_rows_flush_threshold行数のしきい値。このしきい値に達すると、バックグラウンドでログをディスクへフラッシュする処理が起動します。max_size_rows / 2
flush_on_crashクラッシュ発生時にログをディスクへダンプするかどうかを設定します。false

例:

<opentelemetry_span_log>
    <engine>
        engine MergeTree
        partition by toYYYYMM(finish_date)
        order by (finish_date, finish_time_us, trace_id)
    </engine>
    <database>system</database>
    <table>opentelemetry_span_log</table>
    <flush_interval_milliseconds>7500</flush_interval_milliseconds>
    <max_size_rows>1048576</max_size_rows>
    <reserved_size_rows>8192</reserved_size_rows>
    <buffer_size_rows_flush_threshold>524288</buffer_size_rows_flush_threshold>
    <flush_on_crash>false</flush_on_crash>
</opentelemetry_span_log>

os_collect_psi_metrics

/proc/pressure/ ファイルからの PSI メトリクスの取得を有効にします。

os_cpu_busy_time_threshold

CPU が有用な処理を行っていると見なすための OS の CPU ビジー時間(OSCPUVirtualTimeMicroseconds メトリクス)の閾値(マイクロ秒単位)。ビジー時間がこの値未満の場合、CPU が過負荷状態であるとは見なされません。

os_threads_nice_value_distributed_cache_tcp_handler

分散キャッシュ TCP ハンドラーのスレッドに対する Linux の nice 値。値が小さいほど CPU 優先度が高くなります。

CAP_SYS_NICE ケーパビリティが必要で、ない場合はこの設定は無視されます。

取り得る値の範囲: -20 ~ 19。

os_threads_nice_value_merge_mutate

マージおよびミューテーション用スレッドの Linux における nice 値。値が小さいほど CPU の優先度が高くなります。

CAP_SYS_NICE ケーパビリティが必要で、付与されていない場合は何も行われません。

指定可能な値: -20 〜 19。

os_threads_nice_value_zookeeper_client_send_receive

ZooKeeper クライアントの送信用および受信用スレッドに対する Linux の nice 値。値が小さいほど CPU の優先度は高くなります。

CAP_SYS_NICE ケーパビリティが必要で、これがない場合は何も効果はありません (no-op)。

取りうる値: -20 ~ 19。

page_cache_free_memory_ratio

ユーザー空間ページキャッシュに対するメモリ上限のうち、空きとして確保しておく割合。Linux の min_free_kbytes 設定に相当します。

page_cache_history_window_ms

解放されたメモリをユーザー空間のページキャッシュが使用できるようになるまでの遅延時間。

page_cache_max_size

ユーザースペースのページキャッシュの最大サイズです。キャッシュを無効にするには 0 を設定します。page_cache_min_size より大きい場合、この範囲内でキャッシュサイズが継続的に調整され、利用可能なメモリの大部分を活用しつつ、合計メモリ使用量が制限値(max_server_memory_usage[_to_ram_ratio])未満に保たれるようになります。

page_cache_min_size

ユーザー空間ページキャッシュの最小サイズ。

page_cache_policy

ユーザー空間のページキャッシュポリシー名です。

page_cache_shards

ユーザー空間のページキャッシュを、この数の分片にストライプ分割してミューテックス競合を低減します。実験的な機能であり、性能向上効果はあまり期待できません。

page_cache_size_ratio

ユーザースペースのページキャッシュにおける保護キューのサイズが、キャッシュ全体のサイズに対して占める比率です。

part_log

MergeTree に関連するイベントをログに記録します。たとえば、データの追加やマージなどです。ログを使用してマージアルゴリズムの動作をシミュレートし、その特性を比較できます。マージ処理を可視化することもできます。

クエリは個別のファイルではなく、system.part_log テーブルに記録されます。このテーブル名は table パラメータで設定できます(下記参照)。

The following settings can be configured by sub-tags:

SettingDescriptionDefaultNote
databaseデータベース名。
tableシステムテーブル名。
engineシステムテーブルに対する MergeTree エンジン定義partition_by または order_by が定義されている場合は使用できません。指定しない場合はデフォルトで MergeTree が選択されます
partition_byシステムテーブルに対するカスタムパーティショニングキーシステムテーブルに engine を指定する場合、partition_by パラメータは engine の設定内で直接指定する必要があります
ttlテーブルの TTL を指定します。システムテーブルに engine を指定する場合、ttl パラメータは engine の設定内で直接指定する必要があります
order_byシステムテーブルに対するカスタムソートキーengine が定義されている場合は使用できません。システムテーブルに engine を指定する場合、order_by パラメータは engine の設定内で直接指定する必要があります
storage_policyテーブルに使用するストレージポリシー名(任意)。システムテーブルに engine を指定する場合、storage_policy パラメータは engine の設定内で直接指定する必要があります
settingsMergeTree の動作を制御する追加パラメータ(任意)。システムテーブルに engine を指定する場合、settings パラメータは engine の設定内で直接指定する必要があります
flush_interval_millisecondsメモリ上のバッファからテーブルへデータをフラッシュする間隔。7500
max_size_rowsログの最大行数。未フラッシュのログ数が max_size_rows に達すると、ログがディスクにダンプされます。1048576
reserved_size_rowsログ用に事前確保されるメモリ容量(行数)。8192
buffer_size_rows_flush_threshold行数のしきい値。このしきい値に達すると、バックグラウンドでログをディスクへフラッシュする処理が起動します。max_size_rows / 2
flush_on_crashクラッシュ発生時にログをディスクへダンプするかどうかを設定します。false

<part_log>
    <database>system</database>
    <table>part_log</table>
    <partition_by>toMonday(event_date)</partition_by>
    <flush_interval_milliseconds>7500</flush_interval_milliseconds>
    <max_size_rows>1048576</max_size_rows>
    <reserved_size_rows>8192</reserved_size_rows>
    <buffer_size_rows_flush_threshold>524288</buffer_size_rows_flush_threshold>
    <flush_on_crash>false</flush_on_crash>
</part_log>

parts_kill_delay_period

SharedMergeTree のパーツが完全に削除されるまでの猶予時間。ClickHouse Cloud でのみ利用可能です

parts_kill_delay_period_random_add

非常に大量のテーブルが存在する場合に発生しうる、同時アクセス集中によるスタンピード問題と、それに続く ZooKeeper への DoS を回避するために、kill_delay_period に 0〜x 秒の範囲で一様分布する値を加算します。ClickHouse Cloud でのみ利用可能です。

parts_killer_pool_size

共有 MergeTree テーブルの古いパーツをクリーンアップするためのスレッド数です。ClickHouse Cloud でのみ利用可能です。

path

データが格納されているディレクトリへのパス。

注記

末尾のスラッシュは必須です。

<path>/var/lib/clickhouse/</path>

postgresql_port

PostgreSQL プロトコルを介してクライアントと通信するためのポート。

注記
  • 正の整数は待ち受けるポート番号を指定します
  • 空の値にすると、PostgreSQL プロトコルを介したクライアントとの通信が無効化されます。

<postgresql_port>9005</postgresql_port>

postgresql_require_secure_transport

true に設定すると、postgresql_port 上のクライアント接続には安全な通信が必須になります。sslmode=disable オプションを指定した接続は拒否されます。OpenSSL の設定と併用してください。

prefetch_threadpool_pool_size

リモートオブジェクトストレージに対するプリフェッチ用のバックグラウンドプールのサイズ

prefetch_threadpool_queue_size

prefetch プールに投入できるタスクの最大数

prefixes_deserialization_thread_pool_thread_pool_queue_size

prefixes のデシリアライゼーション用スレッドプールにスケジュールできるジョブの最大数です。

注記

0 の場合は無制限を意味します。

prepare_system_log_tables_on_startup

true の場合、ClickHouse は起動前に構成されているすべての system.*_log テーブルを作成します。これは、一部の起動スクリプトがこれらのテーブルに依存している場合に有用です。

primary_index_cache_policy

プライマリ索引キャッシュポリシーの名前。

primary_index_cache_prewarm_ratio

プリウォーム時に事前読み込みするマークキャッシュのサイズの、マークキャッシュの合計サイズに対する比率。

primary_index_cache_size

MergeTree ファミリーのテーブルにおけるプライマリインデックス(索引)キャッシュの最大サイズ。

primary_index_cache_size_ratio

プライマリ索引キャッシュにおける保護キュー(SLRU ポリシーの場合)のサイズを、キャッシュの総サイズに対する比率で指定します。

process_query_plan_packet

この設定を有効にすると、QueryPlan パケットを読み取れるようになります。このパケットは、serialize_query_plan が有効な場合に分散クエリで送信されます。 クエリプランのバイナリ逆シリアル化に存在しうるバグによって生じるセキュリティ問題を避けるため、デフォルトでは無効になっています。

<process_query_plan_packet>true</process_query_plan_packet>

processors_profile_log

processors_profile_log システムテーブル用の設定です。

The following settings can be configured by sub-tags:

SettingDescriptionDefaultNote
databaseデータベース名。
tableシステムテーブル名。
engineシステムテーブルに対する MergeTree エンジン定義partition_by または order_by が定義されている場合は使用できません。指定しない場合はデフォルトで MergeTree が選択されます
partition_byシステムテーブルに対するカスタムパーティショニングキーシステムテーブルに engine を指定する場合、partition_by パラメータは engine の設定内で直接指定する必要があります
ttlテーブルの TTL を指定します。システムテーブルに engine を指定する場合、ttl パラメータは engine の設定内で直接指定する必要があります
order_byシステムテーブルに対するカスタムソートキーengine が定義されている場合は使用できません。システムテーブルに engine を指定する場合、order_by パラメータは engine の設定内で直接指定する必要があります
storage_policyテーブルに使用するストレージポリシー名(任意)。システムテーブルに engine を指定する場合、storage_policy パラメータは engine の設定内で直接指定する必要があります
settingsMergeTree の動作を制御する追加パラメータ(任意)。システムテーブルに engine を指定する場合、settings パラメータは engine の設定内で直接指定する必要があります
flush_interval_millisecondsメモリ上のバッファからテーブルへデータをフラッシュする間隔。7500
max_size_rowsログの最大行数。未フラッシュのログ数が max_size_rows に達すると、ログがディスクにダンプされます。1048576
reserved_size_rowsログ用に事前確保されるメモリ容量(行数)。8192
buffer_size_rows_flush_threshold行数のしきい値。このしきい値に達すると、バックグラウンドでログをディスクへフラッシュする処理が起動します。max_size_rows / 2
flush_on_crashクラッシュ発生時にログをディスクへダンプするかどうかを設定します。false

デフォルト設定は次のとおりです。

<processors_profile_log>
    <database>system</database>
    <table>processors_profile_log</table>
    <partition_by>toYYYYMM(event_date)</partition_by>
    <flush_interval_milliseconds>7500</flush_interval_milliseconds>
    <max_size_rows>1048576</max_size_rows>
    <reserved_size_rows>8192</reserved_size_rows>
    <buffer_size_rows_flush_threshold>524288</buffer_size_rows_flush_threshold>
    <flush_on_crash>false</flush_on_crash>
</processors_profile_log>

prometheus

Prometheus からスクレイプできるようにメトリクスデータを公開します。

設定:

  • endpoint – prometheus サーバーがメトリクスをスクレイプするための HTTP エンドポイント。'/' で始める必要があります。
  • portendpoint 用のポート。
  • metricssystem.metrics テーブルのメトリクスを公開します。
  • eventssystem.events テーブルのメトリクスを公開します。
  • asynchronous_metricssystem.asynchronous_metrics テーブルの現在のメトリクス値を公開します。
  • errors - 直近のサーバー再起動以降に発生したエラーコードごとのエラー数を公開します。この情報は system.errors からも取得できます。

Example

<clickhouse>
    <listen_host>0.0.0.0</listen_host>
    <http_port>8123</http_port>
    <tcp_port>9000</tcp_port>
    <!-- highlight-start -->
    <prometheus>
        <endpoint>/metrics</endpoint>
        <port>9363</port>
        <metrics>true</metrics>
        <events>true</events>
        <asynchronous_metrics>true</asynchronous_metrics>
        <errors>true</errors>
    </prometheus>
    <!-- highlight-end -->
</clickhouse>

確認(127.0.0.1 を ClickHouse サーバーの IP アドレスまたはホスト名に置き換えて実行してください):

curl 127.0.0.1:9363/metrics

proxy

HTTP および HTTPS リクエスト向けのプロキシサーバーを定義します。現在は S3 ストレージ、S3 テーブル関数、および URL 関数でサポートされています。

プロキシサーバーを定義する方法は 3 つあります。

  • 環境変数
  • プロキシリスト
  • リモートプロキシリゾルバ

特定ホストをプロキシ経由から除外(バイパス)することも、no_proxy を使用して指定できます。

Environment variables

http_proxy および https_proxy 環境変数により、 特定のプロトコル向けのプロキシサーバーを指定できます。システム上でこれらが設定されていれば、そのまま問題なく動作します。

特定のプロトコルに対して プロキシサーバーが 1 つだけであり、そのプロキシサーバーが変わらない場合には、これが最も簡単な方法です。

Proxy lists

この方法では、1 つ以上の プロトコル用プロキシサーバーを指定できます。複数のプロキシサーバーが定義されている場合、 ClickHouse は各プロキシをラウンドロビン方式で使用し、サーバー間で負荷を分散します。これは、あるプロトコルに対して複数の プロキシサーバーが存在し、かつプロキシサーバーのリストが変わらない場合に最も簡単な方法です。

Configuration template

<proxy>
    <http>
        <uri>http://proxy1</uri>
        <uri>http://proxy2:3128</uri>
    </http>
    <https>
        <uri>http://proxy1:3128</uri>
    </https>
</proxy>

タブから親フィールドを選択すると、その子フィールドが表示されます:

FieldDescription
<http>1 つ以上の HTTP プロキシの一覧
<https>1 つ以上の HTTPS プロキシの一覧

リモートプロキシリゾルバー

プロキシサーバーが動的に変更される場合があります。その場合は、リゾルバーのエンドポイントを定義できます。ClickHouse はそのエンドポイントに空の GET リクエストを送信し、リモートリゾルバーはプロキシホストを返す必要があります。 ClickHouse は返された値を使用して、次のテンプレートに従ってプロキシ URI を構成します: \{proxy_scheme\}://\{proxy_host\}:{proxy_port}

設定テンプレート

<proxy>
    <http>
        <resolver>
            <endpoint>http://resolver:8080/hostname</endpoint>
            <proxy_scheme>http</proxy_scheme>
            <proxy_port>80</proxy_port>
            <proxy_cache_time>10</proxy_cache_time>
        </resolver>
    </http>

    <https>
        <resolver>
            <endpoint>http://resolver:8080/hostname</endpoint>
            <proxy_scheme>http</proxy_scheme>
            <proxy_port>3128</proxy_port>
            <proxy_cache_time>10</proxy_cache_time>
        </resolver>
    </https>

</proxy>

下のタブから親フィールドを選択して、その子要素を表示します:

FieldDescription
<http>1 つ以上の resolver のリスト*
<https>1 つ以上の resolver のリスト*

優先順位

プロキシ設定は次の順序で決定されます:

OrderSetting
1.リモートプロキシ resolver
2.プロキシリスト
3.環境変数

ClickHouse は、リクエストプロトコルに対して最も高い優先度のリゾルバータイプを確認します。定義されていない場合は、 環境リゾルバーに到達するまで、次に優先度の高いリゾルバータイプを順に確認します。 これにより、複数の種類のリゾルバータイプを組み合わせて使用できます。

query_cache

Query cache の設定です。

利用可能な設定は次のとおりです。

SettingDescriptionDefault Value
max_size_in_bytesキャッシュの最大サイズ(バイト単位)。0 の場合、クエリキャッシュは無効になります。1073741824
max_entriesキャッシュに保存される SELECT クエリ結果の最大件数。1024
max_entry_size_in_bytesキャッシュに保存される SELECT クエリ結果 1 件あたりの最大サイズ(バイト単位)。1048576
max_entry_size_in_rowsキャッシュに保存される SELECT クエリ結果 1 件あたりの最大行数。30000000
注記
  • 変更した設定は即座に反映されます。
  • クエリキャッシュ用のデータは DRAM に割り当てられます。メモリに余裕がない場合は、max_size_in_bytes の値を小さく設定するか、クエリキャッシュを無効化するようにしてください。

<query_cache>
    <max_size_in_bytes>1073741824</max_size_in_bytes>
    <max_entries>1024</max_entries>
    <max_entry_size_in_bytes>1048576</max_entry_size_in_bytes>
    <max_entry_size_in_rows>30000000</max_entry_size_in_rows>
</query_cache>

query_condition_cache_policy

クエリ条件キャッシュポリシーの名前。

query_condition_cache_size

クエリ条件キャッシュの最大サイズ。

注記

この設定は実行時に変更でき、変更は直ちに反映されます。

query_condition_cache_size_ratio

クエリ条件キャッシュにおける保護キュー(SLRU ポリシーの場合)のサイズの、キャッシュ全体のサイズに対する割合です。

query_log

log_queries=1 によって受信したクエリをログ出力するための設定です。

クエリは別のファイルではなく、system.query_log テーブルに記録されます。table パラメータでテーブル名を変更できます(後述)。

The following settings can be configured by sub-tags:

SettingDescriptionDefaultNote
databaseデータベース名。
tableシステムテーブル名。
engineシステムテーブルに対する MergeTree エンジン定義partition_by または order_by が定義されている場合は使用できません。指定しない場合はデフォルトで MergeTree が選択されます
partition_byシステムテーブルに対するカスタムパーティショニングキーシステムテーブルに engine を指定する場合、partition_by パラメータは engine の設定内で直接指定する必要があります
ttlテーブルの TTL を指定します。システムテーブルに engine を指定する場合、ttl パラメータは engine の設定内で直接指定する必要があります
order_byシステムテーブルに対するカスタムソートキーengine が定義されている場合は使用できません。システムテーブルに engine を指定する場合、order_by パラメータは engine の設定内で直接指定する必要があります
storage_policyテーブルに使用するストレージポリシー名(任意)。システムテーブルに engine を指定する場合、storage_policy パラメータは engine の設定内で直接指定する必要があります
settingsMergeTree の動作を制御する追加パラメータ(任意)。システムテーブルに engine を指定する場合、settings パラメータは engine の設定内で直接指定する必要があります
flush_interval_millisecondsメモリ上のバッファからテーブルへデータをフラッシュする間隔。7500
max_size_rowsログの最大行数。未フラッシュのログ数が max_size_rows に達すると、ログがディスクにダンプされます。1048576
reserved_size_rowsログ用に事前確保されるメモリ容量(行数)。8192
buffer_size_rows_flush_threshold行数のしきい値。このしきい値に達すると、バックグラウンドでログをディスクへフラッシュする処理が起動します。max_size_rows / 2
flush_on_crashクラッシュ発生時にログをディスクへダンプするかどうかを設定します。false

テーブルが存在しない場合、ClickHouse はテーブルを作成します。ClickHouse サーバーを更新した際にクエリログの構造が変更されていた場合は、旧構造のテーブルの名前が変更され、新しいテーブルが自動的に作成されます。

<query_log>
    <database>system</database>
    <table>query_log</table>
    <engine>Engine = MergeTree PARTITION BY event_date ORDER BY event_time TTL event_date + INTERVAL 30 day</engine>
    <flush_interval_milliseconds>7500</flush_interval_milliseconds>
    <max_size_rows>1048576</max_size_rows>
    <reserved_size_rows>8192</reserved_size_rows>
    <buffer_size_rows_flush_threshold>524288</buffer_size_rows_flush_threshold>
    <flush_on_crash>false</flush_on_crash>
</query_log>

query_masking_rules

正規表現に基づくルールで、クエリおよびすべてのログメッセージに対して、サーバーログに保存する前に適用されます。 system.query_logsystem.text_logsystem.processes テーブル、およびクライアントへ送信されるログが対象です。これにより、SQL クエリに含まれる名前、メールアドレス、個人識別子、クレジットカード番号などの機密データがログへ漏洩することを防止できます。

<query_masking_rules>
    <rule>
        <name>hide SSN</name>
        <regexp>(^|\D)\d{3}-\d{2}-\d{4}($|\D)</regexp>
        <replace>000-00-0000</replace>
    </rule>
</query_masking_rules>

設定フィールド:

設定項目説明
nameルール名(任意)
regexpRE2 互換の正規表現(必須)
replace機微データを置き換えるための文字列(任意、デフォルトはアスタリスク 6 文字)

マスキングルールはクエリ全体に対して適用されます(誤った形式 / パース不能なクエリから機微データが漏洩するのを防ぐため)。

system.events テーブルには QueryMaskingRulesMatch カウンタがあり、クエリマスキングルールにマッチした回数の総計を保持します。

分散クエリの場合は、各サーバーを個別に設定する必要があります。そうしないと、他のノードに渡されるサブクエリはマスキングされないまま保存されます。

query_metric_log

デフォルトでは無効になっています。

有効化

メトリクス履歴の収集 system.query_metric_log を手動で有効にするには、次の内容で /etc/clickhouse-server/config.d/query_metric_log.xml を作成します。

<clickhouse>
    <query_metric_log>
        <database>system</database>
        <table>query_metric_log</table>
        <flush_interval_milliseconds>7500</flush_interval_milliseconds>
        <collect_interval_milliseconds>1000</collect_interval_milliseconds>
        <max_size_rows>1048576</max_size_rows>
        <reserved_size_rows>8192</reserved_size_rows>
        <buffer_size_rows_flush_threshold>524288</buffer_size_rows_flush_threshold>
        <flush_on_crash>false</flush_on_crash>
    </query_metric_log>
</clickhouse>

無効化

query_metric_log 設定を無効にするには、次の内容で /etc/clickhouse-server/config.d/disable_query_metric_log.xml ファイルを作成します。

<clickhouse>
    <query_metric_log remove="1" />
</clickhouse>

The following settings can be configured by sub-tags:

SettingDescriptionDefaultNote
databaseデータベース名。
tableシステムテーブル名。
engineシステムテーブルに対する MergeTree エンジン定義partition_by または order_by が定義されている場合は使用できません。指定しない場合はデフォルトで MergeTree が選択されます
partition_byシステムテーブルに対するカスタムパーティショニングキーシステムテーブルに engine を指定する場合、partition_by パラメータは engine の設定内で直接指定する必要があります
ttlテーブルの TTL を指定します。システムテーブルに engine を指定する場合、ttl パラメータは engine の設定内で直接指定する必要があります
order_byシステムテーブルに対するカスタムソートキーengine が定義されている場合は使用できません。システムテーブルに engine を指定する場合、order_by パラメータは engine の設定内で直接指定する必要があります
storage_policyテーブルに使用するストレージポリシー名(任意)。システムテーブルに engine を指定する場合、storage_policy パラメータは engine の設定内で直接指定する必要があります
settingsMergeTree の動作を制御する追加パラメータ(任意)。システムテーブルに engine を指定する場合、settings パラメータは engine の設定内で直接指定する必要があります
flush_interval_millisecondsメモリ上のバッファからテーブルへデータをフラッシュする間隔。7500
max_size_rowsログの最大行数。未フラッシュのログ数が max_size_rows に達すると、ログがディスクにダンプされます。1048576
reserved_size_rowsログ用に事前確保されるメモリ容量(行数)。8192
buffer_size_rows_flush_threshold行数のしきい値。このしきい値に達すると、バックグラウンドでログをディスクへフラッシュする処理が起動します。max_size_rows / 2
flush_on_crashクラッシュ発生時にログをディスクへダンプするかどうかを設定します。false

query_thread_log

log_query_threads=1 設定で受信したクエリのスレッドをログに記録するための設定です。

クエリは別個のファイルではなく、system.query_thread_log テーブルに記録されます。テーブル名は table パラメータで変更できます(後述)。

The following settings can be configured by sub-tags:

SettingDescriptionDefaultNote
databaseデータベース名。
tableシステムテーブル名。
engineシステムテーブルに対する MergeTree エンジン定義partition_by または order_by が定義されている場合は使用できません。指定しない場合はデフォルトで MergeTree が選択されます
partition_byシステムテーブルに対するカスタムパーティショニングキーシステムテーブルに engine を指定する場合、partition_by パラメータは engine の設定内で直接指定する必要があります
ttlテーブルの TTL を指定します。システムテーブルに engine を指定する場合、ttl パラメータは engine の設定内で直接指定する必要があります
order_byシステムテーブルに対するカスタムソートキーengine が定義されている場合は使用できません。システムテーブルに engine を指定する場合、order_by パラメータは engine の設定内で直接指定する必要があります
storage_policyテーブルに使用するストレージポリシー名(任意)。システムテーブルに engine を指定する場合、storage_policy パラメータは engine の設定内で直接指定する必要があります
settingsMergeTree の動作を制御する追加パラメータ(任意)。システムテーブルに engine を指定する場合、settings パラメータは engine の設定内で直接指定する必要があります
flush_interval_millisecondsメモリ上のバッファからテーブルへデータをフラッシュする間隔。7500
max_size_rowsログの最大行数。未フラッシュのログ数が max_size_rows に達すると、ログがディスクにダンプされます。1048576
reserved_size_rowsログ用に事前確保されるメモリ容量(行数)。8192
buffer_size_rows_flush_threshold行数のしきい値。このしきい値に達すると、バックグラウンドでログをディスクへフラッシュする処理が起動します。max_size_rows / 2
flush_on_crashクラッシュ発生時にログをディスクへダンプするかどうかを設定します。false

テーブルが存在しない場合、ClickHouse が作成します。ClickHouse サーバーのアップデート時にクエリスレッドログの構造が変更された場合、古い構造を持つテーブルの名前が変更され、新しいテーブルが自動的に作成されます。

<query_thread_log>
    <database>system</database>
    <table>query_thread_log</table>
    <partition_by>toMonday(event_date)</partition_by>
    <flush_interval_milliseconds>7500</flush_interval_milliseconds>
    <max_size_rows>1048576</max_size_rows>
    <reserved_size_rows>8192</reserved_size_rows>
    <buffer_size_rows_flush_threshold>524288</buffer_size_rows_flush_threshold>
    <flush_on_crash>false</flush_on_crash>
</query_thread_log>

query_views_log

log_query_views=1 設定を有効にしたクエリに応じて、ビュー(ライブビュー、マテリアライズドビューなど)をログ出力するための設定です。

クエリは、別ファイルではなく system.query_views_log テーブルに記録されます。テーブル名は table パラメータで変更できます(後述)。

The following settings can be configured by sub-tags:

SettingDescriptionDefaultNote
databaseデータベース名。
tableシステムテーブル名。
engineシステムテーブルに対する MergeTree エンジン定義partition_by または order_by が定義されている場合は使用できません。指定しない場合はデフォルトで MergeTree が選択されます
partition_byシステムテーブルに対するカスタムパーティショニングキーシステムテーブルに engine を指定する場合、partition_by パラメータは engine の設定内で直接指定する必要があります
ttlテーブルの TTL を指定します。システムテーブルに engine を指定する場合、ttl パラメータは engine の設定内で直接指定する必要があります
order_byシステムテーブルに対するカスタムソートキーengine が定義されている場合は使用できません。システムテーブルに engine を指定する場合、order_by パラメータは engine の設定内で直接指定する必要があります
storage_policyテーブルに使用するストレージポリシー名(任意)。システムテーブルに engine を指定する場合、storage_policy パラメータは engine の設定内で直接指定する必要があります
settingsMergeTree の動作を制御する追加パラメータ(任意)。システムテーブルに engine を指定する場合、settings パラメータは engine の設定内で直接指定する必要があります
flush_interval_millisecondsメモリ上のバッファからテーブルへデータをフラッシュする間隔。7500
max_size_rowsログの最大行数。未フラッシュのログ数が max_size_rows に達すると、ログがディスクにダンプされます。1048576
reserved_size_rowsログ用に事前確保されるメモリ容量(行数)。8192
buffer_size_rows_flush_threshold行数のしきい値。このしきい値に達すると、バックグラウンドでログをディスクへフラッシュする処理が起動します。max_size_rows / 2
flush_on_crashクラッシュ発生時にログをディスクへダンプするかどうかを設定します。false

テーブルが存在しない場合、ClickHouse が作成します。ClickHouse サーバーをアップデートした際にクエリビューのログ構造が変更された場合、旧構造のテーブルはリネームされ、新しいテーブルが自動的に作成されます。

<query_views_log>
    <database>system</database>
    <table>query_views_log</table>
    <partition_by>toYYYYMM(event_date)</partition_by>
    <flush_interval_milliseconds>7500</flush_interval_milliseconds>
    <max_size_rows>1048576</max_size_rows>
    <reserved_size_rows>8192</reserved_size_rows>
    <buffer_size_rows_flush_threshold>524288</buffer_size_rows_flush_threshold>
    <flush_on_crash>false</flush_on_crash>
</query_views_log>

remap_executable

マシンコード(「text」)用のメモリをヒュージページを使って再割り当てするための設定です。

注記

この機能は高度に実験的です。

例:

<remap_executable>false</remap_executable>

remote_servers

Distributed テーブルエンジンおよび cluster テーブル関数で使用されるクラスターの構成。

<remote_servers incl="clickhouse_remote_servers" />

incl 属性に指定できる値については、「Configuration files」セクションを参照してください。

関連項目

remote_url_allow_hosts

URL 関連のストレージエンジンおよびテーブル関数で利用を許可するホストのリストです。

\<host\> XML タグでホストを追加する際は、次の点に注意してください。

  • DNS 解決の前に名前がチェックされるため、URL 中で使用されているものとまったく同じ文字列で指定する必要があります。例: <host>clickhouse.com</host>
  • URL 内でポートが明示的に指定されている場合は、host:port 全体としてチェックされます。例: <host>clickhouse.com:80</host>
  • ホストをポートなしで指定した場合、そのホストの任意のポートが許可されます。例: <host>clickhouse.com</host> を指定した場合は、clickhouse.com:20 (FTP)、clickhouse.com:80 (HTTP)、clickhouse.com:443 (HTTPS) などが許可されます。
  • ホストを IP アドレスとして指定した場合、URL に記載されているとおりにチェックされます。例: [2a02:6b8:a::a]
  • リダイレクトが発生し、リダイレクトのサポートが有効になっている場合は、各リダイレクト先(location フィールド)がすべてチェックされます。

例:

<remote_url_allow_hosts>
    <host>clickhouse.com</host>
</remote_url_allow_hosts>

replica_group_name

Replicated データベースで使用するレプリカグループ名。

Replicated データベースによって作成されるクラスタは、同じグループ内のレプリカで構成されます。 DDL クエリは、同じグループ内のレプリカに対してのみ待機します。

デフォルトでは空です。

<replica_group_name>backups</replica_group_name>

replicated_fetches_http_connection_timeout

パーツ取得リクエスト用の HTTP 接続タイムアウト値です。明示的に設定していない場合は、デフォルトプロファイルの http_connection_timeout から継承されます。

replicated_fetches_http_receive_timeout

fetch part リクエストに対する HTTP の受信タイムアウト。明示的に設定されていない場合は、デフォルトプロファイルの http_receive_timeout から継承されます。

replicated_fetches_http_send_timeout

パーツ取得リクエストに対する HTTP 送信のタイムアウト。明示的に設定されていない場合は、デフォルトプロファイルの http_send_timeout から継承されます。

replicated_merge_tree

ReplicatedMergeTree テーブル用の微調整設定です。この設定は他の設定よりも優先されます。

詳細については、MergeTreeSettings.h ヘッダーファイルを参照してください。

<replicated_merge_tree>
    <max_suspicious_broken_parts>5</max_suspicious_broken_parts>
</replicated_merge_tree>

restore_threads

RESTORE リクエストの実行に使用するスレッドの最大数。

s3_credentials_provider_max_cache_size

キャッシュできる S3 認証情報プロバイダの最大数

s3_max_redirects

S3 リダイレクトで許可されるホップ数の上限。

s3_retry_attempts

Aws::Client::RetryStrategy のための設定です。Aws::Client 自身が再試行を行い、0 を指定すると再試行しません

s3queue_disable_streaming

テーブルが作成済みで、マテリアライズドビューがアタッチされている場合でも、S3Queue でのストリーミングを無効にします

s3queue_log

s3queue_log システムテーブルの設定です。

The following settings can be configured by sub-tags:

SettingDescriptionDefaultNote
databaseデータベース名。
tableシステムテーブル名。
engineシステムテーブルに対する MergeTree エンジン定義partition_by または order_by が定義されている場合は使用できません。指定しない場合はデフォルトで MergeTree が選択されます
partition_byシステムテーブルに対するカスタムパーティショニングキーシステムテーブルに engine を指定する場合、partition_by パラメータは engine の設定内で直接指定する必要があります
ttlテーブルの TTL を指定します。システムテーブルに engine を指定する場合、ttl パラメータは engine の設定内で直接指定する必要があります
order_byシステムテーブルに対するカスタムソートキーengine が定義されている場合は使用できません。システムテーブルに engine を指定する場合、order_by パラメータは engine の設定内で直接指定する必要があります
storage_policyテーブルに使用するストレージポリシー名(任意)。システムテーブルに engine を指定する場合、storage_policy パラメータは engine の設定内で直接指定する必要があります
settingsMergeTree の動作を制御する追加パラメータ(任意)。システムテーブルに engine を指定する場合、settings パラメータは engine の設定内で直接指定する必要があります
flush_interval_millisecondsメモリ上のバッファからテーブルへデータをフラッシュする間隔。7500
max_size_rowsログの最大行数。未フラッシュのログ数が max_size_rows に達すると、ログがディスクにダンプされます。1048576
reserved_size_rowsログ用に事前確保されるメモリ容量(行数)。8192
buffer_size_rows_flush_threshold行数のしきい値。このしきい値に達すると、バックグラウンドでログをディスクへフラッシュする処理が起動します。max_size_rows / 2
flush_on_crashクラッシュ発生時にログをディスクへダンプするかどうかを設定します。false

デフォルトの設定は次のとおりです。

<s3queue_log>
    <database>system</database>
    <table>s3queue_log</table>
    <partition_by>toYYYYMM(event_date)</partition_by>
    <flush_interval_milliseconds>7500</flush_interval_milliseconds>
</s3queue_log>

send_crash_reports

ClickHouse コア開発チームにクラッシュレポートを送信するための設定です。

特にプレプロダクション環境などで有効化していただけると非常に助かります。

Keys:

KeyDescription
enabled機能を有効にするためのブール値フラグ。デフォルトは true です。クラッシュレポートの送信を行わない場合は false に設定します。
send_logical_errorsLOGICAL_ERRORassert のようなもので、ClickHouse におけるバグを表します。このブール値フラグは、これらの例外を送信するかどうかを制御します(デフォルト: true)。
endpointクラッシュレポート送信用のエンドポイント URL を上書きできます。

推奨される利用方法

<send_crash_reports>
    <enabled>true</enabled>
</send_crash_reports>

series_keeper_path

generateSerialID 関数によって生成される、自動増分番号付きの Keeper 内のパスです。各 series は、このパス直下のノードとして作成されます。

show_addresses_in_stack_traces

true に設定すると、スタックトレースにアドレスが表示されます

shutdown_wait_backups_and_restores

true に設定すると、ClickHouse はシャットダウンする前に、実行中のバックアップおよびリストアが完了するまで待機します。

shutdown_wait_unfinished

未完了のクエリを待機するための秒数

shutdown_wait_unfinished_queries

true に設定すると、ClickHouse はシャットダウンする前に実行中のクエリが完了するまで待機します。

skip_binary_checksum_checks

ClickHouse バイナリのチェックサムによる整合性検証をスキップします

ssh_server

ホストキーの公開鍵部分は、初回接続時に SSH クライアント側の known_hosts ファイルに書き込まれます。

Host Key Configurations セクションはデフォルトでは無効になっています。 Host Key Configurations のコメントアウトを解除し、対応する SSH 鍵へのパスを指定して有効化してください:

例:

<ssh_server>
    <host_rsa_key>path_to_the_ssh_key</host_rsa_key>
    <host_ecdsa_key>path_to_the_ssh_key</host_ecdsa_key>
    <host_ed25519_key>path_to_the_ssh_key</host_ed25519_key>
</ssh_server>

startup_mv_delay_ms

マテリアライズドビュー作成の遅延をシミュレートするためのデバッグ用のパラメータ

storage_configuration

ストレージのマルチディスク構成を行うための設定です。

ストレージ構成は次の構造に従います:

<storage_configuration>
    <disks>
        <!-- configuration -->
    </disks>
    <policies>
        <!-- configuration -->
    </policies>
</storage_configuration>

ディスクの設定

disks の設定は、以下の構造で記述します。

<storage_configuration>
    <disks>
        <disk_name_1>
            <path>/mnt/fast_ssd/clickhouse/</path>
        </disk_name_1>
        <disk_name_2>
            <path>/mnt/hdd1/clickhouse/</path>
            <keep_free_space_bytes>10485760</keep_free_space_bytes>
        </disk_name_2>
        <disk_name_3>
            <path>/mnt/hdd2/clickhouse/</path>
            <keep_free_space_bytes>10485760</keep_free_space_bytes>
        </disk_name_3>
        ...
    </disks>
</storage_configuration>

上記のサブタグでは、disks に対して次の設定を定義します:

SettingDescription
<disk_name_N>一意である必要があるディスク名。
pathサーバーデータ(data および shadow ディレクトリ)が保存されるパス。/ で終わる必要があります。
keep_free_space_bytesディスク上で予約される空き容量(バイト数)。
注記

ディスクの順序は問いません。

ポリシーの構成

上記のサブタグは、policies に対して次の設定を定義します:

SettingDescription
policy_name_Nポリシー名。ポリシー名は一意でなければなりません。
volume_name_Nボリューム名。ボリューム名は一意でなければなりません。
diskボリューム内に配置されるディスク。
max_data_part_size_bytesこのボリューム内の任意のディスク上に存在できるデータ chunk の最大サイズ。マージの結果として、chunk サイズが max_data_part_size_bytes より大きくなると予想される場合、その chunk は次のボリュームに書き込まれます。この機能により、新規 / 小さな chunk をホット (SSD) ボリュームに保存し、それらが大きなサイズに達したときにコールド (HDD) ボリュームへ移動できます。ポリシーに 1 つのボリュームしかない場合は、このオプションを使用しないでください。
move_factorボリューム上の利用可能な空き容量の割合。この値より空き容量が少なくなると、(存在する場合は) データの次のボリュームへの移動が開始されます。移動の際には、chunk はサイズの大きいものから小さいもの (降順) にソートされ、合計サイズが move_factor の条件を満たすのに十分な chunk が選択されます。すべての chunk の合計サイズが不十分な場合は、すべての chunk が移動されます。
perform_ttl_move_on_insert挿入時に、有効期限 (TTL) が切れたデータの移動を無効にします。デフォルト (有効な場合) では、ライフタイムに基づく move ルールに従ってすでに期限切れとなっているデータを挿入すると、それは直ちに move ルールで指定されたボリューム / ディスクに移動されます。ターゲットのボリューム / ディスクが遅い場合 (例: S3)、これにより挿入が大幅に遅くなる可能性があります。無効化した場合、期限切れのデータ部分はいったんデフォルトボリュームに書き込まれた後、直ちに、期限切れの有効期限 (TTL) に対するルールで指定されたボリュームに移動されます。
load_balancingディスクのバランシングポリシー。round_robin または least_used
least_used_ttl_msすべてのディスク上の利用可能な空き容量を更新するためのタイムアウト (ミリ秒) を設定します (0 - 常に更新、-1 - 更新しない、デフォルト値は 60000)。なお、そのディスクが ClickHouse によってのみ使用され、ファイルシステムのオンラインリサイズの対象にならない場合は、-1 の値を使用できます。それ以外のケースでは、最終的に不正な空き容量割り当てにつながるため推奨されません。
prefer_not_to_mergeこのボリューム上のデータパーツのマージを無効にします。注意: これは潜在的に有害であり、パフォーマンス低下の原因になります。この設定を有効にすると (推奨されません)、このボリューム上でのデータマージは禁止されます (これは望ましくありません)。これは、ClickHouse が遅いディスクとどのようにやり取りするかを制御するためのものです。これを使用しないことを推奨します。
volume_priorityボリュームが埋められる優先度 (順序) を定義します。値が小さいほど優先度が高くなります。パラメータの値は自然数でなければならず、1 から N (N は指定されたパラメータ値の最大値) までの範囲を隙間なくカバーする必要があります。

volume_priority について:

  • すべてのボリュームにこのパラメータが指定されている場合、それらは指定された順序で優先されます。
  • 一部の ボリュームにのみ指定されている場合、指定されていないボリュームは最も低い優先度になります。指定されているボリュームはタグ値に従って優先され、それ以外のボリュームの優先度は、設定ファイル内での相互の記述順によって決まります。
  • どの ボリュームにもこのパラメータが指定されていない場合、それらの順序は設定ファイルでの記述順によって決まります。
  • ボリュームの優先度は同一である必要はありません。

storage_connections_hard_limit

この制限に達した状態で作成を試行すると、例外がスローされます。ハード制限を無効にするには 0 に設定します。この制限はストレージ接続に適用されます。

storage_connections_soft_limit

この上限を超える接続は、有効期間が大幅に短くなります。この上限はストレージへの接続に適用されます。

storage_connections_store_limit

この上限を超えた接続は、使用後にリセットされます。0 を設定すると、接続キャッシュを無効化します。この上限はストレージの接続に適用されます。

storage_connections_warn_limit

使用中の接続数がこの上限を超えた場合、警告メッセージがログに書き込まれます。この上限はストレージの接続に適用されます。

storage_metadata_write_full_object_key

ディスクメタデータファイルを VERSION_FULL_OBJECT_KEY 形式で書き込みます。デフォルトで有効になっています。この設定は非推奨です。

storage_shared_set_join_use_inner_uuid

有効にすると、SharedSet および SharedJoin の作成時に内部 UUID が生成されます。ClickHouse Cloud 限定です

table_engines_require_grant

true に設定すると、特定のエンジンを使用してテーブルを作成するにはユーザーへの権限付与が必要になります(例: GRANT TABLE ENGINE ON TinyLog TO user)。

注記

デフォルトでは、後方互換性のため、特定のテーブルエンジンを使用してテーブルを作成する際の権限チェックは行われませんが、この設定を true にすることでこの挙動を変更できます。

tables_loader_background_pool_size

バックグラウンドプールで非同期ロード処理を実行するスレッド数を設定します。バックグラウンドプールは、テーブルを待機しているクエリがない場合に、サーバー起動後のテーブルを非同期にロードするために使用されます。テーブル数が多い場合は、バックグラウンドプール内のスレッド数を少なく保つと有効な場合があります。これにより、並行クエリ実行のための CPU リソースを確保できます。

注記

0 を指定すると、利用可能なすべての CPU が使用されます。

tables_loader_foreground_pool_size

フォアグラウンドプールでロードジョブを実行するスレッド数を設定します。フォアグラウンドプールは、サーバーがポートでのリッスンを開始する前にテーブルを同期的にロードする場合や、ロード完了を待っているテーブルをロードする場合に使用されます。フォアグラウンドプールはバックグラウンドプールよりも優先度が高く、フォアグラウンドプールでジョブが実行されている間は、バックグラウンドプールで新たなジョブは開始されません。

注記

0 を指定すると、利用可能なすべての CPU が使用されます。

tcp_close_connection_after_queries_num

TCP 接続を閉じる前に、その接続で実行を許可するクエリの最大数。無制限にするには 0 を指定します。

tcp_close_connection_after_queries_seconds

TCP 接続が閉じられるまでの最大存続期間(秒)。接続の存続期間を無制限にするには 0 に設定します。

tcp_port

TCP プロトコルでクライアントと通信するためのポート。

<tcp_port>9000</tcp_port>

tcp_port_secure

クライアントとのセキュアな通信に使用する TCP ポートです。OpenSSL の設定とあわせて使用します。

デフォルト値

<tcp_port_secure>9440</tcp_port_secure>

tcp_ssh_port

PTY 上で組み込みクライアントを使用し、対話的に接続してクエリを実行できるようにする SSH サーバーのポートです。

例:

<tcp_ssh_port>9022</tcp_ssh_port>

temporary_data_in_cache

このオプションを有効にすると、特定のディスク用の一時データが、そのディスクのキャッシュ内に保存されます。 このセクションでは、型が cache のディスク名を指定する必要があります。 この場合、キャッシュと一時データは同じ領域を共有し、一時データを作成するためにディスクキャッシュが追い出される(削除される)ことがあります。

注記

一時データの保存場所を設定するために使用できるオプションは 1 つだけです: tmp_pathtmp_policytemporary_data_in_cache

local_disk 用のキャッシュと一時データの両方が、ファイルシステム上の /tiny_local_cache に保存され、tiny_local_cache によって管理されます。

<clickhouse>
<storage_configuration>
<disks>
<local_disk>
<type>local</type>
<path>/local_disk/</path>
</local_disk>

<!-- highlight-start -->
<tiny_local_cache>
<type>cache</type>
<disk>local_disk</disk>
<path>/tiny_local_cache/</path>
<max_size_rows>10M</max_size_rows>
<max_file_segment_size>1M</max_file_segment_size>
<cache_on_write_operations>1</cache_on_write_operations>
</tiny_local_cache>
<!-- highlight-end -->
</disks>
</storage_configuration>

<!-- highlight-start -->
<temporary_data_in_cache>tiny_local_cache</temporary_data_in_cache>
<!-- highlight-end -->
</clickhouse>

temporary_data_in_distributed_cache

一時データを分散キャッシュに格納します。

text_index_dictionary_block_cache_max_entries

テキスト索引のDictionaryブロック用キャッシュのサイズ(エントリ数)。ゼロの場合は無効です。

text_index_dictionary_block_cache_policy

テキスト索引Dictionaryのブロックキャッシュポリシー名。

text_index_dictionary_block_cache_size

テキストインデックス Dictionary ブロック用キャッシュのサイズ。0 にすると無効になります。

注記

この設定は実行時に変更でき、即座に反映されます。

text_index_dictionary_block_cache_size_ratio

テキストインデックス Dictionary ブロックキャッシュにおいて、保護キュー(SLRU ポリシー使用時)のサイズがキャッシュ全体サイズに占める比率を指定します。

text_index_header_cache_max_entries

text インデックスヘッダーのキャッシュサイズ(エントリ数)。0 にすると無効になります。

text_index_header_cache_policy

テキスト索引ヘッダーキャッシュポリシーの名前。

text_index_header_cache_size

テキスト索引ヘッダー用キャッシュサイズ。ゼロの場合は無効になります。

注記

この設定は実行時に変更でき、直ちに反映されます。

text_index_header_cache_size_ratio

テキスト索引ヘッダーキャッシュにおける保護キュー(SLRU ポリシーの場合)のサイズを、キャッシュの総サイズに対する比率で指定します。

text_index_postings_cache_max_entries

テキスト索引のポスティングリスト用キャッシュのサイズ(エントリ数)。0 の場合は無効になります。

text_index_postings_cache_policy

テキスト索引ポスティングリストのキャッシュポリシー名。

text_index_postings_cache_size

テキスト索引のポスティングリスト用キャッシュのサイズ。0 の場合は無効になります。

注記

この設定はサーバー稼働中でも変更でき、即座に反映されます。

text_index_postings_cache_size_ratio

テキストインデックスのポスティングリストキャッシュにおいて、保護キュー(SLRU ポリシーの場合)のサイズがキャッシュ全体サイズに対して占める割合。

text_log

テキストメッセージを記録するための text_log システムテーブル向け設定です。

The following settings can be configured by sub-tags:

SettingDescriptionDefaultNote
databaseデータベース名。
tableシステムテーブル名。
engineシステムテーブルに対する MergeTree エンジン定義partition_by または order_by が定義されている場合は使用できません。指定しない場合はデフォルトで MergeTree が選択されます
partition_byシステムテーブルに対するカスタムパーティショニングキーシステムテーブルに engine を指定する場合、partition_by パラメータは engine の設定内で直接指定する必要があります
ttlテーブルの TTL を指定します。システムテーブルに engine を指定する場合、ttl パラメータは engine の設定内で直接指定する必要があります
order_byシステムテーブルに対するカスタムソートキーengine が定義されている場合は使用できません。システムテーブルに engine を指定する場合、order_by パラメータは engine の設定内で直接指定する必要があります
storage_policyテーブルに使用するストレージポリシー名(任意)。システムテーブルに engine を指定する場合、storage_policy パラメータは engine の設定内で直接指定する必要があります
settingsMergeTree の動作を制御する追加パラメータ(任意)。システムテーブルに engine を指定する場合、settings パラメータは engine の設定内で直接指定する必要があります
flush_interval_millisecondsメモリ上のバッファからテーブルへデータをフラッシュする間隔。7500
max_size_rowsログの最大行数。未フラッシュのログ数が max_size_rows に達すると、ログがディスクにダンプされます。1048576
reserved_size_rowsログ用に事前確保されるメモリ容量(行数)。8192
buffer_size_rows_flush_threshold行数のしきい値。このしきい値に達すると、バックグラウンドでログをディスクへフラッシュする処理が起動します。max_size_rows / 2
flush_on_crashクラッシュ発生時にログをディスクへダンプするかどうかを設定します。false

さらに、次の設定があります。

Setting説明Default Value
levelテーブルに保存されるメッセージの最大レベル(デフォルトは Trace)。Trace

<clickhouse>
    <text_log>
        <level>notice</level>
        <database>system</database>
        <table>text_log</table>
        <flush_interval_milliseconds>7500</flush_interval_milliseconds>
        <max_size_rows>1048576</max_size_rows>
        <reserved_size_rows>8192</reserved_size_rows>
        <buffer_size_rows_flush_threshold>524288</buffer_size_rows_flush_threshold>
        <flush_on_crash>false</flush_on_crash>
        <!-- <partition_by>event_date</partition_by> -->
        <engine>Engine = MergeTree PARTITION BY event_date ORDER BY event_time TTL event_date + INTERVAL 30 day</engine>
    </text_log>
</clickhouse>

thread_pool_queue_size

グローバルスレッドプールにスケジュールできるジョブの最大数です。キューサイズを増やすとメモリ使用量が増加します。この値は max_thread_pool_size と同じにすることを推奨します。

注記

0 は無制限を意味します。

<thread_pool_queue_size>12000</thread_pool_queue_size>

threadpool_local_fs_reader_pool_size

local_filesystem_read_method = 'pread_threadpool' の場合に、ローカルファイルシステムからの読み取りに使用されるスレッドプールのスレッド数。

threadpool_local_fs_reader_queue_size

ローカルファイルシステムからの読み取りを行うために、スレッドプールへスケジュールできるジョブ数の上限。

threadpool_remote_fs_reader_pool_size

remote_filesystem_read_method = 'threadpool' が設定されている場合に、リモートファイルシステムからの読み取りを行うスレッドプールのスレッド数。

threadpool_remote_fs_reader_queue_size

リモートファイルシステムから読み取るためにスレッドプール上でスケジューリングできるジョブの最大数です。

threadpool_writer_pool_size

オブジェクトストレージへの書き込みリクエスト用バックグラウンドプールのサイズ

threadpool_writer_queue_size

オブジェクトストレージへの書き込みリクエスト用のバックグラウンドプールに投入可能なタスク数の上限

throw_on_unknown_workload

設定 'workload' で指定された未知の WORKLOAD へのアクセス時の動作を定義します。

  • true の場合、未知の WORKLOAD にアクセスしようとしたクエリから RESOURCE_ACCESS_DENIED 例外がスローされます。WORKLOAD の階層が確立され、WORKLOAD default を含むようになったあとに、すべてのクエリでリソーススケジューリングを必須にするのに有用です。
  • false(デフォルト)の場合、未知の WORKLOAD を指す 'workload' 設定を持つクエリは、リソーススケジューリングなしで無制限にアクセスできます。これは、WORKLOAD の階層を構成している段階で、WORKLOAD default が追加される前に重要です。

<throw_on_unknown_workload>true</throw_on_unknown_workload>

関連項目

timezone

サーバーのタイムゾーン。

UTC タイムゾーンまたは地理的な場所を示す IANA 識別子として指定します(例: Africa/Abidjan)。

タイムゾーンは、DateTime フィールドをテキスト形式(画面表示やファイル出力)に変換する際の String と DateTime の相互変換や、文字列から DateTime を取得する際に必要となります。さらに、入力パラメータでタイムゾーンが指定されていない時間・日付関連の関数でも、このタイムゾーンが使用されます。

Example

<timezone>Asia/Istanbul</timezone>

関連項目

tmp_path

大規模なクエリを処理するための一時データを保存する、ローカルファイルシステム上のパス。

注記
  • 一時データストレージの構成に使用できるオプションは tmp_pathtmp_policytemporary_data_in_cache のいずれか一つだけです。
  • 末尾のスラッシュは必須です。

<tmp_path>/var/lib/clickhouse/tmp/</tmp_path>

tmp_policy

一時データ用ストレージのポリシーです。tmp プレフィックスを持つすべてのファイルは、サーバー起動時に削除されます。

注記

tmp_policy としてオブジェクトストレージを使用する際の推奨事項:

  • 各サーバーで別々の bucket:path を使用する
  • metadata_type=plain を使用する
  • このバケットに対して有効期限 (TTL) を設定することも検討してください
注記
  • 一時データストレージを構成するには、tmp_pathtmp_policytemporary_data_in_cache のいずれか一つしか使用できません。
  • move_factorkeep_free_space_bytesmax_data_part_size_bytes は無視されます。
  • ポリシーには 1 つのボリューム だけを定義する必要があります。

詳細については MergeTree Table Engine のドキュメントを参照してください。

/disk1 がいっぱいの場合は、一時データは /disk2 に保存されます。

<clickhouse>
<storage_configuration>
<disks>
<disk1>
<path>/disk1/</path>
</disk1>
<disk2>
<path>/disk2/</path>
</disk2>
</disks>

<policies>
<!-- highlight-start -->
<tmp_two_disks>
<volumes>
<main>
<disk>disk1</disk>
<disk>disk2</disk>
</main>
</volumes>
</tmp_two_disks>
<!-- highlight-end -->
</policies>
</storage_configuration>

<!-- highlight-start -->
<tmp_policy>tmp_two_disks</tmp_policy>
<!-- highlight-end -->
</clickhouse>

top_level_domains_list

追加するカスタムトップレベルドメインのリストを、各エントリが <name>/path/to/file</name> 形式になるように定義します。

例えば次のように指定します:

<top_level_domains_lists>
    <public_suffix_list>/path/to/public_suffix_list.dat</public_suffix_list>
</top_level_domains_lists>

以下も参照してください:

  • 関数 cutToFirstSignificantSubdomainCustom とそのバリエーション。 これらはカスタム TLD リスト名を引数として受け取り、トップレベルドメイン配下のサブドメインを最初の意味のあるサブドメインまで含んだドメイン部分を返します。

total_memory_profiler_sample_max_allocation_size

total_memory_profiler_sample_probability と同じ確率で、指定した値以下のサイズのランダムなメモリアロケーションを収集します。0 を指定すると無効になります。このしきい値を想定どおりに機能させるには、max_untracked_memory を 0 に設定することを検討してください。

total_memory_profiler_sample_min_allocation_size

total_memory_profiler_sample_probability と等しい確率で、指定した値以上のサイズのメモリ割り当てをランダムにサンプリングします。0 は無効を意味します。このしきい値が期待どおりに機能するようにするには、max_untracked_memory を 0 に設定することを検討してください。

total_memory_profiler_step

サーバーのメモリ使用量が、バイト数で指定された次のステップ値を超えるたびに、メモリプロファイラは割り当て元のスタックトレースを収集します。0 に設定するとメモリプロファイラは無効になります。数メガバイト未満の値を指定すると、サーバーのパフォーマンスが低下します。

total_memory_tracker_sample_probability

ランダムなメモリの割り当ておよび解放を収集し、指定した確率で trace_typeMemorySample である行として system.trace_log システムテーブルに書き込みます。確率は、割り当てのサイズに関係なく、各割り当ておよび解放ごとに適用されます。サンプリングは、未追跡メモリ量が未追跡メモリ制限(デフォルト値は 4 MiB)を超えた場合にのみ行われる点に注意してください。total_memory_profiler_step を小さくすることで、この制限を下げることができます。より細かい粒度でサンプリングするには、total_memory_profiler_step1 に設定できます。

設定可能な値:

  • 正の倍精度浮動小数点数。
  • 0 — ランダムなメモリの割り当ておよび解放を system.trace_log システムテーブルに書き込む処理を無効にする。

trace_log

trace_log システムテーブルの操作に関する設定です。

The following settings can be configured by sub-tags:

SettingDescriptionDefaultNote
databaseデータベース名。
tableシステムテーブル名。
engineシステムテーブルに対する MergeTree エンジン定義partition_by または order_by が定義されている場合は使用できません。指定しない場合はデフォルトで MergeTree が選択されます
partition_byシステムテーブルに対するカスタムパーティショニングキーシステムテーブルに engine を指定する場合、partition_by パラメータは engine の設定内で直接指定する必要があります
ttlテーブルの TTL を指定します。システムテーブルに engine を指定する場合、ttl パラメータは engine の設定内で直接指定する必要があります
order_byシステムテーブルに対するカスタムソートキーengine が定義されている場合は使用できません。システムテーブルに engine を指定する場合、order_by パラメータは engine の設定内で直接指定する必要があります
storage_policyテーブルに使用するストレージポリシー名(任意)。システムテーブルに engine を指定する場合、storage_policy パラメータは engine の設定内で直接指定する必要があります
settingsMergeTree の動作を制御する追加パラメータ(任意)。システムテーブルに engine を指定する場合、settings パラメータは engine の設定内で直接指定する必要があります
flush_interval_millisecondsメモリ上のバッファからテーブルへデータをフラッシュする間隔。7500
max_size_rowsログの最大行数。未フラッシュのログ数が max_size_rows に達すると、ログがディスクにダンプされます。1048576
reserved_size_rowsログ用に事前確保されるメモリ容量(行数)。8192
buffer_size_rows_flush_threshold行数のしきい値。このしきい値に達すると、バックグラウンドでログをディスクへフラッシュする処理が起動します。max_size_rows / 2
flush_on_crashクラッシュ発生時にログをディスクへダンプするかどうかを設定します。false

デフォルトのサーバー設定ファイル config.xml には、次の設定項目のセクションが含まれます。

<trace_log>
    <database>system</database>
    <table>trace_log</table>
    <partition_by>toYYYYMM(event_date)</partition_by>
    <flush_interval_milliseconds>7500</flush_interval_milliseconds>
    <max_size_rows>1048576</max_size_rows>
    <reserved_size_rows>8192</reserved_size_rows>
    <buffer_size_rows_flush_threshold>524288</buffer_size_rows_flush_threshold>
    <flush_on_crash>false</flush_on_crash>
    <symbolize>false</symbolize>
</trace_log>

uncompressed_cache_policy

非圧縮キャッシュポリシーの名前。

uncompressed_cache_size

MergeTree ファミリーのテーブルエンジンで使用される非圧縮データの最大サイズ(バイト単位)。

サーバー全体で共有されるキャッシュが 1 つだけあります。メモリはオンデマンドで割り当てられます。オプション use_uncompressed_cache が有効な場合にキャッシュが使用されます。

非圧縮キャッシュは、特定のケースにおける非常に短いクエリに対して有効です。

注記

0 は無効化を意味します。

この設定は実行時に変更可能で、すぐに反映されます。

uncompressed_cache_size_ratio

非圧縮キャッシュにおける保護キュー(SLRU ポリシーの場合)のサイズが、そのキャッシュ全体のサイズに対して占める比率を表します。

url_scheme_mappers

短縮形またはシンボリックな URL プレフィックスを完全な URL に展開するための設定です。

例:

<url_scheme_mappers>
    <s3>
        <to>https://{bucket}.s3.amazonaws.com</to>
    </s3>
    <gs>
        <to>https://storage.googleapis.com/{bucket}</to>
    </gs>
    <oss>
        <to>https://{bucket}.oss.aliyuncs.com</to>
    </oss>
</url_scheme_mappers>

use_minimalistic_part_header_in_zookeeper

ZooKeeper におけるデータパーツのヘッダーの保存方法を指定します。この設定は MergeTree ファミリーにのみ適用されます。指定方法は次のとおりです。

config.xml ファイルの merge_tree セクションでグローバルに指定する

ClickHouse はサーバー上のすべてのテーブルに対してこの設定を使用します。この設定はいつでも変更できます。既存のテーブルも設定の変更に応じて動作が変わります。

テーブルごとに指定する

テーブルを作成するときに、対応する engine setting を指定します。この設定を持つ既存テーブルの動作は、グローバル設定が変更されても変わりません。

取りうる値

  • 0 — 機能を無効にします。
  • 1 — 機能を有効にします。

use_minimalistic_part_header_in_zookeeper = 1 の場合、replicated テーブルは、単一の znode を用いてデータパーツのヘッダーをコンパクトに保存します。テーブルに多くのカラムが含まれている場合、この保存方法によって ZooKeeper に保存されるデータ量を大幅に削減できます。

注記

use_minimalistic_part_header_in_zookeeper = 1 を適用した後は、この設定をサポートしないバージョンの ClickHouse サーバーにはダウングレードできません。クラスタ内のサーバーで ClickHouse をアップグレードする際は注意してください。すべてのサーバーを一度にアップグレードしないでください。ClickHouse の新バージョンは、テスト環境やクラスタ内の一部のサーバーのみで検証するほうが安全です。

この設定を用いてすでに保存されたデータパーツヘッダーは、以前の(非コンパクトな)表現に戻すことはできません。

user_defined_executable_functions_config

実行可能なユーザー定義関数の設定ファイルへのパスです。

パス:

  • 絶対パス、またはサーバー設定ファイルからの相対パスのいずれかを指定します。
  • パスにはワイルドカードの * および ? を含めることができます。

関連項目:

<user_defined_executable_functions_config>*_function.xml</user_defined_executable_functions_config>

user_defined_path

ユーザー定義のファイルを格納するディレクトリです。SQL のユーザー定義関数 SQL User Defined Functions で使用されます。

<user_defined_path>/var/lib/clickhouse/user_defined/</user_defined_path>

user_directories

次の設定を含む設定ファイルのセクションです:

  • 事前定義されたユーザーが記述された設定ファイルへのパス。
  • SQL コマンドで作成されたユーザーが保存されるフォルダへのパス。
  • SQL コマンドで作成されたユーザーが保存およびレプリケートされる ZooKeeper ノードパス。

このセクションが指定されている場合、users_configaccess_control_path のパスは使用されません。

user_directories セクションには任意の数の項目を含めることができ、項目の順序が優先順位を表します(上にある項目ほど優先されます)。

<user_directories>
    <users_xml>
        <path>/etc/clickhouse-server/users.xml</path>
    </users_xml>
    <local_directory>
        <path>/var/lib/clickhouse/access/</path>
    </local_directory>
</user_directories>

ユーザー、ロール、行ポリシー、QUOTA、プロファイルは ZooKeeper に保存することも可能です。

<user_directories>
    <users_xml>
        <path>/etc/clickhouse-server/users.xml</path>
    </users_xml>
    <replicated>
        <zookeeper_path>/clickhouse/access/</zookeeper_path>
    </replicated>
</user_directories>

memory セクションを定義することもできます。これは情報をディスクに書き込まず、メモリ内にのみ保存することを意味します。また、ldap セクションは情報を LDAP サーバー上に保存することを意味します。

ローカルに定義されていないユーザーのリモートユーザーディレクトリとして LDAP サーバーを追加するには、次の設定を含む単一の ldap セクションを定義します。

SettingDescription
serverldap_servers 設定セクションで定義されている LDAP サーバー名の 1 つ。このパラメータは必須であり、空にはできません。
rolesLDAP サーバーから取得した各ユーザーに割り当てられる、ローカルに定義されたロールのリストを含むセクション。ロールが 1 つも指定されていない場合、ユーザーは認証後にいかなる操作も実行できません。列挙されたロールのいずれかが認証時点でローカルに定義されていない場合、その認証試行は、提供されたパスワードが正しくなかったかのように失敗します。

<ldap>
    <server>my_ldap_server</server>
        <roles>
            <my_local_role1 />
            <my_local_role2 />
        </roles>
</ldap>

user_files_path

ユーザーファイルが格納されるディレクトリです。テーブル関数 file()fileCluster() で使用されます。

<user_files_path>/var/lib/clickhouse/user_files/</user_files_path>

user_scripts_path

ユーザースクリプトファイルを格納するディレクトリです。Executable User Defined Functions(実行可能なユーザー定義関数)で使用されます。詳細は Executable User Defined Functions を参照してください。

<user_scripts_path>/var/lib/clickhouse/user_scripts/</user_scripts_path>

型:

デフォルト値:

users_config

次の内容を含むファイルへのパス:

  • ユーザーの設定
  • アクセス権
  • SETTINGS PROFILE
  • QUOTA の設定

<users_config>users.xml</users_config>

validate_tcp_client_information

クエリパケットを受信した際に、クライアント情報の検証を有効にするかどうかを制御します。

デフォルトでは false です:

<validate_tcp_client_information>false</validate_tcp_client_information>

vector_similarity_index_cache_max_entries

ベクター類似度索引キャッシュのサイズ(エントリ数)。0 の場合は無効です。

vector_similarity_index_cache_policy

ベクトル類似度索引のキャッシュポリシー名。

vector_similarity_index_cache_size

ベクトル類似度索引用キャッシュのサイズ。0 の場合は無効です。

注記

この設定は実行時に変更でき、変更は直ちに反映されます。

vector_similarity_index_cache_size_ratio

ベクトル類似度索引キャッシュにおける、保護キュー(SLRU ポリシーの場合)のサイズを、キャッシュ全体サイズに対する割合で表します。

wait_dictionaries_load_at_startup

この設定は、dictionaries_lazy_loadfalse の場合の挙動を指定します。 (dictionaries_lazy_loadtrue の場合、この設定は影響しません。)

wait_dictionaries_load_at_startupfalse の場合、サーバーは起動時にすべての Dictionary の読み込みを開始し、 その読み込みと並行して接続を受け付けます。 クエリ内で Dictionary が初めて使用されるとき、その Dictionary がまだ読み込まれていなければ、 クエリは Dictionary の読み込みが完了するまで待機します。 wait_dictionaries_load_at_startupfalse に設定すると ClickHouse の起動は速くなりますが、 一部のクエリは(Dictionary の読み込み完了を待つ必要があるため)実行が遅くなる可能性があります。

wait_dictionaries_load_at_startuptrue の場合、サーバーは、いかなる接続も受け付ける前に、 すべての Dictionary の読み込みが(成功・失敗を問わず)完了するまで起動処理中に待機します。

<wait_dictionaries_load_at_startup>true</wait_dictionaries_load_at_startup>

workload_path

すべての CREATE WORKLOAD および CREATE RESOURCE クエリの保存場所として使用されるディレクトリです。デフォルトでは、サーバーのワーキングディレクトリ配下の /workload/ フォルダが使用されます。

<workload_path>/var/lib/clickhouse/workload/</workload_path>

関連項目

workload_zookeeper_path

すべての CREATE WORKLOAD および CREATE RESOURCE クエリの保存に使用される ZooKeeper ノードへのパスです。整合性を保つため、すべての SQL 定義はこの 1 つの znode の値として保存されます。デフォルトでは ZooKeeper は使用されず、定義は ディスク に保存されます。

<workload_zookeeper_path>/clickhouse/workload/definitions.sql</workload_zookeeper_path>

関連項目

zookeeper

ClickHouse が ZooKeeper クラスターと連携するための設定を含みます。ClickHouse は、レプリケーテッドテーブルを使用する場合、レプリカのメタデータを保存するために ZooKeeper を使用します。レプリケーテッドテーブルを使用しない場合は、このセクションの設定は省略できます。

以下の設定はサブタグで構成できます:

SettingDescription
nodeZooKeeper エンドポイント。複数のエンドポイントを設定できます。例:<node index="1"><host>example_host</host><port>2181</port></node>index 属性は、ZooKeeper クラスターへの接続を試みる際のノードの順序を指定します。
session_timeout_msクライアントセッションの最大タイムアウト時間 (ミリ秒)。
operation_timeout_ms1 回の操作の最大タイムアウト時間 (ミリ秒)。
root (optional)ClickHouse サーバーが使用する znode 群のルートとして使用される znode。
fallback_session_lifetime.min (optional)プライマリが利用できないときにフォールバックノードへの ZooKeeper セッション存続期間の最小制限 (ロードバランシング)。秒単位で指定。デフォルト: 3 時間。
fallback_session_lifetime.max (optional)プライマリが利用できないときにフォールバックノードへの ZooKeeper セッション存続期間の最大制限 (ロードバランシング)。秒単位で指定。デフォルト: 6 時間。
identity (optional)要求された znode にアクセスするために ZooKeeper によって要求されるユーザーとパスワード。
use_compression (optional)true に設定すると Keeper プロトコルで圧縮を有効にします。

また、ZooKeeper ノードの選択アルゴリズムを指定できる zookeeper_load_balancing 設定 (オプション) もあります:

Algorithm NameDescription
randomZooKeeper ノードの 1 つをランダムに選択します。
in_order最初の ZooKeeper ノードを選択し、それが利用できない場合は 2 番目、その次へと順に選択します。
nearest_hostnameサーバーのホスト名と最も類似したホスト名を持つ ZooKeeper ノードを選択します。ホスト名は名前のプレフィックスで比較されます。
hostname_levenshtein_distancenearest_hostname と同様ですが、ホスト名をレーベンシュタイン距離に基づいて比較します。
first_or_random最初の ZooKeeper ノードを選択し、それが利用できない場合は残りの ZooKeeper ノードの中からランダムに 1 つ選択します。
round_robin最初の ZooKeeper ノードを選択し、再接続が発生した場合は次のノードを選択します。

設定例

<zookeeper>
    <node>
        <host>example1</host>
        <port>2181</port>
    </node>
    <node>
        <host>example2</host>
        <port>2181</port>
    </node>
    <session_timeout_ms>30000</session_timeout_ms>
    <operation_timeout_ms>10000</operation_timeout_ms>
    <!-- Optional. Chroot suffix. Should exist. -->
    <root>/path/to/zookeeper/node</root>
    <!-- Optional. Zookeeper digest ACL string. -->
    <identity>user:password</identity>
    <!--<zookeeper_load_balancing>random / in_order / nearest_hostname / hostname_levenshtein_distance / first_or_random / round_robin</zookeeper_load_balancing>-->
    <zookeeper_load_balancing>random</zookeeper_load_balancing>
</zookeeper>

関連項目

zookeeper_log

zookeeper_log システムテーブルの設定です。

次の設定はサブタグで構成できます。

The following settings can be configured by sub-tags:

SettingDescriptionDefaultNote
databaseデータベース名。
tableシステムテーブル名。
engineシステムテーブルに対する MergeTree エンジン定義partition_by または order_by が定義されている場合は使用できません。指定しない場合はデフォルトで MergeTree が選択されます
partition_byシステムテーブルに対するカスタムパーティショニングキーシステムテーブルに engine を指定する場合、partition_by パラメータは engine の設定内で直接指定する必要があります
ttlテーブルの TTL を指定します。システムテーブルに engine を指定する場合、ttl パラメータは engine の設定内で直接指定する必要があります
order_byシステムテーブルに対するカスタムソートキーengine が定義されている場合は使用できません。システムテーブルに engine を指定する場合、order_by パラメータは engine の設定内で直接指定する必要があります
storage_policyテーブルに使用するストレージポリシー名(任意)。システムテーブルに engine を指定する場合、storage_policy パラメータは engine の設定内で直接指定する必要があります
settingsMergeTree の動作を制御する追加パラメータ(任意)。システムテーブルに engine を指定する場合、settings パラメータは engine の設定内で直接指定する必要があります
flush_interval_millisecondsメモリ上のバッファからテーブルへデータをフラッシュする間隔。7500
max_size_rowsログの最大行数。未フラッシュのログ数が max_size_rows に達すると、ログがディスクにダンプされます。1048576
reserved_size_rowsログ用に事前確保されるメモリ容量(行数)。8192
buffer_size_rows_flush_threshold行数のしきい値。このしきい値に達すると、バックグラウンドでログをディスクへフラッシュする処理が起動します。max_size_rows / 2
flush_on_crashクラッシュ発生時にログをディスクへダンプするかどうかを設定します。false

<clickhouse>
    <zookeeper_log>
        <database>system</database>
        <table>zookeeper_log</table>
        <flush_interval_milliseconds>7500</flush_interval_milliseconds>
        <ttl>event_date + INTERVAL 1 WEEK DELETE</ttl>
    </zookeeper_log>
</clickhouse>