跳到主要内容
跳到主要内容

配置文件

备注

请注意,基于 XML 的设置配置文件和配置文件目前在 ClickHouse Cloud 中不受支持。因此,在 ClickHouse Cloud 中,您将找不到 config.xml 文件。相反,您应该使用 SQL 命令通过设置配置文件来管理设置。

有关更多详细信息,请参见 "配置设置"

ClickHouse 服务器可以使用 XML 或 YAML 语法的配置文件进行配置。 在大多数安装类型中,ClickHouse 服务器默认的配置文件为 /etc/clickhouse-server/config.xml,但您也可以在服务器启动时使用命令行选项 --config-file-C 手动指定配置文件的位置。 附加的配置文件可以放置在相对于主配置文件的目录 config.d/ 中,例如 /etc/clickhouse-server/config.d/。 此目录中的文件与主配置文件在配置应用于 ClickHouse 服务器之前会进行合并。 配置文件按字母顺序合并。 为了简化更新和提高模块化,最佳实践是保持默认的 config.xml 文件未修改,并将其他自定义内容放入 config.d/ 中。 ClickHouse keeper 配置位于 /etc/clickhouse-keeper/keeper_config.xml 中。 因此,附加文件需要放置在 /etc/clickhouse-keeper/keeper_config.d/ 中。

可以混合使用 XML 和 YAML 配置文件,例如,您可以有一个主配置文件 config.xml 和附加配置文件 config.d/network.xmlconfig.d/timezone.yamlconfig.d/keeper.yaml。 不支持在单个配置文件中混合使用 XML 和 YAML。 XML 配置文件应使用 <clickhouse>...</clickhouse> 作为顶级标签。 在 YAML 配置文件中,如果 clickhouse: 缺失,则解析器会自动插入它。

合并配置

两个配置文件(通常是主配置文件和来自 config.d/ 的其他配置文件)按以下方式合并:

  • 如果一个节点(即指向元素的路径)在两个文件中出现并且没有属性 replaceremove,则将其包含在合并的配置文件中,并递归包含和合并两个节点的子节点。
  • 如果其中一个节点包含属性 replace,则将其包含在合并的配置文件中,但仅包含具有属性 replace 的节点的子节点。
  • 如果其中一个节点包含属性 remove,则该节点不包含在合并的配置文件中(如果已经存在,则删除)。

示例:

生成合并的配置文件:

通过环境变量和 ZooKeeper 节点进行替换

要指定元素的值应该被环境变量的值替换,可以使用属性 from_env

$MAX_QUERY_SIZE = 150000 的示例:

这等同于

相同的操作也适用于 from_zk(ZooKeeper 节点):

这等同于

默认值

带有 from_envfrom_zk 属性的元素可以额外包含属性 replace="1"(后者必须出现在 from_env/from_zk 之前)。 在这种情况下,元素可以定义默认值。 如果设置了环境变量或 ZooKeeper 节点的值,该元素将采用该值,否则采用默认值。

之前的示例但假设 MAX_QUERY_SIZE 未设置:

结果为:

使用文件内容进行替换

也可以通过文件内容替代配置的部分。这可以通过两种方式完成:

  • 替换值: 如果一个元素具有属性 incl,其值将被引用文件的内容替换。默认情况下,替换文件的路径为 /etc/metrika.xml。这可以在服务器配置中的 include_from 元素中更改。替换值在该文件中的 /clickhouse/substitution_name 元素中指定。如果在 incl 中指定的替换不存在,则记录在日志中。要防止 ClickHouse 记录缺少的替换,可以指定属性 optional="true"(例如,配置 )。

  • 替换元素: 如果要用替换完全替代元素,请使用 include 作为元素名称。元素名称 include 可以与属性 from_zk = "/path/to/node" 结合使用。在这种情况下,元素值将被 /path/to/node 上的 ZooKeeper 节点的内容所替代。如果您将整个 XML 子树存储为 Zookeeper 节点,它将被完整插入到源元素中。

示例:

如果您希望将替代内容与现有配置合并而不是添加,可以使用属性 merge="true",例如:<include from_zk="/some_path" merge="true">。在这种情况下,现有的配置将与替代内容合并,并且现有的配置设置将被替代中的值替换。

加密和隐藏配置

您可以使用对称加密来加密配置元素,例如明文密码或私钥。 为此,首先配置 加密编解码器,然后将属性 encrypted_by 与加密编解码器的名称作为值添加到要加密的元素中。

与属性 from_zkfrom_envincl 或元素 include 不同,没有替换(即解密加密值)将在预处理文件中执行。 解密仅在运行时在服务器进程中发生。

示例:

属性 from_envfrom_zk 也可以应用于 encryption_codecs

加密密钥和加密值可以在任何配置文件中定义。

示例 config.xml

示例 users.xml

要加密值,您可以使用(示例)程序 encrypt_decrypt

示例:

即使在加密配置元素中,加密元素仍会出现在预处理的配置文件中。 如果这对您的 ClickHouse 部署是个问题,我们建议两种替代方案:要么将预处理文件的文件权限设置为 600,要么使用属性 hide_in_preprocessed

示例:

用户设置

config.xml 文件可以指定一个单独的配置文件,其中包含用户设置、配置文件和配额。相对路径设置在 users_config 元素中。默认情况下,它为 users.xml。如果省略 users_config,则用户设置、配置文件和配额直接在 config.xml 中指定。

用户配置可以拆分成类似于 config.xmlconfig.d/ 的单独文件。 目录名称定义为 users_config 设置的名称(不带 .xml 后缀)与 .d 连接。 目录 users.d 是默认的,因为 users_config 默认值为 users.xml

请注意,配置文件首先会 合并,并考虑设置,然后再处理包含的内容。

XML 示例

例如,您可以为每个用户拥有单独的配置文件,如下所示:

YAML 示例

这里您可以看到以 YAML 格式编写的默认配置:config.yaml.example

YAML 和 XML 格式在 ClickHouse 配置方面有一些不同之处。以下是编写 YAML 格式配置的一些提示。

具有文本值的 XML 标签由 YAML 键值对表示

对应的 XML:

嵌套的 XML 节点由 YAML 映射表示:

对应的 XML:

要多次创建相同的 XML 标签,请使用 YAML 序列:

对应的 XML:

要提供 XML 属性,您可以使用带有 @ 前缀的属性键。请注意,@ 是 YAML 标准保留,因此必须用双引号包裹:

对应的 XML:

在 YAML 序列中也可以使用属性:

对应的 XML:

上述语法不允许将带有 XML 属性的 XML 文本节点表示为 YAML。可以使用 #text 属性键来达成这一特殊情况:

对应的 XML:

实施细节

对于每个配置文件,服务器在启动时还会生成 file-preprocessed.xml 文件。这些文件包含所有完成的替换和覆盖,供参考使用。如果在配置文件中使用了 ZooKeeper 替换,但在服务器启动时 ZooKeeper 不可用,则服务器会从预处理文件加载配置。

服务器跟踪配置文件的更改,以及在进行替换和覆盖时使用的文件和 ZooKeeper 节点,并实时重新加载用户和集群的设置。这意味着您可以在不重新启动服务器的情况下修改集群、用户及其设置。