模板
| Input | Output | Alias |
|---|---|---|
| ✔ | ✔ |
描述
对于需要比其他标准格式提供更多自定义服务的情况,Template 格式允许用户指定自己的自定义格式字符串,并为值提供占位符,同时指定数据的转义规则。
它使用以下设置:
| 设置 | 描述 |
|---|---|
format_template_row | 指定包含行格式字符串的文件路径。 |
format_template_resultset | 指定包含行格式字符串的文件路径 |
format_template_rows_between_delimiter | 指定行之间的分隔符,默认为 \n,它在每行之后(除最后一行外)被打印(或期望的)。 |
format_template_row_format | 指定行的格式字符串 行内。 |
format_template_resultset_format | 指定结果集格式字符串 行内。 |
其他格式的一些设置(例如output_format_json_quote_64bit_integers 在使用 JSON 转义时) |
设置和转义规则
format_template_row
设置 format_template_row 指定包含行格式字符串的文件路径,其语法如下:
其中:
| 语法部分 | 描述 |
|---|---|
delimiter_i | 值之间的分隔符($ 符号可以转义为 $$) |
column_i | 要选择或插入的列名或索引(如果为空,则跳过该列) |
serializeAs_i | 列值的转义规则。 |
以下转义规则受支持:
| 转义规则 | 描述 |
|---|---|
CSV, JSON, XML | 与同名格式类似 |
Escaped | 类似于 TSV |
Quoted | 类似于 Values |
Raw | 无转义,类似于 TSVRaw |
None | 无转义规则 - 见下面的说明 |
如果省略转义规则,则使用 None。 XML 仅适合输出。
我们来看一个例子。给定以下格式字符串:
以下值将被打印(如果使用 SELECT)或期望(如果使用 INPUT),
分别在 Search phrase:、 , count:、 , ad price: $ 和 ; 分隔符之间:
s(转义规则为Quoted)c(转义规则为Escaped)p(转义规则为JSON)
例如:
- 如果执行
INSERT,以下行符合期望模板,将值bathroom interior design、2166、$3读入列Search phrase、count、ad price。 - 如果执行
SELECT,则以下行是输出,假设值bathroom interior design、2166、$3已存储在列Search phrase、count、ad price中。
format_template_rows_between_delimiter
设置 format_template_rows_between_delimiter 指定行之间的分隔符,它在每行之后(除最后一行外)被打印(或期望的),默认为 \n。
format_template_resultset
设置 format_template_resultset 指定包含结果集格式字符串的文件的路径。
结果集的格式字符串具有与行的格式字符串相同的语法。 它允许指定前缀、后缀和打印一些附加信息的方式,并包含以下占位符,而不是列名:
data是以format_template_row格式显示的数据行,以format_template_rows_between_delimiter分隔。此占位符必须是格式字符串中的第一个占位符。totals是以format_template_row格式显示的总值行(使用 WITH TOTALS 时)。min是以format_template_row格式显示的最小值行(当极值设置为 1 时)。max是以format_template_row格式显示的最大值行(当极值设置为 1 时)。rows是输出行的总数。rows_before_limit是在没有 LIMIT 的情况下可能存在的最小行数。仅在查询包含 LIMIT 时输出。如果查询包含 GROUP BY,则rows_before_limit_at_least是没有 LIMIT 时的确切行数。time是请求执行时间(以秒为单位)。rows_read是读取的行数。bytes_read是读取的字节数(未压缩)。
占位符 data、 totals、 min 和 max 必须不指定转义规则(或显式指定为 None)。其余占位符可以指定任何转义规则。
如果 format_template_resultset 设置为空字符串,则使用 ${data} 作为默认值。
对于插入查询,格式允许跳过某些列或字段,如果指定前缀或后缀(见例子)。
行内规范
有时很难或不可能在集群中的所有节点上将格式配置(由 format_template_row、 format_template_resultset 设置)部署到一个目录。
此外,格式可能是如此简单,以至于不需要放置在文件中。
对于这些情况,可以使用 format_template_row_format(对于 format_template_row)和 format_template_resultset_format(对于 format_template_resultset),直接在查询中设置模板字符串,而不是作为包含它的文件路径。
格式字符串和转义序列的规则与以下内容相同:
format_template_row在使用format_template_row_format时。format_template_resultset在使用format_template_resultset_format时。
示例用法
让我们看两个关于如何使用 Template 格式的示例,首先用于选择数据,然后用于插入数据。
选择数据
结果:
插入数据
PageViews、 UserID、 Duration 和 Sign 的占位符是表中的列名。行中 Useless field 之后的值以及 \nTotal rows: 之后的值均会被忽略。
输入数据中的所有分隔符必须严格等于指定格式字符串中的分隔符。
行内规范
厌倦了手工格式化 markdown 表格吗?在这个例子中,我们将看看如何使用 Template 格式和行内规范设置来完成一个简单的任务 - 从 system.formats 表中 SELECT 一些 ClickHouse 格式的名称,并将其格式化为 markdown 表格。这可以通过使用 Template 格式以及设置 format_template_row_format 和 format_template_resultset_format 轻松实现。
在之前的示例中,我们在单独的文件中指定了结果集和行格式字符串,并使用 format_template_resultset 和 format_template_row 设置分别指定这些文件的路径。在这里,我们将进行行内设置,因为我们的模板很简单,仅由几个 | 和 - 组成,以制作 markdown 表格。我们将使用设置 format_template_resultset_format 来指定我们的结果集模板字符串。在 ${data} 之前,我们添加了 |ClickHouse Formats|\n|---|\n 来制作表头。我们使用设置 format_template_row_format 来指定我们的行模板字符串 |`{0:XML}`|。Template 格式将以给定格式将我们的行插入到占位符 ${data} 中。在这个例子中,我们只有一列,但如果你想添加更多列,可以通过在行模板字符串中添加 {1:XML}、 {2:XML}... 等来完成,选择适当的转义规则。在这个例子中,我们选择了转义规则 XML。
看看吧!我们节省了手动添加所有那些 | 和 - 的麻烦,以制作 markdown 表格: