跳到主要内容
跳到主要内容

日志

该引擎属于 Log 引擎系列。有关 Log 引擎的共同属性及其在 日志引擎系列 文章中的区别,请参阅相关内容。

LogTinyLog 的区别在于,"marks" 的小文件与列文件一起存放。这些标记在每个数据块上写入,并包含指示从何处开始读取文件的偏移量,以便跳过指定数量的行。这使得可以在多个线程中读取表数据。 对于并发数据访问,读取操作可以同时进行,而写入操作会阻塞读取和彼此之间。 Log 引擎不支持索引。同样,如果写入表失败,该表会损坏,读取时会返回错误。Log 引擎适合临时数据、只写表以及测试或演示目的。

创建表

有关 CREATE TABLE 查询的详细描述,请参阅文档。

写入数据

Log 引擎通过将每列写入自己的文件来高效存储数据。对于每个表,Log 引擎将以下文件写入指定的存储路径:

  • <column>.bin:每列的数据文件,包含序列化和压缩的数据。 __marks.mrk:一个标记文件,存储每个插入的数据块的偏移量和行数。标记用于通过允许引擎在读取期间跳过不相关的数据块,从而促进高效的查询执行。

写入过程

当数据写入 Log 表时:

  1. 数据被序列化并压缩成块。
  2. 对于每一列,压缩数据被追加到其相应的 <column>.bin 文件中。
  3. 相应的条目被添加到 __marks.mrk 文件中,以记录新插入数据的偏移量和行数。

读取数据

包含标记的文件允许 ClickHouse 并行读取数据。这意味着 SELECT 查询以不可预测的顺序返回行。使用 ORDER BY 子句对行进行排序。

使用示例

创建表:

插入数据:

我们使用了两个 INSERT 查询在 <column>.bin 文件中创建了两个数据块。

ClickHouse 在选择数据时使用多个线程。每个线程读取一个独立的数据块,并在完成后独立返回结果行。因此,输出中行块的顺序可能与输入中相同块的顺序不匹配。例如:

排序结果(默认升序):