跳转到主内容
跳转到主内容

ClickHouse Cloud 控制台中的监控

ClickHouse Cloud 中的服务内置监控组件，可为用户提供仪表板和通知。默认情况下，Cloud 控制台中的所有用户都可以访问这些仪表板。

仪表板​

服务健康​

“服务健康”仪表板可用于监控服务的整体健康状况。ClickHouse Cloud 会从系统表中抓取并存储此仪表板显示的指标，以便在服务闲置时也能查看。

资源利用率​

Infrastructure 仪表板详细展示了 ClickHouse 进程使用的资源情况。ClickHouse Cloud 会从系统表中抓取并存储此仪表板显示的指标，以便在服务处于闲置状态时仍可查看这些指标。

内存和 CPU​

Allocated CPU 和 Allocated Memory 图表显示服务中每个副本可用的总计算资源。这些资源分配可通过 ClickHouse Cloud 的扩缩容功能进行调整。

Memory Usage 和 CPU Usage 图表用于估算每个副本中 ClickHouse 进程实际使用的 CPU 和内存量，其中既包括查询，也包括合并等后台进程。

性能下降

如果内存或 CPU 使用率接近已分配的内存或 CPU，您可能会开始遇到性能下降。为解决此问题，我们建议：

  • 优化查询
  • 调整表引擎的分区方式
  • 使用扩缩容为服务增加更多计算资源

以下是这些图表中显示的对应 system table 指标：

图表对应指标名称聚合说明
已分配内存CGroupMemoryTotal最大值
已分配 CPUCGroupMaxCPU最大值
已用内存MemoryResident最大值
已用 CPU系统 CPU 指标最大值通过 Prometheus endpoint 获取的 ClickHouseServer_UsageCores

数据传输​

图表显示 ClickHouse Cloud 的数据流入和流出情况。更多信息，请参阅网络数据传输。

高级仪表板​

此仪表板是内置高级可观测性仪表板的修改版，其中每条序列表示各副本的指标。该仪表板可用于监控和故障排查 ClickHouse 相关问题。

ClickHouse Cloud 中的高级仪表板
注意

ClickHouse Cloud 会从系统表中抓取并存储此仪表板显示的指标，因此即使服务已空闲，也仍可查看这些指标。访问这些指标不会向底层服务发出查询，也不会唤醒空闲服务。

下表将高级仪表板中的每个图表映射到其对应的 ClickHouse 指标名称、系统表来源和聚合类型：

图表对应的 ClickHouse 指标名称系统表聚合类型
查询数/秒ProfileEvent_Querymetric_logSum / bucketSizeSeconds
运行中的查询CurrentMetric_Querymetric_logAvg
运行中的合并CurrentMetric_Mergemetric_logAvg
选中字节数/秒ProfileEvent_SelectedBytesmetric_logSum / bucketSizeSeconds
IO 等待ProfileEvent_OSIOWaitMicrosecondsmetric_logSum / bucketSizeSeconds
S3 读取等待ProfileEvent_ReadBufferFromS3Microsecondsmetric_logSum / bucketSizeSeconds
S3 读取错误数/秒ProfileEvent_ReadBufferFromS3RequestsErrorsmetric_logSum / bucketSizeSeconds
CPU 等待ProfileEvent_OSCPUWaitMicrosecondsmetric_logSum / bucketSizeSeconds
OS CPU 使用率 (用户态，归一化)OSUserTimeNormalizedasynchronous_metric_log
OS CPU 使用率 (内核态，归一化)OSSystemTimeNormalizedasynchronous_metric_log
从磁盘读取ProfileEvent_OSReadBytesmetric_logSum / bucketSizeSeconds
从文件系统读取ProfileEvent_OSReadCharsmetric_logSum / bucketSizeSeconds
内存 (跟踪值，字节)CurrentMetric_MemoryTrackingmetric_log
MergeTree parts 总数TotalPartsOfMergeTreeTablesasynchronous_metric_log
单个分区的最大 parts 数MaxPartCountForPartitionasynchronous_metric_log
从 S3 读取ProfileEvent_ReadBufferFromS3Bytesmetric_logSum / bucketSizeSeconds
文件系统缓存大小CurrentMetric_FilesystemCacheSizemetric_log
磁盘 S3 写请求数/秒ProfileEvent_DiskS3PutObject + ProfileEvent_DiskS3UploadPart + ProfileEvent_DiskS3CreateMultipartUpload + ProfileEvent_DiskS3CompleteMultipartUploadmetric_logSum / bucketSizeSeconds
磁盘 S3 读请求数/秒ProfileEvent_DiskS3GetObject + ProfileEvent_DiskS3HeadObject + ProfileEvent_DiskS3ListObjectsmetric_logSum / bucketSizeSeconds
FS 缓存命中率sum(ProfileEvent_CachedReadBufferReadFromCacheBytes) / (sum(ProfileEvent_CachedReadBufferReadFromCacheBytes) + sum(ProfileEvent_CachedReadBufferReadFromSourceBytes))metric_log
页缓存命中率greatest(0, (sum(ProfileEvent_OSReadChars) - sum(ProfileEvent_OSReadBytes)) / (sum(ProfileEvent_OSReadChars) + sum(ProfileEvent_ReadBufferFromS3Bytes)))metric_log
网络接收字节数/秒NetworkReceiveBytesasynchronous_metric_logSum / bucketSizeSeconds
网络发送字节数/秒NetworkSendBytesasynchronous_metric_logSum / bucketSizeSeconds
并发 TCP 连接数CurrentMetric_TCPConnectionmetric_log
并发 MySQL 连接数CurrentMetric_MySQLConnectionmetric_log
并发 HTTP 连接数CurrentMetric_HTTPConnectionmetric_log

有关每个可视化及如何使用它们进行故障排查的详细信息，请参阅高级仪表板文档。

查询洞察​

查询洞察 功能通过各种可视化和表格，让 ClickHouse 内置的查询日志更易于使用。ClickHouse 的 system.query_log 表是查询优化、调试以及监控整个集群健康状态和性能的关键信息来源。

选择一个服务后，左侧边栏中的 监控 导航项会展开，并显示 查询洞察 子项：

Query Insights UI Overview

顶层指标​

顶部的统计框显示所选时间段内的基础查询指标。其下方的时间序列图表按查询类型 (select、insert、other) 细分展示查询量、延迟和错误率。延迟 chart 可调整为显示 p50、p90 和 p99 延迟：

Query Insights latency chart

最近查询​

表格会显示所选时间窗口内按归一化查询哈希和用户分组的查询日志条目。可按任意可用字段对最近查询进行筛选和排序，也可将表格配置为显示或隐藏其他字段，例如表、p90 和 p99 延迟：

查询洞察中的最近查询表

查询下钻​

在最近查询表中选择某个查询后，会打开一个 flyout，其中包含该查询特有的指标和信息：

查询洞察 UI 查询下钻

Query info 选项卡中的所有指标都是聚合指标，但我们也可以通过选择 Query history 选项卡来查看各次单独执行的指标：

查询洞察 UI 查询信息

在此面板中，每次查询执行对应的 Settings 和 Profile Events 项都可以展开，以显示更多信息。