使用 Amazon DocumentDB 监控 CloudWatch

Amazon DocumentDB(与 MongoDB 兼容)与 Amazon CloudWatch 集成,因此您可以为您的集群收集和分析运行指标。您可以使用 CloudWatch 控制台、Amazon DocumentDB控制台、AWS Command Line Interface (AWS CLI) 或 CloudWatch API 来监控这些指标。

CloudWatch 还让您设置警报,以便在指标值超过您指定的阈值时,您可以收到通知。如果超过阈值,您甚至可以设置 Amazon CloudWatch Events 事件来采取纠正措施。有关使用 CloudWatch 和警报的更多信息,请参阅 Amazon CloudWatch 文档.

Amazon DocumentDB 指标

要监控 Amazon DocumentDB 集群和实例的运行状况和性能,您可以在 Amazon DocumentDB 控制台中查看以下指标。

指标描述
Resource Utilization
BackupRetentionPeriodStorageUsed用于支持 Amazon DocumentDB 的保留时段内的时间点还原功能的备份存储总量(以 GiB 为单位)。包含在 TotalBackupStorageBilled 指标报告的总数中。针对每个 Amazon DocumentDB 集群单独计算。
ChangeStreamLogSize集群用于存储变更流日志的存储量(以兆字节为单位)。此值是集群总存储量的子集 (VolumeBytesUsed),将影响集群的成本。有关存储定价信息,请参阅 Amazon DocumentDB 产品页面. 变更流日志大小取决于集群上发生了多少更改以及变更流日志的保留时间。有关变更流的更多信息,请参阅将变更流与 Amazon DocumentDB 结合使用.
CPUUtilization实例占用的 CPU 百分比。
DatabaseConnections在实例上打开的连接数,采用一分钟的频率。
DatabaseConnectionsMax一分钟内在实例上打开的数据库连接的最大数量。
DatabaseCursors在实例上按照一分钟的频率打开的游标的数量。
DatabaseCursorsMax一分钟内对实例的最大打开游标数。
DatabaseCursorsTimedOut在一分钟内超时的光标的数量。
FreeableMemory随机存取内存的可用量 (以字节为单位)。
FreeLocalStorage

此指标报告每个实例中可用于临时表和日志的存储量。此值取决于实例类。您可通过为实例选择较大的实例类来增加对实例可用的存储空间量。

LowMemThrottleQueueDepth

由于以一分钟的频率获取的可用内存不足而受限制的请求的队列深度。

LowMemThrottleMaxQueueDepth

由于一分钟内可用内存不足而受限制的请求的最大队列深度。

LowMemNumOperationsThrottled

由于一分钟内可用内存不足而受限制的请求数。

SnapshotStorageUsed给定 Amazon DocumentDB 集群的所有快照在其备份保留时段外消耗的备份存储总量(以 GiB 为单位)。包含在 TotalBackupStorageBilled 指标报告的总数中。针对每个 Amazon DocumentDB 集群单独计算。
SwapUsage实例上使用的交换空间的大小。
TotalBackupStorageBilled为给定 Amazon DocumentDB 集群计费时所针对的备份存储总量(以 GiB 为单位)。包含由 BackupRetentionPeriodStorageUsedSnapshotStorageUsed 指标度量的备份存储。针对每个 Amazon DocumentDB 集群单独计算。
TransactionsOpen在实例上按照一分钟的频率打开的事务数。
TransactionsOpenMax在一分钟内在实例上打开的事务的最大数量。
VolumeBytesUsed您的集群使用的存储量(以字节为单位)。此值将影响集群的成本。有关定价信息,请参阅 Amazon DocumentDB 产品页面.
Latency
DBClusterReplicaLagMaximum数据库集群中主实例和每个 Amazon DocumentDB实例之间的最大滞后量(以毫秒为单位)。
DBClusterReplicaLagMinimum集群中主实例和每个副本实例之间的最小滞后量(以毫秒为单位)。
DBInstanceReplicaLag在从主实例向副本实例复制更新时的滞后总量(以毫秒为单位)。
ReadLatency每个磁盘 I/O 操作所需的平均时间。
WriteLatency每个磁盘 I/O 操作所需的平均时间(以毫秒为单位)。
Operations
DocumentsDeleted一分钟时间段内删除的文档数量。
DocumentsInserted一分钟内插入的文档数量。
DocumentsReturned一分钟内返回的文档数量。
DocumentsUpdated一分钟时段内的更新文档的数量。
OpcountersCommand以一分钟为间隔发出的命令数。
OpcountersDelete1 分钟周期内发出的删除操作的数量。
OpcountersGetmore一分钟内发出的 getmores 的数量。
OpcountersInsert以一分钟为间隔发布的插入操作数。
OpcountersQuery在一分钟周期内发出的查询的数量。
OpcountersUpdate以一分钟为间隔发布的更新操作数。
TransactionsStarted在一分钟内在实例上启动的事务数。
TransactionsCommitted在一分钟内在实例上提交的事务数。
TransactionsAborted一分钟内在实例上中止的事务数。
TTLDeletedDocumentsTTLMonitor 在一分钟内删除的文档数。
Throughput
NetworkReceiveThroughput集群中每个实例从客户端接收的网络吞吐量(以每秒字节数为单位)。此吞吐量不包括集群中的实例与集群卷之间的网络流量。
NetworkThroughputAmazon DocumentDB集群中每个实例从客户端接收和发送到客户端的网络吞吐量(以每秒字节数为单位)。此吞吐量不包括集群中的实例与集群卷之间的网络流量。
NetworkTransmitThroughput集群中每个实例发送到客户端的网络吞吐量(以每秒字节数为单位)。此吞吐量不包括集群中的实例与集群卷之间的网络流量。
ReadIOPS每秒平均磁盘读取 I/O 操作数。Amazon DocumentDB 每隔一分钟会分别报告读取和写入 IOPS。
ReadThroughput每秒从磁盘读取的平均字节数。
VolumeReadIOPs集群卷中计费读取 I/O 操作的平均数量,每隔 5 分钟报告一次。计费读取操作数是在集群卷级别计算的,由集群中的所有实例聚合而来,然后每隔 5 分钟报告一次。此值是通过采用 5 分钟以上的读取操作数指标的值计算得来的。您可通过采用计费读取操作数指标的值并除以 300 秒来确定每秒的计费读取操作数。例如,如果计费读取操作返回 13,686,则每秒的计费读取操作数为 45 (13,686 / 300 = 45.62)。您累积请求不在缓冲区缓存中因而必须从存储加载的数据库页的查询的计费读取操作数。您可能看到计费读取操作数出现峰值,因为查询结果是从存储中读取然后加载到缓冲区缓存中的。
VolumeWriteIOPs

集群卷中计费写入 I/O 操作的平均数量,每隔 5 分钟报告一次。计费写入操作数是在集群卷级别计算的,由集群中的所有实例聚合而来,然后每隔 5 分钟报告一次。此值是通过采用 5 分钟以上的写入操作数指标的值计算得来的。您可通过采用计费写入操作数指标的值并除以 300 秒来确定每秒的计费写入操作数。例如,如果计费写入操作返回 13686,则每秒的计费写入操作数为 45 (13686 / 300 = 45.62)。

请注意,VolumeReadIOP 和 VolumeWriteIOP 指标由 DocumentDB 存储层计算,它包括主实例和副本实例执行的 IO。该数据每 20-30 分钟汇总一次,然后每隔 5 分钟报告一次,从而为该时间段内的指标发出相同的数据点。如果您正在寻找的指标与插入操作在 1 分钟间隔内关联,则可使用实例级别 WriteIOPS 指标。该指标在 Amazon DocumentDB 主实例的监控选项卡中可用。

WriteIOPS每秒平均磁盘写入 I/O 操作数。每分钟分别报告一次读取和写入 IOPS。
WriteThroughput每秒写入磁盘的平均字节数。
System
BufferCacheHitRatio缓冲区缓存提供的请求的百分比。
DiskQueueDepth对分布式存储卷的并发写入请求数。
EngineUptime实例已运行的时间长度(以秒为单位)。
IndexBufferCacheHitRatio缓冲区缓存提供的索引请求的百分比。在删除索引、集合或数据库后,您可能会看到指标的峰值大于 100%。这将在 60 秒后自动更正。此限制将在未来的补丁更新中得到修复。
T3 Instance Metrics
CPUCreditUsage在测量周期内花费的 CPU 积分数。
CPUCreditBalance实例累积的 CPU 积分数量。在 CPU 突增以及 CPU 积分的花费速度比获得速度快时,该余额将用完。
CPUSurplusCreditBalance在 CPUCreditBalance 值为零时,用于保持 CPU 性能而花费的超额 CPU 积分数。
CPUSurplusCreditsCharged超过在 24 小时内可获得的 CPU 积分的最大数目的超额 CPU 积分数,因此会产生额外的费用。有关更多信息,请参阅监控 CPU 积分

查看 CloudWatch 数据

您可以借助 Amazon CloudWatch 控制台、CloudWatch控制台、Amazon DocumentDB (AWS Command Line Interface) 或 AWS CLI API 查看 CloudWatch 数据。

要使用 CloudWatch 管理控制台查看 Amazon DocumentDB 指标,请完成以下步骤。

  1. 通过以下网址登录 AWS 管理控制台并打开 Amazon DocumentDB 控制台:https://console.aws.amazon.com/docdb

  2. 在导航窗格中,选择 Clusters.

    提示

    如果您在屏幕左侧没有看到导航窗格,请在页面左上角选择菜单图标 (使用 Amazon DocumentDB 监控 CloudWatch - 图1)。

  3. 在“Clusters (集群)”导航窗格中,您将看到 Cluster Identifier (集群标识符) 列。您的实例将在集群下列出,与以下屏幕截图类似。

    使用 Amazon DocumentDB 监控 CloudWatch - 图2

  4. 从实例列表中,选择要获取其指标的实例的名称。

  5. 在生成的实例摘要页面中,选择 Monitoring (监控) 选项卡以查看 Amazon DocumentDB 实例的指标的图形表示。由于必须为每个指标生成一个图表,可能需要几分钟才能填充 CloudWatch 图表。

    下图显示了 CloudWatch 控制台中两个 Amazon DocumentDB 指标的图形化表示,即 WriteIOPSReadIOPS

    ![

    1. 控制台中的 18 CloudWatch 指标中的两个,writeiops readiopsAmazon DocumentDB
    2. ](/projects/DocumentDB-20201111-zh/daa7091247073754a2028d0ebcf9640a.png)

要使用 CloudWatch 管理控制台查看 CloudWatch 指标,请完成以下步骤。

  1. 登录 AWS 管理控制台,并通过以下网址打开 Amazon DocumentDB 控制台:https://console.aws.amazon.com/cloudwatch

  2. 在导航窗格中,选择 Metrics. 然后,从服务名称列表中,选择 DocDB

  3. 选择指标维度(例如,Cluster Metrics (集群指标))。

  4. All metrics 选项卡显示 DocDB 中该维度的所有指标。

    1. 要对表进行排序,请使用列标题。

    2. 要为指标绘制图表,请选中该指标旁的复选框。要选择所有指标,请选中表的标题行中的复选框。

    3. 要按指标进行筛选,请将鼠标指针悬停在指标名称上,然后选择指标名称旁边的下拉箭头。然后,选择 Add to search (添加到搜索),如下图所示。

      ![

      1. 通过将鼠标悬停在指标上并选择“Add to search”(添加到搜索) 来筛选指标。
      2. ](/projects/DocumentDB-20201111-zh/524d34d760144154a293ffbbd3389281.png)

要查看 CloudWatch 的 Amazon DocumentDB 数据,请使用带以下参数的 CloudWatch get-metric-statistics 操作。

Parameters

  • --namespace — 必需。需要其 CloudWatch 指标的服务命名空间。对于 Amazon DocumentDB,必须为 AWS/DocDB.

  • --metric-name — 必需。需要其数据的指标的名称。

  • --start-time — 必需。用于确定要返回的第一个数据点的时间戳。

    包含指定的值;结果包括具有指定时间戳的数据点。时间戳必须采用 ISO 8601 UTC 格式(例如,2016-10-03T23:00:00Z)。

  • --end-time — 必需。用于确定要返回的最后一个数据点的时间戳。

    包含指定的值;结果包括具有指定时间戳的数据点。时间戳必须采用 ISO 8601 UTC 格式(例如,2016-10-03T23:00:00Z)。

  • --period — 必需。返回的数据点的粒度(以秒为单位)。对于具有常规精度的指标,期间可以短到一分钟(60 秒),并且必须为 60 的倍数。对于以小于一分钟的间隔收集的高精度指标,期间可以是 1、5、10、30、60 或 60 的任意倍数。

  • --dimensions — 可选。如果指标包含多个维度,则必须包含每个维度的值。CloudWatch 将每个唯一的维度组合视为一个单独的指标。如果未发布某个特定的维度组合,则无法检索该组合的统计数据。您必须指定创建指标时使用的同一维度。

  • --statistics — 可选。百分位数之外的指标统计数据。对于百分位数统计数据,请使用 ExtendedStatistics. 调用 GetMetricStatistics 时,必须指定 StatisticsExtendedStatistics,但不能同时指定两者。

    允许的值:

    • SampleCount

    • Average

    • Sum

    • Minimum

    • Maximum

  • --extended-statistics — 可选。percentile 统计数据。指定介于 p0.0 到 p100 之间的值。调用 GetMetricStatistics 时,必须指定 StatisticsExtendedStatistics,但不能同时指定两者。

  • --unit — 可选。给定指标的单位。可以用多个单位报告指标。如果不提供单位,将返回所有单位。如果您仅指定指标不报告的单位,调用的结果将为空。

    可能的值:

    • Seconds

    • Microseconds

    • Milliseconds

    • Bytes

    • Kilobytes

    • Megabytes

    • Gigabytes

    • Terabytes

    • Bits

    • Kilobytes

    • Megabits

    • Gigabits

    • Terabits

    • Percent

    • Count

    • Bytes/Second

    • Kilobytes/Second

    • Megabytes/Second

    • Gigabytes/Second

    • Terabytes/Second

    • Bits/Second

    • Kilobits/Second

    • Megabits/Second

    • Gigabits/Second

    • Terabits/Second

    • Count/Second

    • None

以下示例查找 2 小时时段的最大 CPUUtilization,每隔 60 秒采样一次。

对于 Linux、macOS 或 Unix:

  1. aws cloudwatch get-metric-statistics \
  2. --namespace AWS/DocDB \
  3. --dimensions \
  4. Name=DBInstanceIdentifier,Value=docdb-2019-01-09-23-55-38 \
  5. --metric-name CPUUtilization \
  6. --start-time 2019-02-11T05:00:00Z \
  7. --end-time 2019-02-11T07:00:00Z \
  8. --period 60 \
  9. --statistics Maximum

对于 Windows:

  1. aws cloudwatch get-metric-statistics ^
  2. --namespace AWS/DocDB ^
  3. --dimensions ^
  4. Name=DBInstanceIdentifier,Value=docdb-2019-01-09-23-55-38 ^
  5. --metric-name CPUUtilization ^
  6. --start-time 2019-02-11T05:00:00Z ^
  7. --end-time 2019-02-11T07:00:00Z ^
  8. --period 60 ^
  9. --statistics Maximum

此操作的输出类似于以下内容:

  1. {
  2. "Label": "CPUUtilization",
  3. "Datapoints": [
  4. {
  5. "Unit": "Percent",
  6. "Maximum": 4.49152542374361,
  7. "Timestamp": "2019-02-11T05:51:00Z"
  8. },
  9. {
  10. "Unit": "Percent",
  11. "Maximum": 4.25000000000485,
  12. "Timestamp": "2019-02-11T06:44:00Z"
  13. },
  14. ********* some output omitted for brevity *********
  15. {
  16. "Unit": "Percent",
  17. "Maximum": 4.33333333331878,
  18. "Timestamp": "2019-02-11T06:07:00Z"
  19. }
  20. ]
  21. }

Amazon DocumentDB 维度

Amazon DocumentDB的指标由账户或操作的值来限定。您可以使用 CloudWatch 控制台来检索由下表中的任意维度筛选的 Amazon DocumentDB数据。

维度描述
DBClusterIdentifier筛选您为特定 Amazon DocumentDB集群请求的数据。
DBClusterIdentifier, Role筛选您为特定 Amazon DocumentDB集群请求的数据,并按实例角色 (WRITER/READER) 聚合指标。例如,您可以聚合属于某个集群的所有 READER 实例的指标。
DBInstanceIdentifier筛选您为特定数据库实例请求的数据。

监控对手

计数器指标对于空闲集群为非零值(通常为 ~50)。这是因为 Amazon DocumentDB 执行定期运行状况检查、内部操作和指标收集任务。

监控数据库连接

当您使用 db.runCommand( { serverStatus: 1 }) 等数据库引擎命令来查看连接数时,您最多可能会看到比通过 DatabaseConnections 在 CloudWatch. 中看到的数量多 10 个的连接。出现这种情况的原因是 Amazon DocumentDB 执行定期运行状况检查和指标收集任务,而这些任务不在 DatabaseConnections 中考虑到。DatabaseConnections 仅表示客户发起的连接。