コンテンツにスキップ

Huawei Cloud DCS(Redis)

Huawei Cloud DCS のメトリクスデータを収集

設定

Func のインストール

Guance の統合 - 拡張 - マネージド版 Func を有効化することを推奨します。前提条件はすべて自動でインストールされるため、そのままスクリプトのインストールを続けてください

Func を自前でデプロイする場合はFunc の自前デプロイを参照してください

インストールスクリプト

注意:要件を満たす Huawei Cloud AK を事前に用意してください。手早く進める場合は、全体読み取り専用権限 Tenant Guest をそのまま付与してもかまいません。

マネージド版の有効化スクリプト

  1. Guance コンソールにログインします
  2. 【統合】メニューをクリックし、【クラウドアカウント管理】を選択します
  3. 【クラウドアカウントを追加】をクリックし、【Huawei Cloud】を選択して、画面に必要な情報を入力します。すでにクラウドアカウント情報を設定済みの場合は、この手順をスキップします
  4. 【テスト】をクリックします。テスト成功後に【保存】をクリックします。テストに失敗した場合は、関連設定が正しいか確認してから再度テストしてください
  5. 【クラウドアカウント管理】一覧で、追加したクラウドアカウントを確認できます。該当のクラウドアカウントをクリックして詳細ページに入ります
  6. クラウドアカウント詳細ページの【統合】ボタンをクリックし、未インストール 一覧で Huawei Cloud DCS を見つけて、【インストール】をクリックするとインストール画面が表示されます

手動有効化スクリプト

  1. Func コンソールにログインし、【スクリプトマーケット】をクリックして Guance スクリプトマーケットに入り、integration_huaweicloud_dcs: Huawei Cloud DCS メトリクス収集 integration_huaweicloud_dcs_slowlog: Huawei Cloud DCS スローログ収集 を検索します

  2. 【インストール】をクリックし、対応するパラメーターを入力します。Huawei Cloud AK、SK、アカウント名

  3. 【起動スクリプトをデプロイ】をクリックすると、システムが自動で Startup スクリプトセットを作成し、対応する起動スクリプトを自動設定します

  4. 有効化後、「管理 / 自動トリガー設定」で対応する自動トリガー設定を確認できます。【実行】をクリックすると、定期実行を待たずにすぐ 1 回実行できます。少し待ってから、実行タスクの記録と対応するログを確認できます

検証

  1. 「管理 / 自動トリガー設定」で、対応するタスクに自動トリガー設定が存在するか確認し、あわせてタスク記録とログを見て異常がないか確認します
  2. Guance の「インフラストラクチャ - リソースディレクトリ」で資産情報が存在するか確認します
  3. Guance の「メトリクス」で対応する監視データがあるか確認します
  4. Guance の「ログ」で対応するログデータがあるか確認します

メトリクス

Huawei Cloud DCS の監視メトリクスは、設定によりさらに多くのメトリクスを収集できます。Huawei Cloud DCS メトリクス詳細

Redis 3.0 インスタンスの監視メトリクス

img説明:

  • DCS Redis 3.0 はサポート終了・販売停止のため、Redis 4.0 以降の使用を推奨します。
  • メトリクスのディメンションはディメンションを参照してください。
メトリクス ID メトリクス名 メトリクスの意味 値の範囲 測定対象 監視周期(元のメトリクス)
cpu_usage CPU 使用率 このメトリクスは、統計周期内の測定対象の CPU 使用率を複数回サンプリングし、その中の最大値を表します。単位:%。単一ノード/主従インスタンスの場合、このメトリクスはマスターノードの CPU 値です。Proxy クラスターインスタンスの場合、このメトリクスは各 Proxy ノードの平均値です。 0-100% Redis インスタンス(単一ノード/主従/クラスター) 1 分
memory_usage メモリ使用率 このメトリクスは、測定対象のメモリ使用率を集計します。単位:%。注意:メモリ使用率の集計では予約済みメモリを差し引きます。 0-100% Redis インスタンス(単一ノード/主従/クラスター) 1 分
net_in_throughput ネットワーク入力スループット このメトリクスは、ネットワークポートの 1 秒あたり平均入力トラフィックを集計します。単位:byte/s。 >=0 byte/s Redis インスタンス(単一ノード/主従/クラスター) 1 分
net_out_throughput ネットワーク出力スループット このメトリクスは、ネットワークポートの 1 秒あたり平均出力トラフィックを集計します。単位:byte/s。 >=0 byte/s Redis インスタンス(単一ノード/主従/クラスター) 1 分
connected_clients アクティブクライアント数 このメトリクスは、接続済みクライアント数を集計します。システム監視、構成同期、業務関連の接続数を含み、レプリカノードからの接続は含みません。 >=0 Redis インスタンス(単一ノード/主従/クラスター) 1 分
client_longest_out_list クライアント最大出力リスト このメトリクスは、クライアントの既存接続のうち最長の出力リストを集計します。 >=0 Redis インスタンス(単一ノード/主従/クラスター) 1 分
client_biggest_in_buf クライアント最大入力バッファ このメトリクスは、クライアントの既存接続のうち最大の入力データ長を集計します。単位:byte。 >=0 byte Redis インスタンス(単一ノード/主従/クラスター) 1 分
blocked_clients ブロック中クライアント数 このメトリクスは、ブロック操作によって待機中のクライアント数を表します。ブロック操作の例:BLPOPBRPOPBRPOPLPUSH >=0 Redis インスタンス(単一ノード/主従/クラスター) 1 分
used_memory 使用済みメモリ このメトリクスは、Redis が使用済みのメモリバイト数を集計します。単位:byte。 >=0 byte Redis インスタンス(単一ノード/主従/クラスター) 1 分
used_memory_rss 使用済みメモリ RSS このメトリクスは、Redis が使用済みの RSS メモリを集計します。つまり、実際に「メモリ上に常駐している」メモリ量です。ヒープメモリを含み、スワップアウトされたメモリは含みません。単位:byte。 >=0 byte Redis インスタンス(単一ノード/主従/クラスター) 1 分
used_memory_peak 使用済みメモリのピーク値 このメトリクスは、Redis サーバー起動以降の使用メモリのピーク値を集計します。単位:byte。 >=0 byte Redis インスタンス(単一ノード/主従/クラスター) 1 分
used_memory_lua Lua 使用済みメモリ このメトリクスは、Lua エンジンが使用したメモリバイト数を集計します。単位:byte。 >=0 byte Redis インスタンス(単一ノード/主従/クラスター) 1 分
memory_frag_ratio メモリ断片化率 このメトリクスは、現在のメモリ断片化率を集計します。値は used_memory_rss / used_memory に等しくなります。 >=0 Redis インスタンス(単一ノード/主従/クラスター) 1 分
total_connections_received 新規接続数 このメトリクスは、統計周期内に新規作成された接続数を集計します。 >=0 Redis インスタンス(単一ノード/主従/クラスター) 1 分
total_commands_processed 処理されたコマンド数 このメトリクスは、統計周期内に処理されたコマンド数を集計します。 >=0 Redis インスタンス(単一ノード/主従/クラスター) 1 分
instantaneous_ops 1 秒あたりの同時操作数 このメトリクスは、1 秒あたりに処理されたコマンド数を集計します。 >=0 Redis インスタンス(単一ノード/主従/クラスター) 1 分
total_net_input_bytes ネットワーク受信バイト数 このメトリクスは、統計周期内の受信バイト数を集計します。単位:byte。 >=0 byte Redis インスタンス(単一ノード/主従/クラスター) 1 分
total_net_output_bytes ネットワーク送信バイト数 このメトリクスは、統計周期内の送信バイト数を集計します。単位:byte。 >=0 byte Redis インスタンス(単一ノード/主従/クラスター) 1 分
instantaneous_input_kbps ネットワーク瞬時入力トラフィック このメトリクスは、瞬時の入力トラフィックを集計します。単位:KB/s。 >=0 KB/s Redis インスタンス(単一ノード/主従/クラスター) 1 分
instantaneous_output_kbps ネットワーク瞬時出力トラフィック このメトリクスは、瞬時の出力トラフィックを集計します。単位:KB/s。 >=0 KB/s Redis インスタンス(単一ノード/主従/クラスター) 1 分
rejected_connections 拒否された接続数 このメトリクスは、統計周期内に maxclients を超過したために拒否された接続数を集計します。 >=0 Redis インスタンス(単一ノード/主従/クラスター) 1 分
expired_keys 期限切れキー数 このメトリクスは、統計周期内に期限切れで削除されたキー数を集計します。 >=0 Redis インスタンス(単一ノード/主従/クラスター) 1 分
evicted_keys 追い出されたキー数 このメトリクスは、統計周期内にメモリ不足で削除されたキー数を集計します。 >=0 Redis インスタンス(単一ノード/主従/クラスター) 1 分
keyspace_hits Keyspace ヒット回数 このメトリクスは、統計周期内にメイン辞書での検索ヒット回数を集計します。 >=0 Redis インスタンス(単一ノード/主従/クラスター) 1 分
keyspace_misses Keyspace ミス回数 このメトリクスは、統計周期内にメイン辞書での検索ミス回数を集計します。 >=0 Redis インスタンス(単一ノード/主従/クラスター) 1 分
pubsub_channels Pub/Sub チャンネル数 このメトリクスは、Pub/Sub チャンネル数を集計します。 >=0 Redis インスタンス(単一ノード/主従/クラスター) 1 分
pubsub_patterns Pub/Sub パターン数 このメトリクスは、Pub/Sub パターン数を集計します。 >=0 Redis インスタンス(単一ノード/主従/クラスター) 1 分
keyspace_hits_perc キャッシュヒット率 このメトリクスは、Redis のキャッシュヒット率を集計します。ヒット率の計算式は keyspace_hits/(keyspace_hits+keyspace_misses) です。単位:%。 0-100% Redis インスタンス(単一ノード/主従/クラスター) 1 分
command_max_delay コマンド最大遅延 インスタンスのコマンド最大遅延を集計します。単位:ms。 >=0 ms Redis インスタンス(単一ノード/主従/クラスター) 1 分
auth_errors 認証失敗回数 インスタンスの認証失敗回数を集計します。 >=0 Redis インスタンス(単一ノード/主従) 1 分
is_slow_log_exist スローログの有無 インスタンスにスローログが存在するかを集計します。img説明:この監視では、migrateslaveofconfigbgsavebgrewriteaof コマンドによって発生したスローログは集計しません。 1:存在する 0:存在しない。 Redis インスタンス(単一ノード/主従) 1 分
keys キャッシュキー総数 このメトリクスは、Redis キャッシュ内のキー総数を集計します。 >=0 Redis インスタンス(単一ノード/主従) 1 分

Redis 4.0、Redis 5.0、および Redis 6.0 インスタンスの監視メトリクス

img説明:

  • メトリクスのディメンションはディメンションを参照してください。
  • インスタンス監視は、マスターノードのデータを集計した後の監視です。
  • 一部のインスタンス監視メトリクスは、マスターノードとレプリカノードを集約したメトリクスです。表 3 の「メトリクスの意味」を参照してください。
メトリクス ID メトリクス名 メトリクスの意味 値の範囲 測定対象 監視周期(元のメトリクス)
cpu_usage CPU 使用率 このメトリクスは、統計周期内の測定対象の CPU 使用率を複数回サンプリングし、その中の最大値を表します。単位:%。 0-100% Redis インスタンス(単一ノード/主従/読み書き分離) 1 分
cpu_avg_usage CPU 平均使用率 このメトリクスは、統計周期内の測定対象の CPU 使用率を複数回サンプリングし、その平均値を表します。単位:%。 0-100% Redis インスタンス(単一ノード/主従/読み書き分離) 1 分
command_max_delay コマンド最大遅延 インスタンスのコマンド最大遅延を集計します。単位:ms。 >=0 ms Redis インスタンス 1 分
total_connections_received 新規接続数 このメトリクスは、統計周期内に新規作成された接続数を集計します。 >=0 Redis インスタンス 1 分
is_slow_log_exist スローログの有無 インスタンスにスローログが存在するかを集計します。img説明:この監視では、migrateslaveofconfigbgsavebgrewriteaof コマンドによって発生したスローログは集計しません。 1:存在する 0:存在しない。 Redis インスタンス 1 分
memory_usage メモリ使用率 このメトリクスは、測定対象のメモリ使用率を集計します。単位:%。 0-100% Redis インスタンス 1 分
expires 期限付きキー総数 このメトリクスは、Redis キャッシュ内で期限切れになるキー数を集計します。 >=0 Redis インスタンス 1 分
keyspace_hits_perc キャッシュヒット率 このメトリクスは、Redis のキャッシュヒット率を集計します。ヒット率の計算式は keyspace_hits/(keyspace_hits+keyspace_misses) で、マスターノードとレプリカノードを集約したメトリクスです。単位:%。 0-100% Redis インスタンス 1 分
used_memory 使用済みメモリ このメトリクスは、Redis が使用済みのメモリバイト数を集計します。単位:コンソールで KB、MB、byte などを選択できます。 >=0 Redis インスタンス 1 分
used_memory_dataset データセット使用メモリ このメトリクスは、Redis のデータセットが使用しているメモリを集計します。単位:コンソールで KB、MB、byte などを選択できます。 >=0 Redis インスタンス 1 分
used_memory_dataset_perc データセット使用メモリ割合 このメトリクスは、Redis のデータセットが使用しているメモリの総メモリに対する割合を集計します。マスターノードとレプリカノードを集約したメトリクスです。単位:%。 0-100% Redis インスタンス 1 分
used_memory_rss 使用済みメモリ RSS このメトリクスは、Redis が使用済みの RSS メモリを集計します。つまり、実際に「メモリ上に常駐している」メモリ量です。ヒープメモリを含み、スワップアウトされたメモリは含みません。単位:コンソールで KB、MB、byte などを選択できます。 >=0 Redis インスタンス 1 分
instantaneous_ops 1 秒あたりの同時操作数 このメトリクスは、1 秒あたりに処理されたコマンド数を集計します。 >=0 Redis インスタンス 1 分
keyspace_misses Keyspace ミス回数 このメトリクスは、統計周期内にメイン辞書での検索ミス回数を集計します。マスターノードとレプリカノードを集約したメトリクスです。 >=0 Redis インスタンス 1 分
keys キャッシュキー総数 このメトリクスは、Redis キャッシュ内のキー総数を集計します。 >=0 Redis インスタンス 1 分
blocked_clients ブロック中クライアント数 このメトリクスは、ブロック操作によって待機中のクライアント数を集計します。 >=0 Redis インスタンス 1 分
connected_clients アクティブクライアント数 このメトリクスは、接続済みクライアント数を集計します。システム監視、構成同期、業務関連の接続数を含み、レプリカノードからの接続は含みません。 >=0 Redis インスタンス 1 分
del DEL このメトリクスは、1 秒あたりの del 操作数の平均を集計します。単位:Count/s。 0-500000 Count/s Redis インスタンス 1 分
evicted_keys 追い出されたキー数 このメトリクスは、統計周期内にメモリ不足で削除されたキー数を集計します。マスターノードとレプリカノードを集約したコマンド統計メトリクスです。 >=0 Redis インスタンス 1 分
expire EXPIRE このメトリクスは、1 秒あたりの expire 操作数の平均を集計します。単位:Count/s。 0-500000 Count/s Redis インスタンス 1 分
expired_keys 期限切れキー数 このメトリクスは、統計周期内に期限切れで削除されたキー数を集計します。マスターノードとレプリカノードを集約したコマンド統計メトリクスです。 >=0 Redis インスタンス 1 分
get GET このメトリクスは、1 秒あたりの get 操作数の平均を集計します。マスターノードとレプリカノードを集約したコマンド統計メトリクスです。単位:Count/s。 0-500000 Count/s Redis インスタンス 1 分
hdel HDEL このメトリクスは、1 秒あたりの hdel 操作数の平均を集計します。単位:Count/s。 0-500000 Count/s Redis インスタンス 1 分
hget HGET このメトリクスは、1 秒あたりの hget 操作数の平均を集計します。マスターノードとレプリカノードを集約したコマンド統計メトリクスです。単位:Count/s。 0-500000 Count/s Redis インスタンス 1 分
hmget HMGET このメトリクスは、1 秒あたりの hmget 操作数の平均を集計します。マスターノードとレプリカノードを集約したコマンド統計メトリクスです。単位:Count/s。 0-500000 Count/s Redis インスタンス 1 分
hmset HMSET このメトリクスは、1 秒あたりの hmset 操作数の平均を集計します。単位:Count/s。 0-500000 Count/s Redis インスタンス 1 分
hset HSET このメトリクスは、1 秒あたりの hset 操作数の平均を集計します。単位:Count/s。 0-500000 Count/s Redis インスタンス 1 分
instantaneous_input_kbps ネットワーク瞬時入力トラフィック このメトリクスは、瞬時の入力トラフィックを集計します。単位:KB/s。 >=0 KB/s Redis インスタンス 1 分
instantaneous_output_kbps ネットワーク瞬時出力トラフィック このメトリクスは、瞬時の出力トラフィックを集計します。単位:KB/s。 >=0 KB/s Redis インスタンス 1 分
memory_frag_ratio メモリ断片化率 このメトリクスは、現在のメモリ断片化率を集計します。 >=0 Redis インスタンス 1 分
mget MGET このメトリクスは、1 秒あたりの mget 操作数の平均を集計します。マスターノードとレプリカノードを集約したコマンド統計メトリクスです。単位:Count/s。 0-500000 Count/s Redis インスタンス 1 分
mset MSET このメトリクスは、1 秒あたりの mset 操作数の平均を集計します。単位:Count/s。 0-500000 Count/s Redis インスタンス 1 分
pubsub_channels Pub/Sub チャンネル数 このメトリクスは、Pub/Sub チャンネル数を集計します。 >=0 Redis インスタンス 1 分
pubsub_patterns Pub/Sub パターン数 このメトリクスは、Pub/Sub パターン数を集計します。 >=0 Redis インスタンス 1 分
set SET このメトリクスは、1 秒あたりの set 操作数の平均を集計します。単位:Count/s。 0-500000 Count/s Redis インスタンス 1 分
used_memory_lua Lua 使用済みメモリ このメトリクスは、Lua エンジンが使用したメモリバイト数を集計します。単位:コンソールで KB、MB、byte などを選択できます。 >=0 Redis インスタンス 1 分
used_memory_peak 使用済みメモリのピーク値 このメトリクスは、Redis サーバー起動以降の使用メモリのピーク値を集計します。単位:コンソールで KB、MB、byte などを選択できます。 >=0 Redis インスタンス 1 分
sadd SADD このメトリクスは、1 秒あたりの sadd 操作数の平均を集計します。単位:Count/s。 0-500000 Count/s Redis インスタンス 1 分
smembers SMEMBERS このメトリクスは、1 秒あたりの smembers 操作数の平均を集計します。マスターノードとレプリカノードを集約したコマンド統計メトリクスです。単位:Count/s。 0-500000 Count/s Redis インスタンス 1 分
setex SETEX 1 秒あたりの setex 操作数。単位:Count/s。 0-500000 Count/s Redis インスタンス 1 分
rx_controlled フロー制御回数 このメトリクスは、統計周期内にフロー制御された回数を集計します。このメトリクス値が 0 より大きい場合、現在使用中の帯域幅が最大帯域幅制限を超えたためフロー制御されたことを示します。単位:Count。 >=0 Redis インスタンス 1 分
bandwidth_usage 帯域幅使用率 現在のトラフィック帯域幅と最大帯域幅制限の割合を計算します。 0-200% Redis インスタンス 1 分
command_max_rt 最大遅延 ノードがコマンドを受信してから応答を返すまでの遅延の最大値。単位:us。 >=0 us Redis インスタンス(単一ノード) 1 分
command_avg_rt 平均遅延 ノードがコマンドを受信してから応答を返すまでの遅延の平均値。単位:us。 >=0 us Redis インスタンス(単一ノード) 1 分

Redis インスタンスのデータノード監視メトリクス

img説明:

  • Redis の主従、読み書き分離、クラスターインスタンスはデータノード監視をサポートします。
  • メトリクスのディメンションはディメンションを参照してください。
メトリクス ID メトリクス名 メトリクスの意味 値の範囲 測定対象 監視周期(元のメトリクス)
cpu_usage CPU 使用率 このメトリクスは、統計周期内の測定対象の CPU 使用率を複数回サンプリングし、その中の最大値を表します。単位:%。 0-100% Redis 主従、読み書き分離、クラスターインスタンスのデータノード 1 分
cpu_avg_usage CPU 平均使用率 このメトリクスは、統計周期内の測定対象の CPU 使用率を複数回サンプリングし、その平均値を表します。単位:%。 0-100% Redis 4.0、5.0、6.0 バージョンの主従、読み書き分離、クラスターインスタンスのデータノード 1 分
memory_usage メモリ使用率 このメトリクスは、測定対象のメモリ使用率を集計します。単位:%。 0-100% Redis 主従、読み書き分離、クラスターインスタンスのデータノード 1 分
connected_clients アクティブクライアント数 このメトリクスは、接続済みクライアント数を集計します。システム監視、構成同期、業務関連の接続数を含み、レプリカノードからの接続は含みません。 >=0 Redis 主従、読み書き分離、クラスターインスタンスのデータノード 1 分
client_longest_out_list クライアント最大出力リスト このメトリクスは、クライアントの既存接続のうち最長の出力リストを集計します。 >=0 Redis 3.0、4.0 バージョンの主従、読み書き分離、クラスターインスタンスのデータノード 1 分
client_biggest_in_buf クライアント最大入力バッファ このメトリクスは、クライアントの既存接続のうち最大の入力データ長を集計します。単位:コンソールで KB、MB、byte などを選択できます。 >=0 Redis 3.0、4.0 バージョンの主従、読み書き分離、クラスターインスタンスのデータノード 1 分
blocked_clients ブロック中クライアント数 このメトリクスは、ブロック操作によって待機中のクライアント数を集計します。ブロック操作の例:BLPOPBRPOPBRPOPLPUSH >=0 Redis 主従、読み書き分離、クラスターインスタンスのデータノード 1 分
used_memory 使用済みメモリ このメトリクスは、Redis が使用済みのメモリバイト数を集計します。単位:コンソールで KB、MB、byte などを選択できます。 >=0 Redis 主従、読み書き分離、クラスターインスタンスのデータノード 1 分
used_memory_rss 使用済みメモリ RSS このメトリクスは、Redis が使用済みの RSS メモリを集計します。つまり、実際に「メモリ上に常駐している」メモリ量です。ヒープメモリを含み、スワップアウトされたメモリは含みません。単位:コンソールで KB、MB、byte などを選択できます。 >=0 Redis 主従、読み書き分離、クラスターインスタンスのデータノード 1 分
used_memory_peak 使用済みメモリのピーク値 このメトリクスは、Redis サーバー起動以降の使用メモリのピーク値を集計します。単位:コンソールで KB、MB、byte などを選択できます。 >=0 Redis 主従、読み書き分離、クラスターインスタンスのデータノード 1 分
used_memory_lua Lua 使用済みメモリ このメトリクスは、Lua エンジンが使用したメモリバイト数を集計します。単位:コンソールで KB、MB、byte などを選択できます。 >=0 Redis 主従、読み書き分離、クラスターインスタンスのデータノード 1 分
memory_frag_ratio メモリ断片化率 このメトリクスは、現在のメモリ断片化率を集計します。値は used_memory_rss / used_memory に等しくなります。 >=0 Redis 主従、読み書き分離、クラスターインスタンスのデータノード 1 分
total_connections_received 新規接続数 このメトリクスは、統計周期内に新規作成された接続数を集計します。 >=0 Redis 主従、読み書き分離、クラスターインスタンスのデータノード 1 分
total_commands_processed 処理されたコマンド数 このメトリクスは、統計周期内に処理されたコマンド数を集計します。 >=0 Redis 主従、読み書き分離、クラスターインスタンスのデータノード 1 分
instantaneous_ops 1 秒あたりの同時操作数 このメトリクスは、1 秒あたりに処理されたコマンド数を集計します。 >=0 Redis 主従、読み書き分離、クラスターインスタンスのデータノード 1 分
total_net_input_bytes ネットワーク受信バイト数 このメトリクスは、統計周期内の受信バイト数を集計します。単位:コンソールで KB、MB、byte などを選択できます。 >=0 Redis 主従、読み書き分離、クラスターインスタンスのデータノード 1 分
total_net_output_bytes ネットワーク送信バイト数 このメトリクスは、統計周期内の送信バイト数を集計します。単位:コンソールで KB、MB、byte などを選択できます。 >=0 Redis 主従、読み書き分離、クラスターインスタンスのデータノード 1 分
instantaneous_input_kbps ネットワーク瞬時入力トラフィック このメトリクスは、瞬時の入力トラフィックを集計します。単位:KB/s。 >=0 KB/s Redis 主従、読み書き分離、クラスターインスタンスのデータノード 1 分
instantaneous_output_kbps ネットワーク瞬時出力トラフィック このメトリクスは、瞬時の出力トラフィックを集計します。単位:KB/s。 >=0 KB/s Redis 主従、読み書き分離、クラスターインスタンスのデータノード 1 分
rejected_connections 拒否された接続数 このメトリクスは、統計周期内に maxclients を超過したために拒否された接続数を集計します。 >=0 Redis 主従、読み書き分離、クラスターインスタンスのデータノード 1 分
expired_keys 期限切れキー数 このメトリクスは、統計周期内に期限切れで削除されたキー数を集計します。 >=0 Redis 主従、読み書き分離、クラスターインスタンスのデータノード 1 分
evicted_keys 追い出されたキー数 このメトリクスは、統計周期内にメモリ不足で削除されたキー数を集計します。 >=0 Redis 主従、読み書き分離、クラスターインスタンスのデータノード 1 分
pubsub_channels Pub/Sub チャンネル数 このメトリクスは、Pub/Sub チャンネル数を集計します。 >=0 Redis 主従、読み書き分離、クラスターインスタンスのデータノード 1 分
pubsub_patterns Pub/Sub パターン数 このメトリクスは、Pub/Sub パターン数を集計します。 >=0 Redis 主従、読み書き分離、クラスターインスタンスのデータノード 1 分
keyspace_hits_perc キャッシュヒット率 このメトリクスは、Redis のキャッシュヒット率を集計します。ヒット率の計算式は keyspace_hits/(keyspace_hits+keyspace_misses) です。単位:%。 0-100% Redis 主従、読み書き分離、クラスターインスタンスのデータノード 1 分
command_max_delay コマンド最大遅延 ノードのコマンド最大遅延を集計します。単位:ms。 >=0 ms Redis 主従、読み書き分離、クラスターインスタンスのデータノード 1 分
is_slow_log_exist スローログの有無 ノードにスローログが存在するかを集計します。img説明:この監視では、migrateslaveofconfigbgsavebgrewriteaof コマンドによって発生したスロークエリは集計しません。 1:存在する 0:存在しない。 Redis 主従、読み書き分離、クラスターインスタンスのデータノード 1 分
keys キャッシュキー総数 このメトリクスは、Redis キャッシュ内のキー総数を集計します。 >=0 Redis 主従、読み書き分離、クラスターインスタンスのデータノード 1 分
sadd SADD このメトリクスは、1 秒あたりの sadd 操作数の平均を集計します。単位:Count/s。 0-500000 Count/s Redis 4.0、5.0、6.0 バージョンの主従、読み書き分離、クラスターインスタンスのデータノード 1 分
smembers SMEMBERS このメトリクスは、1 秒あたりの smembers 操作数の平均を集計します。単位:Count/s。 0-500000 Count/s Redis 4.0、5.0、6.0 バージョンの主従、読み書き分離、クラスターインスタンスのデータノード 1 分
ms_repl_offset 主従データ同期差分 このメトリクスは、マスターノードとレプリカノード間のデータ同期差分を集計します。 - Redis 4.0、5.0、6.0 バージョンの主従、読み書き分離、クラスターインスタンスのレプリカノード 1 分
del DEL このメトリクスは、1 秒あたりの del 操作数の平均を集計します。単位:Count/s。 0-500000 Count/s Redis 4.0、5.0、6.0 バージョンの主従、読み書き分離、クラスターインスタンスのデータノード 1 分
expire EXPIRE このメトリクスは、1 秒あたりの expire 操作数の平均を集計します。単位:Count/s。 0-500000 Count/s Redis 4.0、5.0、6.0 バージョンの主従、読み書き分離、クラスターインスタンスのデータノード 1 分
get GET このメトリクスは、1 秒あたりの get 操作数の平均を集計します。単位:Count/s。 0-500000 Count/s Redis 4.0、5.0、6.0 バージョンの主従、読み書き分離、クラスターインスタンスのデータノード 1 分
hdel HDEL このメトリクスは、1 秒あたりの hdel 操作数の平均を集計します。単位:Count/s。 0-500000 Count/s Redis 4.0、5.0、6.0 バージョンの主従、読み書き分離、クラスターインスタンスのデータノード 1 分
hget HGET このメトリクスは、1 秒あたりの hget 操作数の平均を集計します。単位:Count/s。 0-500000 Count/s Redis 4.0、5.0、6.0 バージョンの主従、読み書き分離、クラスターインスタンスのデータノード 1 分
hmget HMGET このメトリクスは、1 秒あたりの hmget 操作数の平均を集計します。単位:Count/s。 0-500000 Count/s Redis 4.0、5.0、6.0 バージョンの主従、読み書き分離、クラスターインスタンスのデータノード 1 分
hmset HMSET このメトリクスは、1 秒あたりの hmset 操作数の平均を集計します。単位:Count/s。 0-500000 Count/s Redis 4.0/Redis 5.0 の主従、クラスター、Redis 6.0 の主従インスタンスのデータノード 1 分
hset HSET このメトリクスは、1 秒あたりの hset 操作数の平均を集計します。単位:Count/s。 0-500000 Count/s Redis 4.0、5.0、6.0 バージョンの主従、読み書き分離、クラスターインスタンスのデータノード 1 分
mget MGET このメトリクスは、1 秒あたりの mget 操作数の平均を集計します。単位:Count/s。 0-500000 Count/s Redis 4.0、5.0、6.0 バージョンの主従、読み書き分離、クラスターインスタンスのデータノード 1 分
mset MSET このメトリクスは、1 秒あたりの mset 操作数の平均を集計します。単位:Count/s。 0-500000 Count/s Redis 4.0、5.0、6.0 バージョンの主従、読み書き分離、クラスターインスタンスのデータノード 1 分
set SET このメトリクスは、1 秒あたりの set 操作数の平均を集計します。単位:Count/s。 0-500000 Count/s Redis 4.0、5.0、6.0 バージョンの主従、読み書き分離、クラスターインスタンスのデータノード 1 分
rx_controlled フロー制御回数 このメトリクスは、統計周期内にフロー制御された回数を集計します。このメトリクス値が 0 より大きい場合、現在使用中の帯域幅が最大帯域幅制限を超えたためフロー制御されたことを示します。単位:Count。 >=0 Redis 4.0、5.0、6.0 バージョンの主従、読み書き分離、クラスターインスタンスのデータノード 1 分
bandwidth_usage 帯域幅使用率 現在のトラフィック帯域幅と最大帯域幅制限の割合を計算します。 0-200% Redis 4.0、5.0、6.0 バージョンの主従、読み書き分離、クラスターインスタンスのデータノード 1 分
connections_usage 接続数使用率 このメトリクスは、現在の接続数と最大接続数制限の割合を集計します。単位:%。 0-100% Redis 4.0、5.0、6.0 バージョンの主従、読み書き分離、クラスターインスタンスのデータノード 1 分
command_max_rt 最大遅延 ノードがコマンドを受信してから応答を返すまでの遅延の最大値。単位:us。 >=0 us Redis 4.0、5.0、6.0 バージョンの主従、読み書き分離、クラスターインスタンスのデータノード 1 分
command_avg_rt 平均遅延 ノードがコマンドを受信してから応答を返すまでの遅延の平均値。単位:us。 >=0 us Redis 4.0、5.0、6.0 バージョンの主従、読み書き分離、クラスターインスタンスのデータノード 1 分
sync_full フル同期回数 このメトリクスは、Redis サーバー起動以降に完了したフル同期の総回数を集計します。 >=0 Redis 4.0、5.0、6.0 バージョンの主従、読み書き分離、クラスターインスタンスのデータノード 1 分
slow_log_counts スローログ発生回数 このメトリクスは、1 つの統計周期内にスローログが発生した回数を集計します。 >=0 Redis 4.0、5.0、6.0 バージョンの主従、読み書き分離、クラスターインスタンスのデータノード 1 分
setex SETEX 1 秒あたりの setex 操作数。単位:Count/s。 0-500000 Count/s Redis 4.0、5.0、6.0 バージョンの主従、読み書き分離、クラスターインスタンスのデータノード 1 分

Proxy ノードの監視メトリクス

img説明:

  • Proxy クラスターおよび読み書き分離インスタンスは、Proxy ノードの監視メトリクスをサポートします。
  • メトリクスのディメンションはディメンションを参照してください。
メトリクス ID メトリクス名 メトリクスの意味 値の範囲 測定対象 監視周期(元のメトリクス)
cpu_usage CPU 使用率 このメトリクスは、統計周期内の測定対象の CPU 使用率を複数回サンプリングし、その中の最大値を表します。単位:%。 0-100% Redis 3.0 Proxy クラスターインスタンスの Proxy ノード 1 分
memory_usage メモリ使用率 このメトリクスは、測定対象のメモリ使用率を集計します。単位:%。 0-100% Redis 3.0 Proxy クラスターインスタンスの Proxy ノード 1 分
p_connected_clients アクティブクライアント数 このメトリクスは、接続済みクライアント数を集計します。 >=0 Redis 3.0 Proxy クラスターインスタンスの Proxy ノード 1 分
max_rxpck_per_sec NIC 受信最大パケットレート このメトリクスは、測定対象 NIC が統計周期内に 1 秒あたり受信した最大パケット数を集計します。単位:パケット/秒。 0-10000000 パケット/秒 Redis 3.0 Proxy クラスターインスタンスの Proxy ノード 1 分
max_txpck_per_sec NIC 送信最大パケットレート このメトリクスは、測定対象 NIC が統計周期内に 1 秒あたり送信した最大パケット数を集計します。単位:パケット/秒。 0-10000000 パケット/秒 Redis 3.0 Proxy クラスターインスタンスの Proxy ノード 1 分
max_rxkB_per_sec 受信最大帯域幅 このメトリクスは、測定対象 NIC が 1 秒あたりに受信した最大データ量を集計します。単位:KB/s。 >= 0 KB/s Redis 3.0 Proxy クラスターインスタンスの Proxy ノード 1 分
max_txkB_per_sec 送信最大帯域幅 このメトリクスは、測定対象 NIC が 1 秒あたりに送信した最大データ量を集計します。単位:KB/s。 >= 0 KB/s Redis 3.0 Proxy クラスターインスタンスの Proxy ノード 1 分
avg_rxpck_per_sec NIC 受信平均パケットレート このメトリクスは、測定対象 NIC が統計周期内に 1 秒あたり受信した平均パケット数を集計します。単位:パケット/秒。 0-10000000 パケット/秒 Redis 3.0 Proxy クラスターインスタンスの Proxy ノード 1 分
avg_txpck_per_sec NIC 送信平均パケットレート このメトリクスは、測定対象 NIC が統計周期内に 1 秒あたり送信した平均パケット数を集計します。単位:パケット/秒。 0-10000000 パケット/秒 Redis 3.0 Proxy クラスターインスタンスの Proxy ノード 1 分
avg_rxkB_per_sec 受信平均帯域幅 このメトリクスは、測定対象 NIC が 1 秒あたりに受信した平均データ量を集計します。単位:KB/s。 >= 0 KB/s Redis 3.0 Proxy クラスターインスタンスの Proxy ノード 1 分
avg_txkB_per_sec 送信平均帯域幅 このメトリクスは、測定対象 NIC が 1 秒あたりに送信した平均データ量を集計します。単位:KB/s。 >= 0 KB/s Redis 3.0 Proxy クラスターインスタンスの Proxy ノード 1 分
メトリクス ID メトリクス名 メトリクスの意味 値の範囲 測定対象 監視周期(元のメトリクス)
node_status インスタンスノード状態 Proxy ノードの状態が正常かどうかを表示します。 0:正常 1:異常 Proxy クラスター、読み書き分離インスタンスの Proxy ノード 1 分
cpu_usage CPU 使用率 このメトリクスは、統計周期内の測定対象の CPU 使用率を複数回サンプリングし、その中の最大値を表します。単位:%。 0-100% Proxy クラスター、読み書き分離インスタンスの Proxy ノード 1 分
cpu_avg_usage CPU 平均使用率 このメトリクスは、統計周期内の測定対象の CPU 使用率を複数回サンプリングし、その平均値を表します。単位:%。 0-100% Proxy クラスター、読み書き分離インスタンスの Proxy ノード 1 分
memory_usage メモリ使用率 このメトリクスは、測定対象のメモリ使用率を集計します。単位:%。 0-100% Proxy クラスター、読み書き分離インスタンスの Proxy ノード 1 分
connected_clients アクティブクライアント数 このメトリクスは、接続済みクライアント数を集計します。システム監視、構成同期、業務関連の接続数を含み、レプリカノードからの接続は含みません。 >=0 Proxy クラスター、読み書き分離インスタンスの Proxy ノード 1 分
instantaneous_ops 1 秒あたりの同時操作数 このメトリクスは、1 秒あたりに処理されたコマンド数を集計します。 >=0 Proxy クラスター、読み書き分離インスタンスの Proxy ノード 1 分
instantaneous_input_kbps ネットワーク瞬時入力トラフィック このメトリクスは、瞬時の入力トラフィックを集計します。単位:KB/s。 >=0 KB/s Proxy クラスター、読み書き分離インスタンスの Proxy ノード 1 分
instantaneous_output_kbps ネットワーク瞬時出力トラフィック このメトリクスは、瞬時の出力トラフィックを集計します。単位:KB/s。 >=0 KB/s Proxy クラスター、読み書き分離インスタンスの Proxy ノード 1 分
total_net_input_bytes ネットワーク受信バイト数 このメトリクスは、統計周期内の受信バイト数を集計します。単位:コンソールで KB、MB、byte などを選択できます。 >=0 Proxy クラスター、読み書き分離インスタンスの Proxy ノード 1 分
total_net_output_bytes ネットワーク送信バイト数 このメトリクスは、統計周期内の送信バイト数を集計します。単位:コンソールで KB、MB、byte などを選択できます。 >=0 Proxy クラスター、読み書き分離インスタンスの Proxy ノード 1 分
connections_usage 接続数使用率 このメトリクスは、現在の接続数と最大接続数制限の割合を集計します。単位:%。 0-100% Proxy クラスター、読み書き分離インスタンスの Proxy ノード 1 分
command_max_rt 最大遅延 ノードがコマンドを受信してから応答を返すまでの遅延の最大値。単位:us。 >=0 us Proxy クラスター、読み書き分離インスタンスの Proxy ノード 1 分
command_avg_rt 平均遅延 ノードがコマンドを受信してから応答を返すまでの遅延の平均値。単位:us。 >=0 us Proxy クラスター、読み書き分離インスタンスの Proxy ノード 1 分

Memcached インスタンスの監視メトリクス

img説明:

メトリクスのディメンションはディメンションを参照してください。

メトリクス ID メトリクス名 メトリクスの意味 値の範囲 測定対象 監視周期(元のメトリクス)
cpu_usage CPU 使用率 このメトリクスは、統計周期内の測定対象の CPU 使用率を複数回サンプリングし、その中の最大値を表します。単位:%。 0-100% Memcached インスタンス 1 分
memory_usage メモリ使用率 このメトリクスは、測定対象のメモリ使用率を集計します。単位:%。 0-100% Memcached インスタンス 1 分
net_in_throughput ネットワーク入力スループット このメトリクスは、ネットワークポートの 1 秒あたり平均入力トラフィックを集計します。単位:byte/s。 >= 0 byte/s Memcached インスタンス 1 分
net_out_throughput ネットワーク出力スループット このメトリクスは、ネットワークポートの 1 秒あたり平均出力トラフィックを集計します。単位:byte/s。 >= 0 byte/s Memcached インスタンス 1 分
mc_connected_clients アクティブクライアント数 このメトリクスは、接続済みクライアント数を集計します。レプリカノードからの接続は含みません。 >=0 Memcached インスタンス 1 分
mc_used_memory 使用済みメモリ このメトリクスは、使用済みメモリバイト数を集計します。単位:byte。 >=0 byte Memcached インスタンス 1 分
mc_used_memory_rss 使用済みメモリ RSS このメトリクスは、使用済みの RSS メモリを集計します。つまり、実際に「メモリ上に常駐している」メモリ量です。ヒープメモリを含み、スワップアウトされたメモリは含みません。単位:byte。 >=0 byte Memcached インスタンス 1 分
mc_used_memory_peak 使用済みメモリのピーク値 このメトリクスは、サーバー起動以降の使用メモリのピーク値を集計します。単位:byte。 >=0 byte Memcached インスタンス 1 分
mc_memory_frag_ratio メモリ断片化率 このメトリクスは、現在のメモリ断片化率を集計します。値は used_memory_rss / used_memory に等しくなります。 >=0 Memcached インスタンス 1 分
mc_connections_received 新規接続数 このメトリクスは、統計周期内に新規作成された接続数を集計します。 >=0 Memcached インスタンス 1 分
mc_commands_processed 処理されたコマンド数 このメトリクスは、統計周期内に処理されたコマンド数を集計します。 >=0 Memcached インスタンス 1 分
mc_instantaneous_ops 1 秒あたりの同時操作数 このメトリクスは、1 秒あたりに処理されたコマンド数を集計します。 >=0 Memcached インスタンス 1 分
mc_net_input_bytes ネットワーク受信バイト数 このメトリクスは、統計周期内の受信バイト数を集計します。単位:byte。 >=0 byte Memcached インスタンス 1 分
mc_net_output_bytes ネットワーク送信バイト数 このメトリクスは、統計周期内の送信バイト数を集計します。単位:byte。 >=0 byte Memcached インスタンス 1 分
mc_instantaneous_input_kbps ネットワーク瞬時入力トラフィック このメトリクスは、瞬時の入力トラフィックを集計します。単位:KB/s。 >=0 KB/s Memcached インスタンス 1 分
mc_instantaneous_output_kbps ネットワーク瞬時出力トラフィック このメトリクスは、瞬時の出力トラフィックを集計します。単位:KB/s。 >=0 KB/s Memcached インスタンス 1 分
mc_rejected_connections 拒否された接続数 このメトリクスは、統計周期内に maxclients を超過したために拒否された接続数を集計します。 >=0 Memcached インスタンス 1 分
mc_expired_keys 期限切れキー数 このメトリクスは、統計周期内に期限切れで削除されたキー数を集計します。 >=0 Memcached インスタンス 1 分
mc_evicted_keys 追い出されたキー数 このメトリクスは、統計周期内にメモリ不足で削除されたキー数を集計します。 >=0 Memcached インスタンス 1 分
mc_cmd_get データ検索リクエスト回数 このメトリクスは、サービスが受け取ったデータ検索リクエスト回数を集計します。 >=0 Memcached インスタンス 1 分
mc_cmd_set データ保存リクエスト回数 このメトリクスは、サービスが受け取ったデータ保存リクエスト回数を集計します。 >=0 Memcached インスタンス 1 分
mc_cmd_flush データ消去リクエスト回数 このメトリクスは、サービスが受け取ったデータ消去リクエスト回数を集計します。 >=0 Memcached インスタンス 1 分
mc_cmd_touch データ有効期限変更リクエスト回数 このメトリクスは、サービスが受け取ったデータ有効期限変更リクエスト回数を集計します。 >=0 Memcached インスタンス 1 分
mc_get_hits データ検索ヒット回数 このメトリクスは、データ検索の成功回数を集計します。 >=0 Memcached インスタンス 1 分
mc_get_misses データ検索ミス回数 このメトリクスは、キーが存在しないために失敗したデータ検索回数を集計します。 >=0 Memcached インスタンス 1 分
mc_delete_hits データ削除ヒット回数 このメトリクスは、データ削除の成功回数を集計します。 >=0 Memcached インスタンス 1 分
mc_delete_misses データ削除ミス回数 このメトリクスは、キーが存在しないために失敗したデータ削除回数を集計します。 >=0 Memcached インスタンス 1 分
mc_incr_hits 加算ヒット回数 このメトリクスは、加算操作の成功回数を集計します。 >=0 Memcached インスタンス 1 分
mc_incr_misses 加算ミス回数 このメトリクスは、キーが存在しないために失敗した加算操作回数を集計します。 >=0 Memcached インスタンス 1 分
mc_decr_hits 減算ヒット回数 このメトリクスは、減算操作の成功回数を集計します。 >=0 Memcached インスタンス 1 分
mc_decr_misses 減算ミス回数 このメトリクスは、キーが存在しないために失敗した減算操作回数を集計します。 >=0 Memcached インスタンス 1 分
mc_cas_hits CAS ヒット回数 このメトリクスは、CAS 操作の成功回数を集計します。 >=0 Memcached インスタンス 1 分
mc_cas_misses CAS ミス回数 このメトリクスは、キーが存在しないために失敗した CAS 操作回数を集計します。 >=0 Memcached インスタンス 1 分
mc_cas_badval CAS 値不一致回数 このメトリクスは、CAS 値の不一致により失敗した CAS 回数を集計します。 >=0 Memcached インスタンス 1 分
mc_touch_hits データ有効期限変更ヒット回数 このメトリクスは、データ有効期限変更の成功回数を集計します。 >=0 Memcached インスタンス 1 分
mc_touch_misses データ有効期限変更ミス回数 このメトリクスは、キーが存在しないために失敗したデータ有効期限変更回数を集計します。 >=0 Memcached インスタンス 1 分
mc_auth_cmds 認証リクエスト回数 このメトリクスは、認証リクエスト回数を集計します。 >=0 Memcached インスタンス 1 分
mc_auth_errors 認証失敗回数 このメトリクスは、認証失敗回数を集計します。 >=0 Memcached インスタンス 1 分
mc_curr_items 保存済みデータ件数 このメトリクスは、保存済みデータ件数を集計します。 >=0 Memcached インスタンス 1 分
mc_command_max_delay コマンド最大遅延 コマンド最大遅延を集計します。単位:ms。 >=0 ms Memcached インスタンス 1 分
mc_is_slow_log_exist スローログの有無 インスタンスにスローログが存在するかを集計します。img説明:この監視では、migrateslaveofconfigbgsavebgrewriteaof コマンドによって発生したスローログは集計しません。 1:存在する 0:存在しない。 Memcached インスタンス 1 分
mc_keyspace_hits_perc アクセスヒット率 インスタンスのアクセスコードヒット率を集計します。単位:%。 0-100% Memcached インスタンス 1 分

オブジェクト

収集された Huawei Cloud DCS のオブジェクトデータ構造は、「インフラストラクチャ - リソースディレクトリ」で確認できます。

{
  "measurement": "huaweicloud_redis",
  "tags": {
    "RegionId"          : "cn-north-4",
    "project_id"        : "c631f04625xxxxxxxxxxf253c62d48585",
    "enterprise_project_id" : "71be0037-xxxx-xxxx-xxxx-b6b91f134066",
    "instance_id"       : "71be0037-xxxx-xxxx-xxxx-b6b91f134066",
    "instance_name"     : "dcs-iash",
    "engine"            : "Redis",
  },
  "fields": {
    "engine_version"    : "5.0",
    "status"            : "RUNNING",
    "port"              : "6379",
    "ip"                : "192.xxx.x.144",
    "charging_mode"     : "0",
    "enable_publicip"   : "False",
    "spec_code"         : "xxxx",
    "az_codes"          : "xxxxx",
    "created_at"        : "2022-07-12T07:29:56.875Z",
    "max_memory"        : "128",
    "used_memory"       : "2",
    "capacity"          : "0",
    "description"       : "",
  }
}

一部フィールドの説明は次のとおりです。

フィールド 説明
ip String キャッシュインスタンスに接続する IP アドレス。クラスターインスタンスの場合は複数の IP アドレスを返し、カンマで区切ります。例:192.168.0.1, 192.168.0.2。
charging_mode String 課金モード。0 は従量課金、1 は年額/月額課金を表します。
no_password_access String パスワードなしでキャッシュインスタンスへのアクセスを許可するかどうか。true:このインスタンスはパスワードなしでアクセスできます。false:このインスタンスはパスワード認証が必要です。
enable_publicip String Redis キャッシュインスタンスでパブリックネットワークアクセス機能を有効にしているかどうか。True:有効、False:無効。
max_memory Integer 総メモリ。単位:MB。
used_memory Integer 使用済みメモリ。単位:MB。
capacity Integer キャッシュ容量(G Byte)。
status String CREATING:キャッシュインスタンスを申請後、状態が実行中に入る前の状態。CREATEFAILED:キャッシュインスタンスの作成に失敗した状態。RUNNING:キャッシュインスタンスが正常稼働している状態。RESTARTING:キャッシュインスタンスが再起動中の状態。FROZEN:キャッシュインスタンスが凍結済みの状態。ユーザーは「注文管理」で更新料金を支払って凍結中のキャッシュインスタンスを再開できます。EXTENDING:キャッシュインスタンスが拡張中の状態。RESTORING:キャッシュインスタンスのデータを復元中の状態。FLUSHING:キャッシュインスタンスのデータを消去中の状態。

注意:tagsfields 内のフィールドは今後の更新により変更される場合があります

注 1:tags.instance_id の値はインスタンス ID で、一意識別子として使用します

注 2:以下のフィールドはすべて JSON シリアライズ後の文字列です - fields.message - tags.az_codes

フィードバック

このページは役に立ちましたか?