Cloud Proxy のディスク容量不足、または /storage/log（catalina.out）の肥大化による領域逼迫

Products

• VCF Operations

Issue/Introduction

事象:

• VCF Operations において、以下のアラートがトリガーされます。
  
  • Cloud Proxy のディスク容量が少なくなっています
  • ディスク使用率が 90% に達すると、緊急（黄）アラートがトリガーされます。
  • ディスク使用率が 95% に達すると、クリティカル（赤）アラートがトリガーされます。
    
    
• /storage/log/vcops/log/casa/catalina.out-YYYYMMDDHHMMSS  ファイルが肥大化し、約 16 GB に達する場合があります。その結果 /storage/log directory 配下で最大のファイルとなることがあります。
  
  
• catalina.out-YYYYMMDDHHMMSS ファイルには、以下のようなエラーメッセージが大量に記録されます。
  
  ERROR Failed to read file: /storage/db/vmware-vrops-cprc/status/cprc.health.check.status
ERROR No content to map due to end-of-input at [Source: REDACTED
(`StreamReadFeature.INCLUDE_SOURCE_IN_LOCATION` disabled); line: 1]
  
  

• ディスク容量の枯渇に伴い、Cloud Proxy 上のサービスが停止し、正常に動作しなくなる場合があります。

Environment

VCF Operations 9.x
VCF Cloud Proxy 9.x

Cause

本事象は cprc.health.check.status ファイルが破損している、または空の状態になっている場合に発生します。

root@proxy_node [ /storage/db/vmware-vrops-cprc/status ]# ls -ltrh
total XX K
-rw-rw-r-- 1 admin admin    0 MMM DD xx:xx cprc.health.check.status

Resolution

注意 : 作業を開始する前に、Snapshot Creation in VMware Aria Operations (342576) の手順に従って Aria Operations クラスタのスナップショットを取得してください。

• root パーティションに十分な空き容量があることを確認してください。ディスク容量が不足している場合は、Troubleshooting Storage Issues in Aria Operations (318408) に記載されている手順に従って不要ファイルのクリーンアップを実施してください。
  
  
• 問題が発生している Cloud Proxy ノードへ SSH 接続し、以下のディレクトリへ移動して "cprc.health.check.status" ファイルの状態を確認します。
  
  root@proxy_node [ /storage/db/vmware-vrops-cprc/status ]# ls -ltrh
total XX K
-rw-rw-r-- 1 admin admin    0 MMM  DD xx:xx cprc.health.check.status
  
  
• cprc.health.check.status ファイルが空である、または内容が欠落している場合は、正常に動作している Cloud Proxy ノードから当該ファイルの内容をコピーしてください。
  
  
• catalina.out ログを監視し、以下のエラーメッセージが出力されなくなったことを確認してください。

Additional Information

Cloud Proxy fails to upgrade and the health status appears as "Outdated Life Status" in the Aria Operations admin UI (409296)

VCF Cloud Proxy exhaustion or /storage/log (catalina.out) full (443018)