「hostd performance has degraded due to high system latency」のアラートが発生する

Products

• VMware vSphere ESXi

Issue/Introduction

免責事項： これは英文の記事「Alert hostd performance has degraded due to high system latency」の日本語訳です。記事はベストエフォートで翻訳を進めているため、ローカライズ化コンテンツは最新情報ではない可能性があります。最新情報は英語版の記事で参照してください。

症状：

• 一部のホストが応答不能になり、仮想マシンにアクセスできなくなります。
• 複数の ESXi ホストに対して vCenter から以下のようなアラームがトリガされます。
  Alarm 'Host error' on esxi host triggered by event 14803934 'Issue detected on hostname.domain.com in Datacenter: hostd performance has degraded due to high system latency'.
  
  
• ESXi ホストの /var/run/log/vmkernel.log には、以下のような警告メッセージが表示されます。
  

  <YYYY-MM-DD>T<time>Z In (182) vmkernel: cpu29:2097327)ScsiDeviceIO: 4656: Cmd(0x45bb42e5b880) 0xfe, cmdId.initiator=0x430a74fe9980 CmdSN 0x18a9db from world ####### to dev "naa.#######################" failed H:0x5 D:0x0 P:0x0. Cmd count Active:0
 
<YYYY-MM-DD>T<time>Z In (182) vmkernel: cpu7:2097305)ScsiDeviceIO: 4672: Cmd(0x45bb42e79280) 0xfe, CmdSN 0x18a9cf from world ####### to dev "naa.#######################" failed H:0x3 D:0x0 P:0x0

• ESXi ホストの動作が遅いため、ログの確認や esxcli コマンドの実行ができません。

Environment

VMware ESXi 6.x
VMware ESXi 7.x
VMware ESXi 8.x 

Cause

ESXi ホストのログを確認すると、ストレージアレイへのコマンド送信中に、1つ以上のストレージ LUN でタイムアウトが発生しています。
これは通常、ストレージアレイ、通信経路、または基盤となるインフラストラクチャに問題があることを示しており、パフォーマンスの低下や接続障害につながる可能性があります。

Host Status- [0x3] -TIME_OUT -->  このステータスは、アレイへのコマンドがタイムアウトしたときに返されます。

Resolution

• ESXi の動作が遅いためにアクセスできなくなっているすべての仮想マシンにアクセスするには、ホストを再起動してください。
• ストレージ/スイッチベンダーに連絡して、/var/run/log/vmkernel.log に記録された SCSI コマンドの失敗の原因を調査してください。

Additional Information

• SCSIセンスコードは、ストレージデバイスが詳細なエラー情報やステータス情報をイニシエータ（OS、HBA、またはハイパーバイザ）に報告するために使用されます。これらのコードを理解することは、ディスク、パス、またはアレイレベルの問題を診断する上で不可欠です。
• SCSIセンスコードの詳細については、次のドキュメントを参照してください:  Interpreting SCSI sense codes in VMware ESXi
• VMware ESXi ログから SCSI センスコードを人間が読みやすい説明にデコードするのに役立つオンラインユーティリティ: VMware ESXi SCSI Sense Code Decoder