仮想マシンの応答なしや動作遅延の結果、VSCSIリセットが発生する
search cancel

仮想マシンの応答なしや動作遅延の結果、VSCSIリセットが発生する

book

Article ID: 442161

calendar_today

Updated On:

Products

VMware vSphere ESXi

Issue/Introduction

免責事項:これは英文の記事「Virtual machines have become unresponsive or slow resulting in VSCSI resets」の日本語訳です。記事はベストエフォートで翻訳を進めているため、ローカライズ化コンテンツは最新情報ではない可能性があります。最新情報は英語版の記事で参照してください。

仮想マシンのパフォーマンスが低下するか、応答しなくなります。
ESXiホストの /var/run/log/vmkernel.log に、以下のようなログの抜粋が記録されます。

YYYY-MM-DDTHH:MM:SS.653Z cpu57:8916482)VSCSI: 2973: handle 38295998585421404(GID:xxxxx)(vscsi0:0):Added handle (refCnt = 3) to vscsiResetHandleList vscsiResetHandleCount = 1
YYYY-MM-DDTHH:MM:SS.653Z cpu14:2097732)VSCSI: 3226: handle 38295998585421404(GID:xxxxx)(vscsi0:0):processing reset for handle ... state 1381192707
YYYY-MM-DDTHH:MM:SS.653Z cpu14:2097732)VSCSI: 3335: handle 38295998585421404(GID:xxxxx)(vscsi0:0):Reset [Retries: 0/0] from (vmm0:TESTVM)
YYYY-MM-DDTHH:MM:SS.157Z cpu14:2097732)VSCSI: 3226: handle 38295998585421404(GID:xxxxx)(vscsi0:0):processing reset for handle ... state 1381192706
YYYY-MM-DDTHH:MM:SS.659Z cpu14:2097732)VSCSI: 3226: handle 38295998585421404(GID:xxxxx)(vscsi0:0):processing reset for handle ... state 1381192706
YYYY-MM-DDTHH:MM:SS.655Z cpu57:8916482)WARNING: VSCSI: 3967: handle 38295998585421404(GID:xxxxx)(vscsi0:0):WaitForCIF: Issuing reset;  number of CIF:4
YYYY-MM-DDTHH:MM:SS.655Z cpu57:8916482)WARNING: VSCSI: 2986: handle 38295998585421404(GID:xxxxx)(vscsi0:0):Ignoring double reset
YYYY-MM-DDTHH:MM:SS.864Z cpu3:2097732)VSCSI: 3226: handle 38295998585421404(GID:xxxxx)(vscsi0:0):processing reset for handle ... state 1381192706
YYYY-MM-DDTHH:MM:SS.367Z cpu3:2097732)VSCSI: 3226: handle 38295998585421404(GID:xxxxx)(vscsi0:0):processing reset for handle ... state 1381192706
YYYY-MM-DDTHH:MM:SS.840Z cpu3:2097732)VSCSI: 3226: handle 38295998585421404(GID:xxxxx)(vscsi0:0):processing reset for handle ... state 1381192706
YYYY-MM-DDTHH:MM:SS.840Z cpu3:2097732)VSCSI: 3335: handle 38295998585421404(GID:xxxxx)(vscsi0:0):Reset [Retries: 15/0] from (vmm0:TESTVM)
YYYY-MM-DDTHH:MM:SS.343Z cpu3:2097732)VSCSI: 3226: handle 38295998585421404(GID:xxxxx)(vscsi0:0):processing reset for handle ... state 1381192706

Environment

VMware vSphere ESXi (すべてのバージョン)

Cause

仮想マシンが配置されているデータストアで、I/Oの中断やリセットを含むパフォーマンスの低下が発生しています。
ESXiホストの /var/run/log/vmkernel.log および /var/run/log/vmkwarning.log に、以下のログの抜粋が記録されます。

YYYY-MM-DDTHH:MM:SS.653Z cpu16:2097877)WARNING: ScsiDeviceIO: 1513: Device naa.6000d31######################03 performance has deteriorated. I/O latency increased from average value of 8645 microseconds to 195723 microseconds.
YYYY-MM-DDTHH:MM:SS.653Z cpu16:2097877)WARNING: ScsiDeviceIO: 1513: Device naa.6000d31######################03 performance has deteriorated. I/O latency increased from average value of 8645 microseconds to 392920 microseconds.
YYYY-MM-DDTHH:MM:SS.653Z cpu11:2097872)WARNING: ScsiDeviceIO: 1513: Device naa.6000d31######################03 performance has deteriorated. I/O latency increased from average value of 8645 microseconds to 192213 microseconds.
YYYY-MM-DDTHH:MM:SS.653Z cpu8:2097869)WARNING: ScsiDeviceIO: 1513: Device naa.6000d31######################03 performance has deteriorated. I/O latency increased from average value of 8649 microseconds to 215719 microseconds.

YYYY-MM-DDTHH:MM:SS.653Z cpu0:2097227)ScsiDeviceIO: 4087: Cmd(0x45b8e4830848) 0x2a, cmdId.initiator=0x430a81c45900 CmdSN 0x8000007f from world 2105834 to dev "naa.6000d31######################03" failed H:0x8 D:0x0 P:0x0 Cancelled from device
YYYY-MM-DDTHH:MM:SS.653Z cpu31:2097483)ScsiDeviceIO: 4154: Cmd(0x45d8d6009d08) 0x28, cmdId.initiator=0x43062f340c80 CmdSN 0x80aec4f from world 2613488 to dev "naa.6000d31######################03" failed H:0x5 D:0x0 P:0x0 Cancelled from driver layer

Resolution

この問題は、基盤となるストレージの問題に起因している可能性があります。一時的な措置として、ホストの再起動を行い、問題が解決するかを確認します。
ストレージインフラストラクチャに潜む根本的な問題を診断・特定するために、ご利用のストレージベンダーに問い合わせることを推奨します。

Additional Information

Interpreting SCSI sense codes in VMware ESXi

"performance has deteriorated" messages in ESXi host logs

"state in doubt; requested fast path state update" error in ESXi