watchdogタイムアウトにより、StorageGRID アプライアンスSG5700が予期せずリブートします
環境
- NetApp StorageGRID 11.5以降
- StorageGRIDアプライアンスSG5700
問題
- 1つ以上のノードで予期しないリブートが発生した場合のアラートEメール:
Unexpected node reboot (1 alert)
A node rebooted unexpectedly within the last 24 hours.
Recommended actions
1. Monitor this alert. The alert will be cleared after 24 hours. However, if the node reboots unexpectedly again, this alert will be triggered again.
2. If you cannot resolve the alert, there might be a hardware failure. Contact technical support.
________________________________________
dc1-sn1
Node dc1-sn1
Site DC1
Severity Major
Time triggered WKD MMM DD hh:mm:ss UTC YYYY
Job miscd
- リブートに至るまで、該当するノードで高いCPU利用率が報告されました。CPU使用率は 、StorageGRIDグリッドマネージャの[Nodes]ビュー、および([Support]>[Metrics])ノードビューまたはノード(内部使用)ビューで確認できます。
- watchdogタイムアウトが原因でノードがリブートされました:
- [1] 影響を受けるノードのログファイルとシステムデータの収集
- .tar.gzログファイルを展開します。
- crash dmesgファイルを探します。
base-os-logs\run\mount-tmp\pge-actv-root\var\log\storagegrid_crash_dmesg.YYYYMMDDhhmmss.log.gz
- crash dmesgファイルを展開して開き、watchdog タイムアウトが原因でノードがリブートされたことを確認します。
[sss.uuuuuu] fpga_pci: fpgaIsr: fpgaIsr fired, interruptCount = 1
[sss.uuuuuu] fpga_pci: fpgaIsr: fpgaIsr logging memory usage
...
[sss.uuuuuu] fpga_pci: fpgaIsr: fpgaIsr logging CPU backtrace
...
[sss.uuuuuu] fpga_pci: fpgaIsr: fpgaIsr logging blocked tasks
...
[sss.uuuuuu] fpga_pci: fpgaIsr: fpgaIsr logging all ftrace buffers
...
[sss.uuuuuu] fpga_pci: fpgaIsr: fpgaIsr serviced watchdog