ディスク利用率が高いため、Flash Cacheが挿入されず、ユーザの速度が低下している
環境
- ONTAP 9
- NVMeベースのFlash Cacheを搭載したAll FASシステム
問題
- HAペアの一方または両方のノードでFlash Cacheの挿入が停止している可能性がある
- 挿入が停止した場合:
- ディスク利用率が100%またはそれに近い
- レイテンシが通常の0~5ミリ秒から20ms以上に増加
- 注: インサートが停止しない場合がありますが、
Insertq_save
以下のエラーは大量に抑制されます。
- 挿入が停止した場合:
例: node2
次の stats show -p flexscale-access
アドバンスコマンドを使用したゼロインサート
Cluster::> set -privilege advanced Cluster::*> node run -node * stats show -p flexscale-access Node: node1 Usage Hit Meta Miss Hit Evict Inval Insert Chain Blocks Chain Blocks Replaced % /s /s /s % /s /s /s /s /s /s /s /s 88 873 91 427 67 194 0 1426 430 895 22 1432 430 88 711 254 480 59 0 884 0 418 732 0 0 418 88 534 106 404 56 0 0 0 247 542 0 0 247 88 640 100 528 54 88 0 766 279 657 12 793 279 ^c Node: node2 Cache Reads Writes Disk Reads Usage Hit Meta Miss Hit Evict Inval Insert Chain Blocks Chain Blocks Replaced % /s /s /s % /s /s /s /s /s /s /s /s 63 1653 7 6481 20 0 9 0 0 0 0 0 266 63 3902 23 7859 33 0 0 0 0 0 0 0 428 63 2331 12 6462 26 0 0 0 0 0 0 0 330 63 1130 6 7013 13 0 23 0 0 0 0 0 171 63 1684 5 8037 17 0 0 0 0 0 0 0 246
- これらのエラーメッセージはイベントログに表示され、10分以内に数万回から数百万回省略されます。
- 10分以内に数十万または数百万が削減された場合、これはシグネチャです。それ以外の場合は 正常であり、無視される可能性があります。
Wed Aug 10 03:03:37 UTC [node2: wafl_exempt08: ems.engine.suppressed:debug]: Event 'extCache.io.writeError' suppressed 1638001 times in last 610 seconds. Wed Aug 10 03:03:37 UTC [node2: wafl_exempt06: extCache.io.writeError:notice]: WAFL external cache I/O write error: Insertq_save: unable to set up context chain, code 0.
- カードのステータスは
ok
でsysconfig -a
、障害がないことを示しています。
slot 1: Flash Cache NVMe Serial Number: ZEP00GPR Part Number: 119-00329 Hardware Revision: A0 Firmware Version: NA03 Model Name: X3311A Capacity: 1024 GB State: ok
- 次のパニック文字列のように、システムがパニック状態になる可能性があります。
Panic_Message: received completion for unknown cmd in process irq287: nvme1 on release 9.8P14 (C)
- この処理のあと、Flash Cacheは最終的に障害状態と表示されることがあります
slot 3: Flash Cache NVMe Serial Number: 1234567890 Part Number: 119-00329 Hardware Revision: A0 Firmware Version: NA03 Firmware File: X3311_S000PM963NVM Model Name: X3311A Capacity: 1024 GB State: failed