从ONTAP 9.8升级到9.10.1或更高版本后、所有节点上的MGWD集群服务发生崩溃/重新启动
适用场景
- ONTAP
- 从ONTAP 9.8或9.9的某些版本升级到9.10.1或更高版本
问题描述
mgmt在将一个或多个节点升级到ONTAP 9.10.1后、集群应用程序会在所有节点上不断重新启动并在脱机和联机之间来回切换
clus1::*> cluster ring show
Node UnitName Epoch DB Epoch DB Trnxs Master Online
--------- -------- -------- -------- -------- --------- ---------
clus1-01 mgmt 0 1208 45 - offline
clus1-01 vldb 32 32 525821 clus1-01 master
clus1-01 vifmgr 104 104 889174 clus1-01 master
clus1-01 bcomd 32 32 2879 clus1-01 master
clus1-01 crs 32 32 745 clus1-01 master
clus1-02 mgmt 0 1208 45 - offline
clus1-02 vldb 32 32 525821 clus1-01 secondary
clus1-02 vifmgr 104 104 889174 clus1-01 secondary
clus1-02 bcomd 32 32 2879 clus1-01 secondary
clus1-02 crs 32 32 745 clus1-01 secondary
clus1-03 mgmt 0 1208 45 - offline
clus1-03 vldb 32 32 525821 clus1-01 secondary
clus1-03 vifmgr 104 104 889174 clus1-01 secondary
clus1-03 bcomd 32 32 2879 clus1-01 secondary
clus1-03 crs 32 32 745 clus1-01 secondary
clus1-04 mgmt 0 1208 45 - offline
clus1-04 vldb 32 32 525821 clus1-01 secondary
clus1-04 vifmgr 104 104 889174 clus1-01 secondary
clus1-04 bcomd 32 32 2879 clus1-01 secondary
clus1-04 crs 32 32 745 clus1-01 secondary
- 由于其他集群应用程序仍保持联机状态，因此仍会继续提供数据，尽管在管理脱机时节点将无法看到聚合的状态(
aggr show将报告处于状态的其他节点上的聚合unknown)，并且 可能会报告如下消息：
Info: Node clus1-04 that hosts aggregate aggr1 is offline
- MGWD日志显示以下项的SQL插入错误
sp_cap_rdb：
[kern_mgwd:info:2136] 0x828839500: SQL error: "INSERT INTO sp_cap_rdb(rowid, _epoch, _tid, [node], [nodeid], [id], [version]) VALUES (-350277020502054092, 828, 141, 'clus1-04', 'xxxxxxxx-xxxx-xxxx-xxxx-xxxxxxxxxxxx', 33, 2);" UNIQUE constraint failed: sp_cap_rdb.node, sp_cap_rdb.id(19)
[kern_mgwd:info:2136] 0x828839500: 0: ERR: SQL_CONTEXT: execute_sql:src/sql_context.cc:836 SQL: failed on connection 0x81efa7308: UNIQUE constraint failed: sp_cap_rdb.node, sp_cap_rdb.id(19), txn: 'saveTxnChanges:sp_cap_rdb create',active_connection: 0x81efa7308, active_thread: 0x828839500, active_label: 'saveTxnChanges:sp_cap_rdb create', stmt: "INSERT INTO sp_cap_rdb(rowid, _epoch, _tid, [node], [nodeid], [id], [version]) VALUES (-350277020502054092, 828, 141, 'clus1-04', 'xxxxxxxx-xxxx-xxxx-xxxx-xxxxxxxxxxxx', 33, 2);"
[kern_mgwd:info:2136] E [src/rdb/sql_local_unit.cc 5116 (0x828839500)]: saveTxnChanges: failed to execute SQL: 'INSERT INTO sp_cap_rdb(rowid, _epoch, _tid, [node], [nodeid], [id], [version]) VALUES (-350277020502054092, 828, 141, 'clus1-04', 'xxxxxxxx-xxxx-xxxx-xxxx-xxxxxxxxxxxx', 33, 2);'.
[kern_mgwd:info:2136] W [src/rdb/sql_local_unit.cc 5288 (0x828839500)]: saveTxnChanges: abandoning due to INTERNAL_ERROR.