记一次故障：CRS-0804:Cluster Ready Service aborted due to Oracle Cluster Registry error

环境

操作系统版本：linux 7

数据库版本 11.2.0.4 rac

现象：

集群启动后，HAIP状态一直是OFFLINE状态，手动启动也报错，crsd进程也启动失败，手动启动也失败。查看集群日志，日志中出现

CRS-5818:Aborted command 'start' for resource 'ora.cluster_interconnect.haip'.

[ohasd(4954)]CRS-2757:Command 'Start' timed out waiting for response from the resource 'ora.cluster_interconnect.haip'.

CRS-0804:Cluster Ready Service aborted due to Oracle Cluster Registry error [PROC-44: Error in network address and interface operations Network address and interface operations
error [7]].

原因：

HAIP使用的私有网卡虽然状态正常但是无法工作。

处理方法

1、通过ifconfig命令查看私网网卡的工作状态，结果显示网卡上IP地址已存在，但是状态为UP没有RUNNING

2、通过ethtool 网卡名称检查网卡的工作状态，显示link detected no

3、跟主机人员确认，网卡线拔掉，重新插上后，显示link detected yes，集群能正常启动