一、安裝環境

操作系統版本：IBM AIX 7100-03-05-1524

ORACLE版本：ORACLE DATABASE 12C 12.1.0.2.0-64BIT RAC

二、安裝報錯

該環境安裝的為12c RAC，在節點一執行root.sh腳本時，出現如下信息：

2018/03/29 17:11:43 CLSRSC-330: ADDing clusterware entries to file '/etc/inittab'
2018/03/29 17:13:49 CLSRSC-214: Failed to start the resource 'ohasd'
Failed to start the Clusterware. Last 20 lines of the alert log follow:  --再無信息輸出

ohasd服務無法啟動，查看$ORACLE_HOME/cfgtoollogs/oui/目錄下的安裝日誌，並沒有發現任何有用的報錯信息，日誌信息如下：

2018-03-29 17:11:48: Done updating /etc/inittab.tmp
2018-03-29 17:11:48: Saved /etc/inittab.crs
2018-03-29 17:11:48: Installed new /etc/inittab
2018-03-29 17:11:48: Executing /user/sbin/init g
2018-03-29 17:11:48: Executing cmd: /user/sbin/init g
2018-03-29 17:11:48: Executing cmd: /oracle/app/12.1.0/grid/bin/crsctl start has
2018-03-29 17:13:49: Command output:
> CRS-4124: Oracle High Availability Services startup failed. 
> CRS-4000: Command Start failed, or completed with errors.
>End Command output
2018-03-29 17:13:49: Executing  /etc/ohasd install
2018-03-29 17:13:49: Executing cmd: /etc/ohasd install
2018-03-29 17:13:49: Executing cmd: /oracle/app/12.1.0/grid/bin/clsecho -p has -f clsrsc -m 214
2018-03-29 17:13:49: Command output:
> CLSRSC-214: Failed to start the resource 'ohasd'
>End Command output
2018-03-29 17:13:49: Executing cmd: /oracle/app/12.1.0/grid/bin/clsecho -p has -f clsrsc -m 214
2018-03-29 17:13:49: Command output:
> CLSRSC-214: Failed to start the resource 'ohasd'
>End Command output
2018-03-29 17:13:49: CLSRSC-214: Failed to start the resource 'ohasd'
2018-03-29 17:13:49: ohasd failed to start
2018-03-29 17:13:49: Alert log is /oracle/app/12.1.0/grid/log/node1/alertnode1.log
2018-03-29 17:13:49: Failed to start service 'ohasd'
2018-03-29 17:13:49: Checking the status of ohasd
2018-03-29 17:13:49: Configured CRS Home: /oracle/app/12.1.0/grid
2018-03-29 17:13:49: Eexcuting cmd: /oracle/app/12.1.0/grid/bin/crsctl check has
2018-03-29 17:13:49: Checking the status of ohasd
2018-03-29 17:13:49: Eexcuting cmd: /oracle/app/12.1.0/grid/bin/crsctl check has
2018-03-29 17:13:49: Checking the status of ohasd

再查看告警日誌/oracle/app/12.1.0/grid/log/node1/alertnode1.log無任何的信息輸出，再接著查看/u/app/11.2.0/grid/log/node1/ohasd/ohasd.log等其它日誌，也都無信息輸出。

嘗試手動拉起ohasd進程，報錯，無法拉起：

[root@node1 bin]# ps -ef|grep d.bin

root 1245784 1 0 21:33:04 - 0:00 /oracle/app/12.1.0/grid/bin/ohasd.bin reboot

root 1311392 16394110 0 21:37:31 pts/2 0:00 grep d.bin

[root@node1 bin]# ./oracle/app/12.1.0/grid/bin/crsctl start has

CRS-4124: Oracle High Availability Services startup failed.

CRS-4000: Command Start failed, or completed with errors.

嘗試通過腳本roothas.pl取消root.sh腳本所註冊的信息：

[root@node1 bin]# /oracle/app/12.1.0/grid/grid/crs/install/rootcrs.pl -deconfig -verbose -force

再執行root.sh腳本，依舊無法通過：

[root@node1 bin]# /oracle/app/12.1.0/grid/root.sh

三、報錯分析

因為各日誌都無有效的報錯信息輸出，可以說是不報錯，於是猜想如下幾種原因：

1、 oracle安裝包在下載和解壓縮過程中存在損壞或丟失文件？

l 通過對比官網文件大小，和解壓縮過程的輸出記錄，該情況的可能性較小。

2、12.1.0.2未在該操作系統（IBM AIX on POWER Systems (64-bit) 7.1）上未認證？

l 例如：11.2.0.2未認證RedHat 6.x系統，11.2.0.3未認證RedHat 7.x系統，11g及之前的版本可通過metelink文檔（ID 169706.1）查詢認證的操作系統版本，12c可通過metelink文檔（ID 587357.1 / ID 2226599.1中文）查詢，Oracle Database 12.1.0.2.0 已在 IBM AIX on POWER Systems (64-bit) 7.1 上已通過認證。

3、忽略了安裝檢查中的安裝要求選項，如系統包，內核參數配置？

l 在安裝過程中，忽略了一些非必要的安裝要求項，於是對系統參數設置和系統包的安裝再核查了一遍，並未發現問題，而且如果是因為這個原因，應該是有報錯信息輸出的，所以該情況的可能性也是極小的。

4、操作系統底層進程或設置阻塞ohasd服務的運行？

l 我們都知道在oracle數據庫裏，經常出現會話阻塞的情況，一般都是找出阻塞會話的源頭進行處理，在操作系統層，也會出現進程間通信互相阻塞的情況，基於這個，該種情況的可能性是最大的。

四、猜想驗證

既然很大可能是OS層進程間通信互相阻塞導致的，那麽有什麽辦法去驗證呢?

OS上truss是非常有用的工具，通過OS系統級別跟蹤一個進程的系統調用或信號產生的情況，能快速定位並解決問題。

通過truss追蹤runcluvfy.sh檢查安裝過程的系統進程調用情況：

truss –o truss_runcluvfy.out ./runcluvfy.sh stage -pre crsinst -n node1,node2 -fixup -verbose

2163566:psargs:/bin/sh ./runcluvfy.sh stage -pre crsinst -n node1, node2 -fixup -verbose
Thu Mar 29 21:24:36 2018
2163566: 4588341:0.0000: kwaitpid(0x00000000, 0, 0, 0x00000000, 0x00000000) (sleeping...) 
#以下為關鍵ohasd進程阻塞等待信息
1245784: 3998277: 0.0003:  _nsleep(0x0FFFFFFFFFFFF540, 0x0FFFFFFFFFFFF610) = 0
1245784: 3998277: 1.0003: kopen("/tmp/.oracle/opohasd", O+WRONLY|O_NONBLOCK) Err#6 ENXIO
1245784: 3998277: 0.0003:  _nsleep(0x0FFFFFFFFFFFF540, 0x0FFFFFFFFFFFF610) = 0
1245784: 3998277: 1.0003: kopen("/tmp/.oracle/opohasd", O+WRONLY|O_NONBLOCK) Err#6 ENXIO
1245784: 3998277: 0.0004:  _nsleep(0x0FFFFFFFFFFFF540, 0x0FFFFFFFFFFFF610) = 0
1245784: 3998277: 1.0004: kopen("/tmp/.oracle/opohasd", O+WRONLY|O_NONBLOCK) Err#6 ENXIO

根據truss追蹤到信息，然後在metelink上查詢相關信息，終於找到如下對應的文檔：OHASD FAILED TO START: A SPECIFIED FILE DOES NOT SUPPORT THE IOCTL SYSTEM CALL (文檔 ID 1537338.1)

然後查詢節點一和節點二/etc/inittab內容，果然存在該信息：

[root@node1 bin]# grep install /etc/inittab

install_assist:2:wait:/usr/sbin/install_assist </dev/console >/dev/console 2>&1

install_assist是系統的安裝助手，是交互式工具，即假如沒有響應，則會一直等待，那麽在該行後面的命令將不會被執行，也就是說rc2.d（默認運行級別為2）下的服務將不會被啟動，這也就是無法啟動ohasd服務的真兇。

五、問題解決

將/etc/inittab裏面的install_assist的一行註釋掉或清理掉，重啟系統，然後重新執行root.sh，數據庫順利安裝。

[root@node1 bin]# grep install /etc/inittab

#install_assist:2:wait:/usr/sbin/install_assist </dev/console >/dev/console 2>&1

六、總結

因為操作系統是緊急安裝上線的（數據庫也要求緊急安裝上線），安裝系統完成之後沒有把 install_assist 禁用，ohasd進程在這進程的後面，所以一直在等待，沒有啟動。該案例可作為參考，在AIX環境安裝數據庫時，先檢查/etc/inittab文件內容，先將install_assist 禁用。

aix7.1安裝12c執行root.sh無法啟動ohasd服務案例