安装11g grid+red hat linux6.2到65%,向远程结点拷贝时,hang住

郑全

--安装grid到65%,向远程结点拷贝时,hang住

INFO: This variable PROD_HOME is not added to the global context map
INFO: ORACLE_HOME is not settable, hence not setting the value
INFO: {Parameter:TOPLEVEL_COMPONENT in {Aggregate:OuiConfigVariables:1.0.0.0.0:common}}: Parameter data type is not compatible with the provided String Array.
INFO: passing params to cf done
INFO: done saving info by cf
INFO: Updating files in Oracle home '/u01/app/grid/product/11.2.0/grid' to remote nodes 'idcdb2'.
INFO: InstallProgressMonitor: Starting phase 16
INFO: List of files to be excluded from:install/excludeFileList.txt
INFO: Updating files in Oracle home '/u01/app/grid/product/11.2.0/grid' to remote nodes 'idcdb2'.
INFO: Updating files in Oracle home '/u01/app/grid/product/11.2.0/grid' to remote nodes 'idcdb2'.
SEVERE: oracle.sysman.oii.oiip.oiipg.OiipgRemoteOpsException: Error in checking status of file '/tmp/OraInstall2012-09-30_12-53-44PM' on node 'idcdb2' . []
        at oracle.sysman.oii.oiip.oiipg.OiipgClusterOps.throwRemoteOpsException(OiipgClusterOps.java:2491)
        at oracle.sysman.oii.oiip.oiipg.OiipgClusterOps.fileExistsOnNode(OiipgClusterOps.java:2222)
        at oracle.sysman.oii.oiif.oiifw.OiifwClusterCopyWCCE.runPreCopyScriptOnNodes(OiifwClusterCopyWCCE.java:1225)
        at oracle.sysman.oii.oiif.oiifw.OiifwClusterCopyWCCE.doOperation(OiifwClusterCopyWCCE.java:503)
        at oracle.sysman.oii.oiif.oiifb.OiifbCondIterator.iterate(OiifbCondIterator.java:171)
        at oracle.sysman.oii.oiif.oiifw.OiifwActionsPhaseWCDE.doOperation(OiifwActionsPhaseWCDE.java:633)
        at oracle.sysman.oii.oiif.oiifb.OiifbLinearIterator.iterate(OiifbLinearIterator.java:147)
        at oracle.sysman.oii.oiic.OiicInstallAPISession$OiicAPISelCompsInstall.doOperation(OiicInstallAPISession.java:1058)
        at oracle.sysman.oii.oiif.oiifb.OiifbCondIterator.iterate(OiifbCondIterator.java:171)
        at oracle.sysman.oii.oiic.OiicInstallAPISession.doInstallAction(OiicInstallAPISession.java:642)
        at oracle.sysman.oii.oiic.OiicInstallAPISession.access$000(OiicInstallAPISession.java:88)
        at oracle.sysman.oii.oiic.OiicInstallAPISession$OiicActionsThread.run(OiicInstallAPISession.java:934)
Caused by: oracle.ops.mgmt.cluster.RemoteDirException:
        at oracle.ops.mgmt.nativesystem.UnixSystem.pathExists(UnixSystem.java:956)
        at oracle.ops.mgmt.cluster.Cluster.isExists(Cluster.java:1237)
        at oracle.sysman.oii.oiip.oiipg.OiipgClusterOps.fileExistsOnNode(OiipgClusterOps.java:2206)
        ... 10 more

INFO: Copying Oracle home '/u01/app/grid/product/11.2.0/grid' to remote nodes 'idcdb2'.
INFO: Copying Oracle home '/u01/app/grid/product/11.2.0/grid' to remote nodes 'idcdb2'.

[root@idcdb1 ~]# lsof -i
COMMAND     PID    USER   FD   TYPE DEVICE SIZE/OFF NODE NAME
portreser  4156    root    5u  IPv4  21806      0t0  UDP *:kerberos-iv
portreser  4156    root    7u  IPv4  21811      0t0  UDP *:783
rpcbind    4352     rpc    6u  IPv4  22372      0t0  UDP *:sunrpc
rpcbind    4352     rpc    7u  IPv4  22376      0t0  UDP *:cisco-tdp
rpcbind    4352     rpc    8u  IPv4  22377      0t0  TCP *:sunrpc (LISTEN)
rpcbind    4352     rpc    9u  IPv6  22379      0t0  UDP *:sunrpc
rpcbind    4352     rpc   10u  IPv6  22381      0t0  UDP *:cisco-tdp
rpcbind    4352     rpc   11u  IPv6  22382      0t0  TCP *:sunrpc (LISTEN)
avahi-dae  4567   avahi   13u  IPv4  23028      0t0  UDP *:mdns
avahi-dae  4567   avahi   14u  IPv4  23029      0t0  UDP *:53761
rpc.statd  4585 rpcuser    5r  IPv4  23717      0t0  UDP *:945
rpc.statd  4585 rpcuser    8u  IPv4  23723      0t0  UDP *:59037
rpc.statd  4585 rpcuser    9u  IPv4  23731      0t0  TCP *:38215 (LISTEN)
rpc.statd  4585 rpcuser   10u  IPv6  23735      0t0  UDP *:46142
rpc.statd  4585 rpcuser   11u  IPv6  23740      0t0  TCP *:40721 (LISTEN)
cupsd      4696    root    6u  IPv6  24119      0t0  TCP [::1]:ipp (LISTEN)
cupsd      4696    root    7u  IPv4  24120      0t0  TCP localhost:ipp (LISTEN)
cupsd      4696    root    9u  IPv4  24123      0t0  UDP *:ipp
sshd       4912    root    3u  IPv4  25416      0t0  TCP *:ssh (LISTEN)
sshd       4912    root    4u  IPv6  25419      0t0  TCP *:ssh (LISTEN)
qpidd      5044   qpidd   10u  IPv4  26096      0t0  TCP *:amqp (LISTEN)
cimserver  5189 cimsrvr    7u  IPv6  28489      0t0  TCP *:wbem-https (LISTEN)
sshd      20281    root    3r  IPv4  48880      0t0  TCP idcdb1:ssh->202.202.208.252:49276 (ESTABLISHED)
ntpd      37456     ntp   16u  IPv4  60630      0t0  UDP *:ntp
ntpd      37456     ntp   17u  IPv6  60631      0t0  UDP *:ntp
ntpd      37456     ntp   18u  IPv6  60635      0t0  UDP [fe80::217:a4ff:fe77:a]:ntp
ntpd      37456     ntp   19u  IPv6  60636      0t0  UDP [::1]:ntp
ntpd      37456     ntp   20u  IPv6  60637      0t0  UDP [fe80::217:a4ff:fe77:8]:ntp
ntpd      37456     ntp   21u  IPv6  60638      0t0  UDP [fe80::217:a4ff:fe77:2]:ntp
ntpd      37456     ntp   22u  IPv6  60639      0t0  UDP [fe80::217:a4ff:fe77:0]:ntp
ntpd      37456     ntp   23u  IPv6  60640      0t0  UDP [fe80::217:a4ff:fe77:6]:ntp
ntpd      37456     ntp   24u  IPv6  60641      0t0  UDP [fe80::217:a4ff:fe77:4]:ntp
ntpd      37456     ntp   25u  IPv4  60642      0t0  UDP localhost:ntp
ntpd      37456     ntp   26u  IPv4  60643      0t0  UDP idcdb1:ntp
ntpd      37456     ntp   27u  IPv4  60644      0t0  UDP idcdb1-priv:ntp
java      55877    grid    8u  IPv4  85682      0t0  TCP idcdb1:43890->202.202.208.252:x11 (ESTABLISHED)
sshd      65693    root    3r  IPv4 173993      0t0  TCP idcdb1:ssh->202.202.208.252:49412 (ESTABLISHED)
java      65815    grid    8u  IPv4 175620      0t0  TCP idcdb1:29914->202.202.208.252:x11 (ESTABLISHED)
rpc.statd 72662 rpcuser    5r  IPv4 223208      0t0  UDP *:nlogin
rpc.statd 72662 rpcuser    8u  IPv4 223212      0t0  UDP *:57428
rpc.statd 72662 rpcuser    9u  IPv4 223216      0t0  TCP *:25254 (LISTEN)
rpc.statd 72662 rpcuser   10u  IPv6 223220      0t0  UDP *:60919
rpc.statd 72662 rpcuser   11u  IPv6 223224      0t0  TCP *:46479 (LISTEN)
rpc.statd 72665 rpcuser    5r  IPv4 223342      0t0  UDP *:rxe
rpc.statd 72665 rpcuser    8u  IPv4 223346      0t0  UDP *:23848
rpc.statd 72665 rpcuser    9u  IPv4 223350      0t0  TCP *:35209 (LISTEN)
rpc.statd 72665 rpcuser   10u  IPv6 223354      0t0  UDP *:39532
rpc.statd 72665 rpcuser   11u  IPv6 223358      0t0  TCP *:49584 (LISTEN)
rpc.statd 72668 rpcuser    5r  IPv4 223478      0t0  UDP *:omserv
rpc.statd 72668 rpcuser    8u  IPv4 223482      0t0  UDP *:19495
rpc.statd 72668 rpcuser    9u  IPv4 223486      0t0  TCP *:57564 (LISTEN)
rpc.statd 72668 rpcuser   10u  IPv6 223490      0t0  UDP *:9568
rpc.statd 72668 rpcuser   11u  IPv6 223494      0t0  TCP *:63493 (LISTEN)

[root@idcdb1 grid]# lsof -i
COMMAND     PID    USER   FD   TYPE DEVICE SIZE/OFF NODE NAME
portreser  4156    root    5u  IPv4  21806      0t0  UDP *:kerberos-iv
portreser  4156    root    7u  IPv4  21811      0t0  UDP *:783
rpcbind    4352     rpc    6u  IPv4  22372      0t0  UDP *:sunrpc
rpcbind    4352     rpc    7u  IPv4  22376      0t0  UDP *:cisco-tdp
rpcbind    4352     rpc    8u  IPv4  22377      0t0  TCP *:sunrpc (LISTEN)
rpcbind    4352     rpc    9u  IPv6  22379      0t0  UDP *:sunrpc
rpcbind    4352     rpc   10u  IPv6  22381      0t0  UDP *:cisco-tdp
rpcbind    4352     rpc   11u  IPv6  22382      0t0  TCP *:sunrpc (LISTEN)
avahi-dae  4567   avahi   13u  IPv4  23028      0t0  UDP *:mdns
avahi-dae  4567   avahi   14u  IPv4  23029      0t0  UDP *:53761
rpc.statd  4585 rpcuser    5r  IPv4  23717      0t0  UDP *:945
rpc.statd  4585 rpcuser    8u  IPv4  23723      0t0  UDP *:59037
rpc.statd  4585 rpcuser    9u  IPv4  23731      0t0  TCP *:38215 (LISTEN)
rpc.statd  4585 rpcuser   10u  IPv6  23735      0t0  UDP *:46142
rpc.statd  4585 rpcuser   11u  IPv6  23740      0t0  TCP *:40721 (LISTEN)
cupsd      4696    root    6u  IPv6  24119      0t0  TCP [::1]:ipp (LISTEN)
cupsd      4696    root    7u  IPv4  24120      0t0  TCP localhost:ipp (LISTEN)
cupsd      4696    root    9u  IPv4  24123      0t0  UDP *:ipp
sshd       4912    root    3u  IPv4  25416      0t0  TCP *:ssh (LISTEN)
sshd       4912    root    4u  IPv6  25419      0t0  TCP *:ssh (LISTEN)
qpidd      5044   qpidd   10u  IPv4  26096      0t0  TCP *:amqp (LISTEN)
cimserver  5189 cimsrvr    7u  IPv6  28489      0t0  TCP *:wbem-https (LISTEN)
sshd      20281    root    3r  IPv4  48880      0t0  TCP idcdb1:ssh->202.202.208.252:49276 (ESTABLISHED)
java      55877    grid    8u  IPv4  85682      0t0  TCP idcdb1:43890->202.202.208.252:x11 (ESTABLISHED)
sshd      65693    root    3r  IPv4 173993      0t0  TCP idcdb1:ssh->202.202.208.252:49412 (ESTABLISHED)
rpc.statd 72662 rpcuser    5r  IPv4 223208      0t0  UDP *:nlogin
rpc.statd 72662 rpcuser    8u  IPv4 223212      0t0  UDP *:57428
rpc.statd 72662 rpcuser    9u  IPv4 223216      0t0  TCP *:25254 (LISTEN)
rpc.statd 72662 rpcuser   10u  IPv6 223220      0t0  UDP *:60919
rpc.statd 72662 rpcuser   11u  IPv6 223224      0t0  TCP *:46479 (LISTEN)
rpc.statd 72665 rpcuser    5r  IPv4 223342      0t0  UDP *:rxe
rpc.statd 72665 rpcuser    8u  IPv4 223346      0t0  UDP *:23848
rpc.statd 72665 rpcuser    9u  IPv4 223350      0t0  TCP *:35209 (LISTEN)
rpc.statd 72665 rpcuser   10u  IPv6 223354      0t0  UDP *:39532
rpc.statd 72665 rpcuser   11u  IPv6 223358      0t0  TCP *:49584 (LISTEN)
rpc.statd 72668 rpcuser    5r  IPv4 223478      0t0  UDP *:omserv
rpc.statd 72668 rpcuser    8u  IPv4 223482      0t0  UDP *:19495
rpc.statd 72668 rpcuser    9u  IPv4 223486      0t0  TCP *:57564 (LISTEN)
rpc.statd 72668 rpcuser   10u  IPv6 223490      0t0  UDP *:9568
rpc.statd 72668 rpcuser   11u  IPv6 223494      0t0  TCP *:63493 (LISTEN)
ntpd      73301     ntp   16u  IPv4 251390      0t0  UDP *:ntp
ntpd      73301     ntp   17u  IPv6 251391      0t0  UDP *:ntp
ntpd      73301     ntp   18u  IPv6 251395      0t0  UDP [fe80::217:a4ff:fe77:a]:ntp
ntpd      73301     ntp   19u  IPv6 251396      0t0  UDP [::1]:ntp
ntpd      73301     ntp   20u  IPv6 251397      0t0  UDP [fe80::217:a4ff:fe77:8]:ntp
ntpd      73301     ntp   21u  IPv6 251398      0t0  UDP [fe80::217:a4ff:fe77:2]:ntp
ntpd      73301     ntp   22u  IPv6 251399      0t0  UDP [fe80::217:a4ff:fe77:0]:ntp
ntpd      73301     ntp   23u  IPv6 251400      0t0  UDP [fe80::217:a4ff:fe77:6]:ntp
ntpd      73301     ntp   24u  IPv6 251401      0t0  UDP [fe80::217:a4ff:fe77:4]:ntp
ntpd      73301     ntp   25u  IPv4 251402      0t0  UDP localhost:ntp
ntpd      73301     ntp   26u  IPv4 251403      0t0  UDP idcdb1:ntp
ntpd      73301     ntp   27u  IPv4 251404      0t0  UDP idcdb1-priv:ntp
java      73746    grid    8u  IPv4 258806      0t0  TCP idcdb1:30086->202.202.208.252:x11 (ESTABLISHED)
java      73746    grid   34u  IPv6 293706      0t0  TCP idcdb1:56694->idcdb2:60584 (ESTABLISHED)

 

郑全

解决办法

1、首先检查各节点目录权限，发现并无问题

2、检查两节点ssh等效性，发现并无问题；

3、检查网络配置，发现是由于远程节点开启有防火墙导致：

[02:02:04root@rhel6_2 grid]>service iptables status

Table: filter

Chain INPUT (policy ACCEPT)

num target prot opt source destination

1 ACCEPT all -- 0.0.0.0/0 0.0.0.0/0 state RELATED,ESTABLISHED

2 ACCEPT icmp -- 0.0.0.0/0 0.0.0.0/0

3 ACCEPT all -- 0.0.0.0/0 0.0.0.0/0

4 ACCEPT tcp -- 0.0.0.0/0 0.0.0.0/0 state NEW tcp dpt:22

5 REJECT all -- 0.0.0.0/0 0.0.0.0/0 reject-with icmp-host-prohibited

Chain FORWARD (policy ACCEPT)

num target prot opt source destination

1 REJECT all -- 0.0.0.0/0 0.0.0.0/0 reject-with icmp-host-prohibited

Chain OUTPUT (policy ACCEPT)

num target prot opt source destination

[02:09:04root@rhel6_2 grid]>service iptables stop

iptables: Flushing firewall rules: [ OK ]

iptables: Setting chains to policy ACCEPT: filter [ OK ]

iptables: Unloading modules: [ OK ]

[02:09:08root@rhel6_2 grid]>service iptables stop

[02:09:11root@rhel6_2 grid]>chkconfig iptables off

通过以上命令关闭节点2的防火墙后，重新安装恢复正常,且在65%阶段通过lsof可发现如下联结信息：

[02:10:46root@rhel6_1 rpm]>lsof -i

COMMAND PID USER FD TYPE DEVICE SIZE/OFF NODE NAME

sshd 1542 root 3u IPv4 9026 0t0 TCP *:ssh (LISTEN)

sshd 1542 root 4u IPv6 9028 0t0 TCP *:ssh (LISTEN)

master 1619 root 12u IPv4 9269 0t0 TCP localhost:smtp (LISTEN)

master 1619 root 13u IPv6 9271 0t0 TCP localhost:smtp (LISTEN)

sshd 1684 root 3u IPv4 9547 0t0 TCP rhel6_1:ssh->sun:59280 (ESTABLISHED)

sshd 1738 root 3u IPv4 9718 0t0 TCP rhel6_1:ssh->sun:59311 (ESTABLISHED)

sshd 1740 ora11 3u IPv4 9718 0t0 TCP rhel6_1:ssh->sun:59311 (ESTABLISHED)

sshd 10358 root 3u IPv4 52172 0t0 TCP rhel6_1:ssh->sun:60848 (ESTABLISHED)

java 16079 ora11 8u IPv4 89026 0t0 TCP rhel6_1:29996->sun:x11 (ESTABLISHED)

java 16079 ora11 22u IPv6 122214 0t0 TCP rhel6_1:17951->rhel6_2:52871 (ESTABLISHED)