fcghr 发表于 2016-1-7 00:35:17

VMware Server 2.0+RHEL5+Oracle RAC注意事项

网上有很多关于在VMWare server 2.x上安装RED HAT ENTERPRISE LINUX 5虚拟机(以下简称RHEL5),实现oracle rac的文章,参考http://hi.baidu.com/ggb98/blog/item/749e2554803b7dc3b745aebe.html。这篇文章已经介绍得很详细,以下为几点补充。
      首先,安装、配置好linux后,在安装Oracle Clusterware以前,建议将虚拟机节点目录备份,今后无论是重装,还是增加新的Oracle RAC节点,都可以此副本作为安装起点,避免安装、配置linux的繁琐步骤。当然,如果是新增节点,不要忘记修改虚拟机.vmx文件、/home/oracle/.bash_profile、/etc/hosts中的设置。
      其次,oracle cluster的ocr、votingdisk、asm必须在共享存储中,所以不能在VMWare server 2.x的“Create Virtual Machine”向导中上创建虚拟磁盘,因为向导中创建的虚拟磁盘并非共享的,而是各虚拟机节点独有的,这会导致安装完oracle cluster后,在第二个节点上运行root.sh报错:
      Failure at final check of Oracle CRS stack
      这时,运行两个节点上crs安装目录下的bin/ocrcheck.sh或bin/cluvfy.sh,显示两个节点的ocr的id属性不相等(ID值必须相等),导致cluster安装失败。
      应该使用VMware/VMware Server目录下的vmware-vdiskmanager,在命令行创建虚拟磁盘,然后在两个虚拟机的vmx文件中,分别指定这些虚拟磁盘:

scsi1.present = "TRUE"
scsi1.virtualDev = "lsilogic"
scsi1.sharedBus = "virtual"
scsi1:1.present = "TRUE"
scsi1:1.mode = "independent-persistent"
scsi1:1.filename = "c:\vmwareshares\votingdisk.vmdk"
scsi1:1.deviceType = "disk"
scsi1:2.present = "TRUE"
scsi1:2.mode = "independent-persistent"
scsi1:2.filename = "c:\vmwareshares\ocr.vmdk"
scsi1:2.deviceType = "disk"
scsi1:3.present = "TRUE"
scsi1:3.mode = "independent-persistent"
scsi1:3.filename = "c:\vmwareshares\asm.vmdk"
scsi1:3.deviceType = "disk"
disk.locking = "false"
diskLib.dataCacheMaxSize = "0"
diskLib.dataCacheMaxReadAheadSize = "0"
diskLib.DataCacheMinReadAheadSize = "0"
diskLib.dataCachePageSize = "4096"
diskLib.maxUnsyncedWrites = "0"


      以上配置内容中,scsi1.sharedBus设置为"virtual",c:\vmwareshares\votingdisk.vmdk、c:\vmwareshares\ocr.vmdk、c:\vmwareshares\asm.vmdk为vmware-vdiskmanager创建的虚拟磁盘,被两个虚拟机节点共享。
      第三,注意在cluster安装向导界面中,当提示设置CRS安装目录/名称时,不要将CRS安装目录/名称和数据库的安装目录/名称混淆,CRS安装目录/名称一般设置为:
      /opt/ora10g/product/10.2.0/crs_1和Ora10Crs_home
      数据库安装目录/名称一般设置为:
      /opt/ora10g/product/10.2.0/db_1和Ora10Db_Home
      两者在/opt/ora10g/product/10.2.0下同一层不同子目录中,不能安装在同一子目录下或有包含关系,否则后面安装数据库时会报错。请在安装向导界面中看清楚,不能一味按"next"。本人在安装Clusterware时,安装界面默认的安装目录是/opt/ora10g/product/10.2.0/db_1,应该改为/opt/ora10g/product/10.2.0/crs_1
      第四,当用dbca创建数据库时,可能会有出现以下错误提示窗口:
      ORA-27504: IPC error creating OSD context
      ORA-27300: OS system dependent operation:skgxpcini failed with status: 0
      ORA-27301: OS failure message: Error 0
      ORA-27302: failure occurred at: past_inmemor
      若发生以上错误,先退出dbca界面,在命令行运行oifcfg getif,返回类似以下内容:
      eth0   192.168.1.0 global public
      eth1   10.10.17.0 global cluster_interconnect
      virbr0   192.168.122.0global cluster_interconnect
      多了一个cluster_interconnect,须将virbr0一行删除,为此,运行oifcfg delif -global virbr0,然后再次运行oifcfg getif,返回如下:
      eth0   192.168.1.0 global public
      eth1   10.10.17.0 global cluster_interconnect
      virbr0一行已删除,然后重新运行dbca。
      第五,当oracle rac全部安装完后,必须测试负载均衡(load balance)和故障切换(failover)功能在两个节点间能否实现。
      在数据库连接客户端的tnsnames.ora中设置:

RACDB =
(DESCRIPTION =
(load_balance = yes)
(FAILOVER = on)
(ADDRESS = (PROTOCOL = TCP)(HOST = 192.168.1.103)(PORT = 1521))
(ADDRESS = (PROTOCOL = TCP)(HOST = 192.168.1.104)(PORT = 1521))
(CONNECT_DATA =
(SERVER = DEDICATED)
(SERVICE_NAME = RACDB)
(failover_mode = (type = select)(method = basic))
)
)


      在两个虚拟机节点上的oracle的tnsnames.ora中设置:

RACDB =
(DESCRIPTION =
(load_balance = yes)
(FAILOVER = on )
(ADDRESS = (PROTOCOL = TCP)(HOST = node1-vip)(PORT = 1521))
(ADDRESS = (PROTOCOL = TCP)(HOST = node2-vip)(PORT = 1521))
(CONNECT_DATA =
(SERVER = DEDICATED)
(SERVICE_NAME = RACDB)
(failover_mode = (type = select)(method = basic))
)
)

      其中node1-vip和node2-vip对应两个节点的虚拟ip
      按以上设置后,负载均衡和故障切换将能正常实现。可试着开多个sqlplus,分别运行:
    select instance_number, instance_name, host_name from v$instance;   
      从返回记录可以看出,sqlplus分摊到两个节点上,实现负载均衡。若所有sqlplus连接到同一个节点,试着在另一个节点上重启监听器:
      lsnrctl stop
      lsnrctl start
      然后再看负载均衡是否正常。
      在虚拟机节点上用以下命令停止/启动一个节点上的实例,看故障切换是否正常:
    srvctl stop instance -d racdb -i racdb1
    srvctl start instance -d racdb -i racdb1
      当某个节点上的实例停止后,上面的sql应返回另一个节点的instance_number/instance_name/host_name
      第六,如果需要增加新的RAC节点,可按本文开头安装、配置好linux后的副本作为起点,先修改新节点的/etc/hosts文件,加入新节点的ip、priv ip、vip,接着在RAC主节点的$Ora10Crs_home/oui/bin/目录下,以oracle用户执行addNode.sh,按向导提示操作,添加新的crs节点。然后主节点的$Ora10gDb_/oui/bin目录下,以oracle用户执行addNode.sh,按向导提示操作,添加新的db节点。最后在主节点上运行dbca,将新节点上的实例添加到集群。
参考http://www.bitscn.com/pdb/oracle/200904/160414_2.html。
      最后一点,首次安装RAC,安装失败几乎不可避免,由于步骤繁多,需要格外仔细。如果安装报错,请参考本文开头的URL中的文章。如果不得已需要重装,请按照oracle metalinke 239998.1中的步骤,删除各节点上的crs。如果没有删干净,重装很可能无法进行下去。
页: [1]
查看完整版本: VMware Server 2.0+RHEL5+Oracle RAC注意事项