Step-By-Step在AIX上安装Oracle RAC

2.3 同步群集拓扑
在进行同步之前需要在"/" 目录下创建".rhosts" 文件.   
  ".rhosts" 文件样例:
      node1 root
      node2 root
保证"/.rhosts" 文件的权限是 600.   
   # chmod 600 /.rhosts
使用"rcp" 命令在每个节点上测试:
   在node1上:
     # rcp /etc/group node2:/tmp
   在node2上:
     # rcp /etc/group node1:/tmp

同步群集拓扑：
  Smit HACMP ->; Cluster Configuration ->; Cluster Topology ->; Synchronize Cluster Topology
快捷路径:
  # smit configchk.dialog

2.4 配置群集资源组
在RAC的配置中仅需要一个资源组。这个资源组就是共享卷组的并行资源组：
1)使用lspv检查是否目标硬盘被物理连接到群集中的两个节点
2.4.1 在一个节点上创建并行卷组
  # smit vg  并选择"Add a Volume Group"
在打开的界面中设定该卷组为并行卷组，禁止卷组的自动启动和并行模式的自动激活，务必保证 major number 在所有节点中相同
2.4.2 如果不使用GPFS，则创建共享的 RAW Logical Volumes
  mklv -y'db_name_cntrl1_110m' -w'n' -s'n' -r'n' usupport_vg 4 hdisk5
  mklv -y'db_name_cntrl2_110m' -w'n' -s'n' -r'n' usupport_vg 4 hdisk5
  mklv -y'db_name_system_400m' -w'n' -s'n' -r'n' usupport_vg 13 hdisk5
  mklv -y'db_name_users_120m' -w'n' -s'n' -r'n' usupport_vg  4 hdisk5
  mklv -y'db_name_drsys_90m' -w'n' -s'n' -r'n' usupport_vg 3 hdisk5
  mklv -y'db_name_tools_12m' -w'n' -s'n' -r'n' usupport_vg 1 hdisk5
  mklv -y'db_name_temp_100m' -w'n' -s'n' -r'n' usupport_vg 4 hdisk5
  mklv -y'db_name_undotbs1_312m' -w'n' -s'n' -r'n' usupport_vg 10 hdisk5
  mklv -y'db_name_undotbs2_312m' -w'n' -s'n' -r'n' usupport_vg 10 hdisk5
  mklv -y'db_name_log11_120m' -w'n' -s'n' -r'n' usupport_vg 4 hdisk5
  mklv -y'db_name_log12_120m' -w'n' -s'n' -r'n' usupport_vg 4 hdisk5
  mklv -y'db_name_log21_120m' -w'n' -s'n' -r'n' usupport_vg 4 hdisk5
  mklv -y'db_name_log22_120m' -w'n' -s'n' -r'n' usupport_vg 4 hdisk5
  mklv -y'db_name_indx_70m' -w'n' -s'n' -r'n' usupport_vg 3 hdisk5
  mklv -y'db_name_cwmlite_100m' -w'n' -s'n' -r'n' usupport_vg 4 hdisk5
  mklv -y'db_name_example_160m' -w'n' -s'n' -r'n' usupport_vg  5 hdisk5
  mklv -y'db_name_oemrepo_20m' -w'n' -s'n' -r'n' usupport_vg 1 hdisk5
  mklv -y'db_name_spfile_5m' -w'n' -s'n' -r'n' usupport_vg 1 hdisk5
  mklv -y'db_name_srvmconf_100m' -w'n' -s'n' -r'n' usupport_vg 4 hdisk5
解释："mklv -y'db_name_cntrl1_110m' -w'n' -s'n' -r'n' usupport_vg 4 hdisk5"将创建4个分区，每个分区32MB，该命令创建两个文件:
   /dev/db_name_cntrl1_110m     物理文件
  /dev/rdb_name_cntrl1_110m     裸设备文件(raw)
使用下面的方法修改文件的权限:
  # chown oracle:dba /dev/rdb_name*
2.4.3 在其他节点中导入卷组
在第一个节点中输入:
   %  varyoffvg 卷组名
在其他节点中输入"smit vg" :
选择"Import a Volume Group"
在打开的界面中禁止卷组的自动启动和并行模式的自动激活，务必保证 major number 与之前节点中的相同
使用下面的方法修改文件的权限:  
    # chown oracle:dba /dev/rdb_name*  
2.4.4 添加一个并行资源组
  Smit HACMP ->; Cluster Configuration ->; Cluster Resources ->; Define Resource Groups ->; Add a Resource Group
快捷路径:
  # smit cm_add_grp
2.4.5 配置并行资源组
  Smit HACMP ->; Cluster Configuration ->; Cluster Resources ->; Change/Show Resources for a Resource Group
快捷路径:
  # smit cm_cfg_res.select
在打开的界面中Concurrent Volume groups处输入之前创建的并行卷组名
2.4.6  创建并行文件系统(GPFS)  此处忽略
With AIX 5.1 (5L) you can also place your files on GPFS (RAW Logical Volumes are not a requirement of GPFS). In this case create GPFS capable of holding all required Database Files, Controlfiles and Logfiles.  

2.5 同步群集资源组
  Smit HACMP ->; Cluster Configuration ->; Cluster Resources ->; Synchronize Cluster Resources
快捷路径:
  # smit clsyncnode.dialog

2.6 添加节点到群集中
  Smit HACMP ->; Cluster Services ->; Start Cluster Services
快捷路径:
  # smit clstart.dialog  
在打开的界面中 "Startup Cluster Information Daemon?" 应该选择为"true".   
通过查看"/etc/hacmp.out"可以得知启动情况。如果节点添加成功则会显示在 "/tmp/hacmp.out" 文件中:

2.7 基本群集管理
"/tmp/hacmp.out"是最好的查看群集信息的地方。"clstat" 也可以用于验证群集的健康情况。
  # /usr/es/sbin/cluster/clstat
快速查看群集服务情况:
  Smit HACMP ->; Cluster Services ->; Show Cluster Services
  
3.0 安装RAC前的准备工作
The Real Application Clusters安装过程包含以下四个步骤.  
1. 配置共享磁盘和UNIX预安装任务.  
2. 安装Oracle9i Enterprise Edition 和Oracle9i Real Application Clusters 软件.  
3. 创建和配置数据库.   

3.1 配置共享磁盘和UNIX预安装任务
3.1.1 配置共享磁盘
如果你没有安装GPFS，那么Real Application Clusters 需要所有的实例都可以访问在共享磁盘上未被格式化的设备，即裸设备。
Oracle 实例通过配置RAC可以向裸设备写入：
? 控制文件
? spfile.ora  
? 数据文件
? 在线重做日志文件
? 服务器管理(SRVM)配置信息
因此为每一个类型的文件定义裸设备十分必要。Oracle数据库配置助手将创建如下配置:
Raw         Volume File         Size         Sample File Name
SYSTEM      tablespace          400 Mb       db_name_raw_system_400m
USERS       tablespace          120 Mb       db_name_raw_users_120m
TEMP        tablespace          100 Mb       db_name_raw_temp_100m
UNDOTBS     tablespace          312 Mb       db_name_raw_undotbsx_312m
CWMLITE     tablespace          100 Mb       db_name_raw_cwmlite_100m
EXAMPLE                         160 Mb       db_name_raw_example_160m
OEMREPO                         20 Mb        db_name_raw_oemrepo_20m
INDX        tablespace          70 Mb        db_name_raw_indx_70m
TOOLS       tablespace          12 Mb        db_name_raw_tools_12m
DRYSYS      tablespace          90 Mb        db_name_raw_drsys_90m
First       control file        110 Mb       db_name_raw_controlfile1_110m
Second      control file        110 Mb       db_name_raw_controlfile2_110m
两个在线重做日志文件，每个120 Mb x 2        db_name_thread_lognumber_120m
spfile.ora                      5 Mb         db_name_raw_spfile_5m
srvmconfig                      100 Mb       db_name_raw_srvmconf_100m
3.1.2 UNIX预安装步骤
使用root用户运行installPrep.sh脚本 [从网上下载，提供自动检查]
添加Oracle用户
? 确保在所有的节点上已经创建了osdba 组和oinstall组(primary group)
典型的定义如下:  
osdba::101:oracle
oinstall::102:root,oracle
? 在每个节点上创建oracle用户，确保:  
o 是osdba 组的成员
o oinstall 作为首选组
o 仅用于安装和升级Oracle软件
o 拥有远程目录的写权限
创建用户:
   Smit ->; Security & Users ->; Users ->; Add a User
快捷路径:
  # smit mkuser  
? 创建挂载点目录，确保：
o 每个节点的挂载点相同
o oracle帐户拥有读写和执行权限
? 在安装Oracle的节点上，设定用户等效。包含本地节点，oracle帐户的.rhosts文件或者/etc/hosts.equiv 文件.  
? 对于oracle帐户,通过执行远程登录(rlogin)来检查群集中每个节点的用户等效机制
建立系统环境变量：
?在用户的PATH中设定本地的bin目录, 例如 /usr/local/bin, 或者 /opt/bin. 在这些目录中拥有执行权限十分重要
? 设定 DISPLAY 变量指向显示系统的IP地址，名称，X服务器和屏幕
? 为TMPDIR设定至少20MB的临时目录空间
设定Oracle环境变量(建议):
ORACLE_BASE eg /u01/app/oracle
ORACLE_HOME eg /u01/app/oracle/product/901
ORACLE_TERM xterm
NLS_LANG AMERICAN-AMERICA.UTF8 for example
ORA_NLS33 $ORACLE_HOME/ocommon/nls/admin/data
PATH Should contain $ORACLE_HOME/bin
CLASSPATH $ORACLE_HOME/JRE:$ORACLE_HOME/jlib \$ORACLE_HOME/rdbms/jlib: \$ORACLE_HOME/network/jlib
? 创建目录 /var/opt/oracle 并设定oracle用户的所有权.  
? 验证/opt/SUNWcluster/bin/lkmgr的存在.

3.2 安装Oracle数据库和Real Application Clusters
安装Oracle软件，请执行一下步骤:
? 使用root用户登录并加载光驱
# mount -rv cdrfs /dev/cd0 /cdrom
? 执行存放于光盘中的"rootpre.sh" 脚本
# / ;/rootpre.sh      
? 使用oracle 用户登录并执行"runInstaller".
$ / ;/runInstaller
? 打开图形界面执行安装.  
? 关于Inventory Location的定义存放在/etc/oraInst.loc中.
? 验证用户组。可以执行/tmp/orainstRoot.sh来强制通过验证
? 选择配置类型为高级配置。
? 选择数据库将要安装的其他节点。
? 建议raw partition最小100MB.  
? 务必不要选择升级或者迁移已经存在的数据库选项，否则将导致错误
? 显示总结界面.确认RAC 数据库软件被选择。OUI将安装 Oracle9i 软件到当前的节点，然后拷贝信息到其他已选的节点上.  

3.3 使用Oracle数据库配置助手创建RAC数据库

4.0 管理Real Application Clusters实例
Oracle公司建议使用SRVCTL去管理RAC数据库环境. 在使用SRVCTL之前, 确保在配置完数据库后的Global Services Daemon (GSD) 处于运行状态. 为了使用SRVCTL，必须为所管的数据库创建了配置信息.
如果这是群集中的第一个Oracle9i数据库, 则必须初始clusterwide SRVM 配置. 首先, 创建或者编辑/var/opt/oracle/srvConfig.loc文件并且添加 srvconfig_loc=path_name.其中的path_name指cluster-shared raw volume
例如
$ vi /var/opt/oracle/srvConfig.loc
srvconfig_loc=/dev/rrac_srvconfig_100m
然后执行如下命令初始这个raw volume (Note: gsd运行过程中不可执行. Prior to 9i Release 2 you will need to kill the .../jre/1.1.8/bin/... process to stop the gsd from running. From 9i Release 2 use the gsdctl stop command):
$ srvconfig -init
第一次使用 SRVCTL 去创建配置，需要在所有节点上启用GSD以便SRVCTL可以访问节点信息。然后执行srvctl add命令使RAC知道哪些实例属于该节点:
对于Oracle RAC v9.0.1:  
$ gsd
Successfully started the daemon on the local node.
$ srvctl add db -p db_name -o oracle_home
然后从每个节点输入命令:  
$ srvctl add instance -p db_name -i sid -n node
显示配置信息，输入如下命令：
$ srvctl config  
racdb1
racdb2
$ srvctl config -p racdb1
racnode1 racinst1
racnode2 racinst2
$ srvctl config -p racdb1 -n racnode1
racnode1 racinst1

启动和停止RAC的命令如下:
$ srvctl start -p racdb1
Instance successfully started on node: racnode2
Listeners successfully started on node: racnode2
Instance successfully started on node: racnode1
Listeners successfully started on node: racnode1

$ srvctl stop -p racdb2  
Instance successfully stopped on node: racnode2
Instance successfully stopped on node: racnode1
Listener successfully stopped on node: racnode2
Listener successfully stopped on node: racnode1

$ srvctl stop -p racdb1 -i racinst2 -s inst  
Instance successfully stopped on node: racnode2

$ srvctl stop -p racdb1 -s inst
PRKO-2035 : Instance is already stopped on node: racnode2
Instance successfully stopped on node: racnode1
  
对于Oracle RAC v9.2.0+:
$ gsdctl start
Successfully started the daemon on the local node.
$ srvctl add database -d db_name -o oracle_home [-m domain_name] [-s spfile]
然后从每个节点输入命令:  
$ srvctl add instance -d db_name -i sid -n node

显示配置信息，输入如下命令：
racnode1/2 with instances racinst1/2 run:-  

$ srvctl config  
racdb1
racdb2

$ srvctl config -p racdb1 -n racnode1
racnode1 racinst1 /u01/app/oracle/product/9.2.0.1

$ srvctl status database -d racdb1
Instance racinst1 is running on node racnode1
Instance racinst2 is running on node racnode2

启动和停止RAC的命令如下:
$ srvctl start database -d racdb2

$ srvctl stop database -d racdb2

$ srvctl stop instance -d racdb1 -i racinst2  

$ srvctl start instance -d racdb1 -i racinst2

$ gsdctl stat
GSD is running on local node

$ gsdctl stop