重庆分公司
重庆分公司，新征程启航
为企业提供网站建设、域名注册、服务器等服务
Oracle11gR2+RAC+ASM+OracleLinux6.4安装详解（1）前期准备
1. 版本说明：
软件版本：oracle 11.2.0.4 RAC
系统版本：Redhat 6.4
这次搭建的是Oracle 11g R2 11.2.0.4的RAC环境，使用的操作系统版本为Oracle Linux 6.4
操作系统说明：在前期安装操作系统的时候，在桌面那一块建议全部选中。包括所有的gnome，kde桌面等等所有。系统工具也需要全部选中。要不然可能打不开安装程序，或者在安装gcc包时由于依赖关系太复杂导致包安装失败。
远程工具： X-manager
这次搭建的是Oracle 11g R2 11.2.0.4的RAC环境，使用的操作系统版本为Oracle Linux 6.4这次搭建的是Oracle 11g R2 11.2.0.4的RAC环境，使用的操作系统版本为Oracle Linux 6.4
2.安装需要的包,在两台机器上进行:
rpm -q binutils compat-libstdc++-33 elfutils-libelf
elfutils-libelf-devel gcc gcc-c++ glibc glibc-common glibc-devel glibc-headers
ksh libaio libaio-devel libgcc libstdc++libstdc++-devel make sysstat
公司主营业务：网站设计制作、成都网站建设、移动网站开发等业务。帮助企业客户真正实现互联网宣传，提高企业的竞争能力。成都创新互联是一支青春激扬、勤奋敬业、活力青春激扬、勤奋敬业、活力澎湃、和谐高效的团队。公司秉承以“开放、自由、严谨、自律”为核心的企业文化，感谢他们对我们的高要求，感谢他们从不同领域给我们带来的挑战，让我们激情的团队有机会用头脑与智慧不断的给客户带来惊喜。成都创新互联推出雨城免费做网站回馈大家。
需要的包：
binutils-2.17.50.0.6-14.el5
compat-libstdc++-33-3.2.3-61
elfutils-libelf-0.137-3.el5
elfutils-libelf-devel-0.137-3.el5
gcc-4.1.2-51.el5
gcc-c++-4.1.2-51.el5
glibc-2.5-65
glibc-common-2.5-65
glibc-devel-2.5-65
glibc-headers-2.5-65
pdksh.5.2.14需要从Redhat 5中提取
libgomp-4.4.0-6.el5
libaio-0.3.106-5
libaio-devel-0.3.106-5
libgcc-4.1.2-51.el5
libstdc++-4.1.2-51.el5
libstdc++-devel-4.1.2-51.el5
make-3.81-3.el5
sysstat-7.0.2-11.el5
unixODBC-devel-2.2.11
安装grid自带的包：
#检查是否已经安装
#如果已安装需要先卸载之前的版本
# rpm -e cvuqdisk
#安装新版本
#CVUQDISK_GRP=oinstall; export CVUQDISK_GRP
# rpm -ivhcvuqdisk-1.0.9-1.rpm
解析：如果没有cvudqdisk，集群验证实用程序就无法发现共享磁盘，当运行集群验证程序时，就会收到这样的错误信息："Package
cvuqdisk not installed" .cvuqdisk RPM包含在 oracle grid infrastructure安装介质上的rpm目录中。设置环境变量：CVUQDISK_GRP,使其指向作为cvuqdisk的所有者所在的组（本文为oinstall）
在/mnt/rpm下安放所有的RPM包，虽然rpm -Uvh *会安装所有的包，但依然会漏掉一些，仔细检查一下，确保安装所有的包。
1.2网卡绑定：（系统工程师配合搞定）
1.绑定前需要彻底关闭NetworlManger服务，否则会和bond网卡冲突
chkconfig Networ Manager off #停止开机启动该服务
service NetworkManager stop #现在关闭服务
#cd /etc/sysconfig/network-scripts
#vi ifcfg-bond0
DEVICE=bond0
ONBOOT=yes
BOOTPROTO=staticT
YPE=Ethernet
USERCTL=no
IPADDR=10.80.1.11
NETMASK=255.255.255.0
GATEWAY=10.80.1.254
BONDING_OPTS="million=100 xmit_hash_policy=1 mode=2"
#vi ifcfg-eth2
DEVICE=eth2
TYPE=Ethernet
ONBOOT=yes
HWADDR=90:E2:BA:83:76:89 #Mac地址不变
MASTER=bond0
SLAVE=yes
USERCTL=no
BOOTPROTO=none
#vi ifcfg-eth4
DEVICE=eth4TYPE=Ethernet
ONBOOT=yes
HWADDR=HG:E3:FA:53:26:6A #Mac地址不变
MASTER=bond0
SLAVE=yes
USERCTL=no
BOOTPROTO=none
#service network restart // 网络重启
#cat /proc/net/bonding/bond0 //查看绑定情况#ifconfig -a //查看网卡情况
2.网络规划：
编辑/etc/hosts,做如下配置
##Public IP
10.80.1.1 rac1.com rac1
10.80.1.2 rac2.com rac2
#VIP
10.80.1.3 rac1-vip.com rac1-vip
10.80.1.4 rac2-vip.com rac2-vip
#Private IP
11.11.11.11 rac1-priv.com rac1-priv
11.11.11.12 rac2-priv.com rac2-priv
#scan IP
10.80.1.5 rac-scan.com rac-scan
3.ASM磁盘组的规划：
2-9总共8块盘 =>
2,3,4各20G做OCRVOTE
5,6,7,8各2T做DATA
9为600G做ARCH
4.创建用户和组：
groupadd -g 1000 oinstall
groupadd -g 1031 dba
groupadd -g 1032 oper
groupadd -g 1020 asmadmin
groupadd -g 1022 asmoper
groupadd -g 1021 asmdba
useradd -u 1101 -g oinstall -G dba,asmdba,oper oracle
useradd -u 1100 -g oinstall -G asmadmin,asmdba,asmoper,oper,dba grid
# id oracle
#id grid
mkdir -p /u01/app/11.2.0/grid
chown -R grid.oinstall /u01/app/11.2.0
mkdir -p /u01/app/grid
chown -R grid:oinstall /u01/app/grid
chown -R grid.oinstall /u01
mkdir -p /u01/app/oracle
chown oracle:oinstall /u01/app/oracle
chmod -R 775 /u01
给用户设置密码：
passwd oracle
passwd grid
5.设置用户环境变量：
Grid用户：
# cd ~
# vi .profile
ORACLE_BASE=/u01/app/grid
export ORACLE_BASE
ORACLE_HOME=/u01/app/11.2.0/grid
export ORACLE_HOME
ORACLE_SID=+ASM1
export ORACLE_SID
PATH=$PATH:$ORACLE_HOME/bin:$HOME/bin
export PATH
注意：在第2个机器上 ORACLE_SID=+ASM2
ORACLE用户：
# cd ~
# vi .profile
ORACLE_BASE=/u01/app/oracle
ORACLE_HOME=/u01/app/oracle/product/11.2.0/dbhome_1
ORACLE_SID=jtptweb1
CRS_HOME=/u01/app/11.2.0/grid
export ORACLE_HOME
export ORACLE_BASE
export ORACLE_SID
PATH=$PATH:$ORACLE_HOME/bin:$CRS_HOME/bin
export PATH
注意：第2个机器ORACLE_SID=jtptweb2
6.修改limits.conf shell限制
[root@rac1 ~]#vi /etc/security/limits.conf
#ORACLE SETTING
grid soft nproc 2047
grid hard nproc 16384
grid soft nofile 1024
grid hard nofile 65536
oracle soft nproc 2047
oracle hard nproc 16384
oracle soft nofile 1024
oracle hard nofile 65536
7.用multipath+udev来配置ASM磁盘组
1.用multipath -ll命令查看磁盘情况，记录wwid
2.修改文件 multipath.conf文件:
把multipath -ll中识别的wwid编辑进去，并且对应alias,根据用途和之前划分磁盘的大小，比如:asm-data01-04各2T，存数据。asm-arch 600G存归档，asm-crs01-03各20G,存ocr_vote
编写之后，
service multipathd restart
multipath -F 清除所有的路径
multipath -v2清理不active的路径
确保multipathd开机能自动启动：
chkconfig
--list multipathd
如果关闭的话就用命令：#/sbin/chkconfig --level 2345 multipathd on
在第二台机器上进行一样的操作。注意，dm对应的别名不一定和第一台相同，我们通过观察：
#cd
/dev/mapper
发现了对应关系。
编写UDEV的规则文件。
在/etc/udev/rules.d下编写 99-oracle-asmdevices.rules
ENV{DM_NAME}=="asm-crs01",OWNER:="grid",GROUP:="asmadmin",MODE:="660"
ENV{DM_NAME}=="asm-crs02",OWNER:="grid",GROUP:="asmadmin",MODE:="660"
ENV{DM_NAME}=="asm-crs03",OWNER:="grid",GROUP:="asmadmin",MODE:="660"
ENV{DM_NAME}=="asm-data01",OWNER:="grid",GROUP:="asmadmin",MODE:="660"
ENV{DM_NAME}=="asm-data02",OWNER:="grid",GROUP:="asmadmin",MODE:="660"
ENV{DM_NAME}=="asm-data03",OWNER:="grid",GROUP:="asmadmin",MODE:="660"
ENV{DM_NAME}=="asm-data04",OWNER:="grid",GROUP:="asmadmin",MODE:="660"
ENV{DM_NAME}=="asm-arch",OWNER:="grid",GROUP:="asmadmin",MODE:="660"
编写完成后
# start_udev
查看效果：
#cd /dev/
#ls -al
8.修改/etc/sysctl.conf文件
kernel.shmall = 67108864
kernel.shmmax = 177167400960
#kernel.shmmax =物理内存 * 0.65 =165G 165*1024*1024*1024 = 177167400960
#kernel.shmall = 256*1024*1024*1024/4096 =67108864
9.修改 /etc/pam.d/login文件
vi /etc/pam.d/login
session required pam_limits.so
10.内存调整
Linux默认的内存使用为实际内存的一半，这里需要修改一下
修改 /etc/fstab
修改成：
# /etc/fstab
# Created by anaconda on Thu Apr 9 15:52:10 2015
#
# Accessible filesystems, by reference, are maintained under '/dev/disk'
# See man pages fstab(5), findfs(8), mount(8) and/or blkid(8) for more info
#
/dev/mapper/VolGroup-lv_root / ext4 defaults 1 1
UUID=101d798b-0ac6-42be-a7c7-6b6e5ff61ad5 /boot ext4 defaults 1 2
/dev/mapper/VolGroup-lv_home /home ext4 defaults 1 2
/dev/mapper/VolGroup-lv_swap swap swap defaults 0 0
tmpfs /dev/shm tmpfs defaults,size=165G 0 0
devpts /dev/pts devpts gid=5,mode=620 0 0
sysfs /sys sysfs defaults 0 0
proc /proc proc defaults 0 0
~
# mount -o remount /dev/shm
11.关闭ntpd
$service ntpd status
$ cd /etc
$ mv ntp.conf ntp.conf.bak
用root给/tmp/pgk赋权,
#chmod–R 777 /tmp/pgk
在grid用户下解压第三个包：
注意：用unzip就可以了，注意这里很重要，一定要用grid用户解压，确保包里的东西权限不会发生改变。如果用root解压，再赋权，里面的权限会发生改变
注意：这一个步骤也需要在两个节点执行，需要把grid和三个包同时解压到两个节点上
export LANG=en_US.UTF-8
配置用户等效性：用grid用户执行
sshsetup/sshUserSetup.sh -user grid -hosts "raca1 raca2"
sshsetup/sshUserSetup.sh -user grid -hosts
"znydb01 znydb02"
完成。
下面开始安装数据软件了!
to be continued。。。。。。。。。。。。
当前文章：Oracle11gR2+RAC+ASM+OracleLinux6.4安装详解（1）前期准备
文章出自：http://cqcxhl.cn/article/ipspio.html