LINUX 11G RAC ASM磁盘组在线增加磁盘扩容

标签：操作系统   proc   version   ndis   ring   asm   clipboard   rac   log   

1. LINUX 11G RAC ASM磁盘组在线增加磁盘扩容  
2.   
3. 1.操作系统版本 OEL 6.1  
4. [root@cqltjcpt1 ~]# more /etc/redhat-release   
5. Red Hat Enterprise Linux Server release 6.1 (Santiago)  
6.   
7.   
8. 2.数据库版本 oracle 11g rac  
9. SQL> select * from v$version;  
10.   
11. BANNER  
12. --------------------------------------------------------------------------------  
13. Oracle Database 11g Enterprise Edition Release 11.2.0.3.0 - 64bit Production  
14. PL/SQL Release 11.2.0.3.0 - Production  
15. CORE    11.2.0.3.0      Production  
16. TNS for Linux: Version 11.2.0.3.0 - Production  
17. NLSRTL Version 11.2.0.3.0 - Production  
18.   
19. 3.存储环境VMWARE exsi5.0虚拟EMC存储  
20.   
21.   
22. 4.在节点1，2上查看所有系统磁盘  
23. [root@cqltjcpt1 ~]# fdisk -l | grep sd*  
24. Disk /dev/sda: 128.8 GB, 128849018880 bytes  
25. /dev/sda1   *           1          14      103424   83  Linux  
26. /dev/sda2              14        4191    33554432   82  Linux swap / Solaris  
27. /dev/sda3            4191       15666    92170240   8e  Linux LVM  
28. Disk /dev/sdb: 2147 MB, 2147483648 bytes  
29. /dev/sdb1               1         261     2096451   83  Linux  
30. Disk /dev/sdc: 2147 MB, 2147483648 bytes  
31. /dev/sdc1               1         261     2096451   83  Linux  
32. Disk /dev/sdd: 2147 MB, 2147483648 bytes  
33. /dev/sdd1               1         261     2096451   83  Linux  
34. Disk /dev/sde: 536.9 GB, 536870912000 bytes  
35. /dev/sde1               1       65270   524281243+  83  Linux  
36. Disk /dev/sdf: 536.9 GB, 536870912000 bytes  
37. /dev/sdf1               1       65270   524281243+  83  Linux  
38. Disk /dev/sdg: 536.9 GB, 536870912000 bytes  
39. /dev/sdg1               1       65270   524281243+  83  Linux  
40. Disk /dev/sdh: 214.7 GB, 214748364800 bytes  
41. Disk /dev/sdi: 107.4 GB, 107374182400 bytes  
42.   
43. 5.当前系统硬盘为sda到sdi,现在需要增加一块500G的共享硬盘，来扩容ASM磁盘组,增加新硬盘后系统识别应为sdj  
44. 查看伪文件系统下的/proc/scsi/scsi文件有scsi1,scsi2，scsi3 三个通道  
45.   
46. [root@cqltjcpt1 ~]# more /proc/scsi/scsi   
47. Attached devices:  
48. Host: scsi1 Channel: 00 Id: 00 Lun: 00  
49.   Vendor: NECVMWar Model: VMware IDE CDR10 Rev: 1.00  
50.   Type:   CD-ROM                           ANSI  SCSI revision: 05  
51. Host: scsi2 Channel: 00 Id: 00 Lun: 00  
52.   Vendor: VMware   Model: Virtual disk     Rev: 1.0   
53.   Type:   Direct-Access                    ANSI  SCSI revision: 02  
54. Host: scsi3 Channel: 00 Id: 00 Lun: 00  
55.   Vendor: VMware   Model: Virtual disk     Rev: 1.0   
56.   Type:   Direct-Access                    ANSI  SCSI revision: 02  
57. Host: scsi3 Channel: 00 Id: 01 Lun: 00  
58.   Vendor: VMware   Model: Virtual disk     Rev: 1.0   
59.   Type:   Direct-Access                    ANSI  SCSI revision: 02  
60. Host: scsi3 Channel: 00 Id: 02 Lun: 00  
61.   Vendor: VMware   Model: Virtual disk     Rev: 1.0   
62.   Type:   Direct-Access                    ANSI  SCSI revision: 02  
63. Host: scsi3 Channel: 00 Id: 03 Lun: 00  
64.   Vendor: VMware   Model: Virtual disk     Rev: 1.0   
65.   Type:   Direct-Access                    ANSI  SCSI revision: 02  
66. Host: scsi3 Channel: 00 Id: 04 Lun: 00  
67.   Vendor: VMware   Model: Virtual disk     Rev: 1.0   
68.   Type:   Direct-Access                    ANSI  SCSI revision: 02  
69. Host: scsi3 Channel: 00 Id: 05 Lun: 00  
70.   Vendor: VMware   Model: Virtual disk     Rev: 1.0   
71.   Type:   Direct-Access                    ANSI  SCSI revision: 02  
72. Host: scsi3 Channel: 00 Id: 06 Lun: 00  
73.   Vendor: VMware   Model: Virtual disk     Rev: 1.0   
74.   Type:   Direct-Access                    ANSI  SCSI revision: 02  
75. Host: scsi3 Channel: 00 Id: 08 Lun: 00  
76.   Vendor: VMware   Model: Virtual disk     Rev: 1.0   
77.   Type:   Direct-Access                    ANSI  SCSI revision: 02  
78.     
79.    
80. 6.在节点1,2执行echo 命令，  
81. [root@cqltjcpt1 ~]# echo "- - -" > /sys/class/scsi_host/host3/scan   
82.   
83. 当前的最大ID号为08，执行完echo命令后，系统的/proc/scsi/scsi文件下会出现ID为09的标识号  
84. 如下：  
85.   
86. Host: scsi3 Channel: 00 Id: 09 Lun: 00  
87.   Vendor: VMware   Model: Virtual disk     Rev: 1.0   
88.   Type:   Direct-Access                    ANSI  SCSI revision: 02  
89.     
90. 7.分别在节点1,2查看/proc/scsi/scsi文件，此时节点1,2已识别到 Host: scsi3 Channel: 00 Id: 09 Lun: 00  
91.   
92. [root@cqltjcpt1 ~]# more /proc/scsi/scsi  | grep  09  
93. Host: scsi3 Channel: 00 Id: 09 Lun: 00  
94.   
95. [root@cqltjcpt2 ~]# more /proc/scsi/scsi  | grep  09  
96. Host: scsi3 Channel: 00 Id: 09 Lun: 00  
97.   
98. 8.在节点1上对sdj分区  
99. [root@cqltjcpt1 ~]#fdisk /dev/sdj  
100. [root@cqltjcpt1 ~]#partprobe  
101.   
102. 9.节点1,2查看sdj1分区，以后成功识别  
103.   
104. [root@cqltjcpt1 ~]# fdisk -l  | grep  sdj  
105.   
106. Disk /dev/sdj: 536.9 GB, 536870912000 bytes  
107. /dev/sdj1               1       65270   524281243+  83  Linux  
108.   
109. [root@cqltjcpt2 ~]# fdisk -l  | grep  sdj  
110.   
111. Disk /dev/sdj: 536.9 GB, 536870912000 bytes  
112. /dev/sdj1   
113.   
114.   
115. 10.节点1上用grid用户登录，查看当前ASM磁盘组  
116. [root@cqltjcpt1 ~]#su - grid  
117.   
118. 查看asm磁盘组  
119. [grid@cqltjcpt1 ~]$sqlplus / as sysasm  
120.   
121. SQL> select group_number,name,TOTAL_MB, FREE_MB from v$asm_diskgroup  
122.   
123. GROUP_NUMBER NAME               TOTAL_MB    FREE_MB  
124. ------------ ----------------- ---------- ----------  
125.            1 CQDATA              1547972    525323  
126.            2 FRA                 511993     477058  
127.            3 OCR                 6141       5741  
128.   
129. 11.查看asm磁盘  
130. [root@cqltjcpt1 ~]# oracleasm listdisks  
131. DATA1  
132. DATA2  
133. FRA  
134. OCR_VOT1  
135. OCR_VOT2  
136. OCR_VOT3  
137.   
138.   
139. 12.现在是要将500G的磁盘扩容到CQDATA的ASM的磁盘组中去  
140. 首先需要创建新的ASM磁盘  
141.   
142. 节点1上执行  
143. [root@cqltjcpt1 ~]#oracleasm createdisk DATA3 /dev/sdj1  
144. [root@cqltjcpt1 ~]#oracleasm scandisks  
145. [root@cqltjcpt1 ~]#oracleasm  listdisks  
146. DATA1  
147. DATA2  
148. DATA3  
149. FRA  
150. OCR_VOT1  
151. OCR_VOT2  
152. OCR_VOT3  
153.   
154. 节点2上执行  
155. [root@cqltjcpt2 ~]# oracleasm  scandisks  
156. Reloading disk partitions: done  
157. Cleaning any stale ASM disks...  
158. Scanning system for ASM disks...  
159. [root@cqltjcpt2 ~]#oracleasm  listdisks  
160. DATA1  
161. DATA2  
162. DATA3  
163. FRA  
164. OCR_VOT1  
165. OCR_VOT2  
166. OCR_VOT3  
167.    
168.  此时，节点1,2都已经识别到新的ASM磁盘DATA3  
169.   
170. 13.节点1执行，查看ASM磁盘，确定PATH  
171. [root@cqltjcpt1 ~]# su - grid  
172. [grid@cqltjcpt1 ~]$ sqlplus  / as sysasm  
173.   
174. SQL> select name, path, mode_status, state, disk_number,failgroup from v$asm_disk;  
175.   
176. NAME        PATH               MODE_STATUS    STATE     DISK_NUMBER FAILGROUP  
177. --------  ------------------ -------------- ----------- ----------- ----------  
178. DATA1       ORCL:DATA1           ONLINE         NORMAL                0 DATA1  
179. DATA2       ORCL:DATA2           ONLINE         NORMAL                1 DATA2  
180. DATA3       ORCL:DATA3           ONLINE         NORMAL                2 DATA3  
181. FRA         ORCL:FRA             ONLINE         NORMAL                0 FRA  
182. OCR_VOT1    ORCL:OCR_VOT1        ONLINE         NORMAL                0 OCR_VOT1  
183. OCR_VOT2    ORCL:OCR_VOT2        ONLINE         NORMAL                1 OCR_VOT2  
184.   
185.   
186. 14.在节点1上，grid用户已sysasm登录ASM实例，给CQDATA磁盘组增加新的ASM磁盘DATA3  
187.   
188. SQL> alter diskgroup CQDATA  add disk  ‘ORCL:DATA3‘ rebalance power 10;  
189.   
190. GROUP_NUMBER OPERATION  STATE         POWER     ACTUAL      SOFAR   EST_WORK   EST_RATE EST_MINUTES ERROR_CODE  
191. ------------ ---------- -------- ---------- ---------- ---------- ---------- ---------- ----------- ----------  
192.            1 REBAL      RUN               1          1     130396     340324       1224         171  
193.   
194. 查看当前reblance 时间，500G 需要1小时左右  
195. SQL>select * from v$asm_opration；  
196.   
197. GROUP_NUMBER OPERATION  STATE         POWER     ACTUAL      SOFAR   EST_WORK   EST_RATE EST_MINUTES ERROR_CODE  
198. ------------ ---------- -------- ---------- ---------- ---------- ---------- ---------- ----------- ------------------------------  
199.            1 REBAL      RUN               1          1      13327     332978       1242         57  
200.   
201. 15.当查询v$asm_operation时无数据输出时，意味着ASM的reblance动作结束  
202. SQL> select * from v$asm_operation;  
203.   
204. no rows selected  
205.   
206. 修改reblance 参数为默认   
207.         
208. SQL> ALTER DISKGROUP DATA1 REBALANCE POWER 1;  
209.   
210.   
211.   
212. 16.在节点1,2上分别查询，以下结果  
213.   
214. SQL> SELECT,NAME,FREE_MB,TOTAL_MB FROM V$ASM_DISKGROUP  
215.   
216. NAME                    FREE_MB   TOTAL_MB  
217. -------------------- ---------- ----------  
218. CQDATA                   1025323    2047972  
219. FRA                      477058     511993  
220. OCR                        5741       6141  
221.   
222. CQDATA磁盘组已经成功完成扩容  本文基于VMware下测试，存储多路径问题在本实验已被vmware忽略，若有遗漏或不明处欢迎拍砖  
224. 转：http://blog.csdn.net/evils798/article/details/8204022

LINUX 11G RAC ASM磁盘组在线增加磁盘扩容

标签：操作系统   proc   version   ndis   ring   asm   clipboard   rac   log   

原文地址：http://www.cnblogs.com/andy6/p/6013463.html