LINUX 11G RAC ASM磁盘组在线增加磁盘扩容

Posted 张冲andy

tags:

篇首语：本文由小常识网(cha138.com)小编为大家整理，主要介绍了LINUX 11G RAC ASM磁盘组在线增加磁盘扩容相关的知识，希望对你有一定的参考价值。

[javascript] view plain copy
 
  1. LINUX 11G RAC ASM磁盘组在线增加磁盘扩容  
  2.   
  3. 1.操作系统版本 OEL 6.1  
  4. [[email protected] ~]# more /etc/redhat-release   
  5. Red Hat Enterprise Linux Server release 6.1 (Santiago)  
  6.   
  7.   
  8. 2.数据库版本 oracle 11g rac  
  9. SQL> select * from v$version;  
  10.   
  11. BANNER  
  12. --------------------------------------------------------------------------------  
  13. Oracle Database 11g Enterprise Edition Release 11.2.0.3.0 - 64bit Production  
  14. PL/SQL Release 11.2.0.3.0 - Production  
  15. CORE    11.2.0.3.0      Production  
  16. TNS for Linux: Version 11.2.0.3.0 - Production  
  17. NLSRTL Version 11.2.0.3.0 - Production  
  18.   
  19. 3.存储环境VMWARE exsi5.0虚拟EMC存储  
  20.   
  21.   
  22. 4.在节点1，2上查看所有系统磁盘  
  23. [[email protected] ~]# fdisk -l | grep sd*  
  24. Disk /dev/sda: 128.8 GB, 128849018880 bytes  
  25. /dev/sda1   *           1          14      103424   83  Linux  
  26. /dev/sda2              14        4191    33554432   82  Linux swap / Solaris  
  27. /dev/sda3            4191       15666    92170240   8e  Linux LVM  
  28. Disk /dev/sdb: 2147 MB, 2147483648 bytes  
  29. /dev/sdb1               1         261     2096451   83  Linux  
  30. Disk /dev/sdc: 2147 MB, 2147483648 bytes  
  31. /dev/sdc1               1         261     2096451   83  Linux  
  32. Disk /dev/sdd: 2147 MB, 2147483648 bytes  
  33. /dev/sdd1               1         261     2096451   83  Linux  
  34. Disk /dev/sde: 536.9 GB, 536870912000 bytes  
  35. /dev/sde1               1       65270   524281243+  83  Linux  
  36. Disk /dev/sdf: 536.9 GB, 536870912000 bytes  
  37. /dev/sdf1               1       65270   524281243+  83  Linux  
  38. Disk /dev/sdg: 536.9 GB, 536870912000 bytes  
  39. /dev/sdg1               1       65270   524281243+  83  Linux  
  40. Disk /dev/sdh: 214.7 GB, 214748364800 bytes  
  41. Disk /dev/sdi: 107.4 GB, 107374182400 bytes  
  42.   
  43. 5.当前系统硬盘为sda到sdi,现在需要增加一块500G的共享硬盘，来扩容ASM磁盘组,增加新硬盘后系统识别应为sdj  
  44. 查看伪文件系统下的/proc/scsi/scsi文件有scsi1,scsi2，scsi3 三个通道  
  45.   
  46. [[email protected] ~]# more /proc/scsi/scsi   
  47. Attached devices:  
  48. Host: scsi1 Channel: 00 Id: 00 Lun: 00  
  49.   Vendor: NECVMWar Model: VMware IDE CDR10 Rev: 1.00  
  50.   Type:   CD-ROM                           ANSI  SCSI revision: 05  
  51. Host: scsi2 Channel: 00 Id: 00 Lun: 00  
  52.   Vendor: VMware   Model: Virtual disk     Rev: 1.0   
  53.   Type:   Direct-Access                    ANSI  SCSI revision: 02  
  54. Host: scsi3 Channel: 00 Id: 00 Lun: 00  
  55.   Vendor: VMware   Model: Virtual disk     Rev: 1.0   
  56.   Type:   Direct-Access                    ANSI  SCSI revision: 02  
  57. Host: scsi3 Channel: 00 Id: 01 Lun: 00  
  58.   Vendor: VMware   Model: Virtual disk     Rev: 1.0   
  59.   Type:   Direct-Access                    ANSI  SCSI revision: 02  
  60. Host: scsi3 Channel: 00 Id: 02 Lun: 00  
  61.   Vendor: VMware   Model: Virtual disk     Rev: 1.0   
  62.   Type:   Direct-Access                    ANSI  SCSI revision: 02  
  63. Host: scsi3 Channel: 00 Id: 03 Lun: 00  
  64.   Vendor: VMware   Model: Virtual disk     Rev: 1.0   
  65.   Type:   Direct-Access                    ANSI  SCSI revision: 02  
  66. Host: scsi3 Channel: 00 Id: 04 Lun: 00  
  67.   Vendor: VMware   Model: Virtual disk     Rev: 1.0   
  68.   Type:   Direct-Access                    ANSI  SCSI revision: 02  
  69. Host: scsi3 Channel: 00 Id: 05 Lun: 00  
  70.   Vendor: VMware   Model: Virtual disk     Rev: 1.0   
  71.   Type:   Direct-Access                    ANSI  SCSI revision: 02  
  72. Host: scsi3 Channel: 00 Id: 06 Lun: 00  
  73.   Vendor: VMware   Model: Virtual disk     Rev: 1.0   
  74.   Type:   Direct-Access                    ANSI  SCSI revision: 02  
  75. Host: scsi3 Channel: 00 Id: 08 Lun: 00  
  76.   Vendor: VMware   Model: Virtual disk     Rev: 1.0   
  77.   Type:   Direct-Access                    ANSI  SCSI revision: 02  
  78.     
  79.    
  80. 6.在节点1,2执行echo 命令，  
  81. [[email protected] ~]# echo "- - -" > /sys/class/scsi_host/host3/scan   
  82.   
  83. 当前的最大ID号为08，执行完echo命令后，系统的/proc/scsi/scsi文件下会出现ID为09的标识号  
  84. 如下：  
  85.   
  86. Host: scsi3 Channel: 00 Id: 09 Lun: 00  
  87.   Vendor: VMware   Model: Virtual disk     Rev: 1.0   
  88.   Type:   Direct-Access                    ANSI  SCSI revision: 02  
  89.     
  90. 7.分别在节点1,2查看/proc/scsi/scsi文件，此时节点1,2已识别到 Host: scsi3 Channel: 00 Id: 09 Lun: 00  
  91.   
  92. [[email protected] ~]# more /proc/scsi/scsi  | grep  09  
  93. Host: scsi3 Channel: 00 Id: 09 Lun: 00  
  94.   
  95. [[email protected] ~]# more /proc/scsi/scsi  | grep  09  
  96. Host: scsi3 Channel: 00 Id: 09 Lun: 00  
  97.   
  98. 8.在节点1上对sdj分区  
  99. [[email protected] ~]#fdisk /dev/sdj  
  100. [[email protected] ~]#partprobe  
  101.   
  102. 9.节点1,2查看sdj1分区，以后成功识别  
  103.   
  104. [[email protected] ~]# fdisk -l  | grep  sdj  
  105.   
  106. Disk /dev/sdj: 536.9 GB, 536870912000 bytes  
  107. /dev/sdj1               1       65270   524281243+  83  Linux  
  108.   
  109. [[email protected] ~]# fdisk -l  | grep  sdj  
  110.   
  111. Disk /dev/sdj: 536.9 GB, 536870912000 bytes  
  112. /dev/sdj1   
  113.   
  114.   
  115. 10.节点1上用grid用户登录，查看当前ASM磁盘组  
  116. [[email protected] ~]#su - grid  
  117.   
  118. 查看asm磁盘组  
  119. [[email protected] ~]$sqlplus / as sysasm  
  120.   
  121. SQL> select group_number,name,TOTAL_MB, FREE_MB from v$asm_diskgroup  
  122.   
  123. GROUP_NUMBER NAME               TOTAL_MB    FREE_MB  
  124. ------------ ----------------- ---------- ----------  
  125.            1 CQDATA              1547972    525323  
  126.            2 FRA                 511993     477058  
  127.            3 OCR                 6141       5741  
  128.   
  129. 11.查看asm磁盘  
  130. [[email protected] ~]# oracleasm listdisks  
  131. DATA1  
  132. DATA2  
  133. FRA  
  134. OCR_VOT1  
  135. OCR_VOT2  
  136. OCR_VOT3  
  137.   
  138.   
  139. 12.现在是要将500G的磁盘扩容到CQDATA的ASM的磁盘组中去  
  140. 首先需要创建新的ASM磁盘  
  141.   
  142. 节点1上执行  
  143. [[email protected] ~]#oracleasm createdisk DATA3 /dev/sdj1  
  144. [[email protected] ~]#oracleasm scandisks  
  145. [[email protected] ~]#oracleasm  listdisks  
  146. DATA1  
  147. DATA2  
  148. DATA3  
  149. FRA  
  150. OCR_VOT1  
  151. OCR_VOT2  
  152. OCR_VOT3  
  153.   
  154. 节点2上执行  
  155. [[email protected] ~]# oracleasm  scandisks  
  156. Reloading disk partitions: done  
  157. Cleaning any stale ASM disks...  
  158. Scanning system for ASM disks...  
  159. [[email protected] ~]#oracleasm  listdisks  
  160. DATA1  
  161. DATA2  
  162. DATA3  
  163. FRA  
  164. OCR_VOT1  
  165. OCR_VOT2  
  166. OCR_VOT3  
  167.    
  168.  此时，节点1,2都已经识别到新的ASM磁盘DATA3  
  169.   
  170. 13.节点1执行，查看ASM磁盘，确定PATH  
  171. [[email protected] ~]# su - grid  
  172. [[email protected] ~]$ sqlplus  / as sysasm  
  173.   
  174. SQL> select name, path, mode_status, state, disk_number,failgroup from v$asm_disk;  
  175.   
  176. NAME        PATH               MODE_STATUS    STATE     DISK_NUMBER FAILGROUP  
  177. --------  ------------------ -------------- ----------- ----------- ----------  
  178. DATA1       ORCL:DATA1           ONLINE         NORMAL                0 DATA1  
  179. DATA2       ORCL:DATA2           ONLINE         NORMAL                1 DATA2  
  180. DATA3       ORCL:DATA3           ONLINE         NORMAL                2 DATA3  
  181. FRA         ORCL:FRA             ONLINE         NORMAL                0 FRA  
  182. OCR_VOT1    ORCL:OCR_VOT1        ONLINE         NORMAL                0 OCR_VOT1  
  183. OCR_VOT2    ORCL:OCR_VOT2        ONLINE         NORMAL                1 OCR_VOT2  
  184.   
  185.   
  186. 14.在节点1上，grid用户已sysasm登录ASM实例，给CQDATA磁盘组增加新的ASM磁盘DATA3  
  187.   
  188. SQL> alter diskgroup CQDATA  add disk  ‘ORCL:DATA3‘ rebalance power 10;  
  189.   
  190. GROUP_NUMBER OPERATION  STATE         POWER     ACTUAL      SOFAR   EST_WORK   EST_RATE EST_MINUTES ERROR_CODE  
  191. ------------ ---------- -------- ---------- ---------- ---------- ---------- ---------- ----------- ----------  
  192.            1 REBAL      RUN               1          1     130396     340324       1224         171  
  193.   
  194. 查看当前reblance 时间，500G 需要1小时左右  
  195. SQL>select * from v$asm_opration；  
  196.   
  197. GROUP_NUMBER OPERATION  STATE         POWER     ACTUAL      SOFAR   EST_WORK   EST_RATE EST_MINUTES ERROR_CODE  
  198. ------------ ---------- -------- ---------- ---------- ---------- ---------- ---------- ----------- ------------------------------  
  199.            1 REBAL      RUN               1          1      13327     332978       1242         57  
  200.   
  201. 15.当查询v$asm_operation时无数据输出时，意味着ASM的reblance动作结束  
  202. SQL> select * from v$asm_operation;  
  203.   
  204. no rows selected  
  205.   
  206. 修改reblance 参数为默认   
  207.         
  208. SQL> ALTER DISKGROUP DATA1 REBALANCE POWER 1;  
  209.   
  210.   
  211.   
  212. 16.在节点1,2上分别查询，以下结果  
  213.   
  214. SQL> SELECT,NAME,FREE_MB,TOTAL_MB FROM V$ASM_DISKGROUP  
  215.   
  216. NAME                    FREE_MB   TOTAL_MB  
  217. -------------------- ---------- ----------  
  218. CQDATA                   1025323    2047972  
  219. FRA                      477058     511993  
  220. OCR                        5741       6141  
  221.   
  222. CQDATA磁盘组已经成功完成扩容  本文基于VMware下测试，存储多路径问题在本实验已被vmware忽略，若有遗漏或不明处欢迎拍砖  
  224. 转：http://blog.csdn.net/evils798/article/details/8204022

以上是关于LINUX 11G RAC ASM磁盘组在线增加磁盘扩容的主要内容，如果未能解决你的问题，请参考以下文章

oracle之 RAC 11G ASM下控制文件多路复用

求助，RAC环境卸载oracle软件把ASM磁盘组弄丢了

oracle 11g r2 rac 安装整理 附详细步骤（亲测VMware和exsi都可以完美安装物理机自然没有问题）

11gR2 rac asm 磁盘规划

Oracle11g添加asm磁盘到asm磁盘组，发现添加错误如何删除新添加到磁盘？

求助，11gr2 rac asm磁盘挂载不了，报ora-00600错误