1. 介绍
1.1. 在没有ASM之前ORACLE数据库靠什么去解决存储问题:
- 裸设备:裸设备就是没有被文件系统格式化的分区或者是直接挂载到操作系统上的磁盘。ORACLE可以直接将数据写入到裸设备中,读写能非常优异。像ORACLE的数据文件、控制文件、REDO日志在过去经常使用裸设备作为存储介质。裸设备最大的缺点就是裸设备自身没有办法去保障数据的安全性。只能依靠频繁数据库备份让数据库更加安全。ORACLE11G R2这个版本开始,官方就已经不再支持在DBCA中创建裸设备类型的存储了。但是还可以通过其他的方式去实现。
- 文件系统:这里的文件系统指的就是正常的操作系统下的文件系统比如说(EXT3/4、UFS XFS ZFS JFS2 NTFS FAT32)等。文件系统最大的优点容易管理,而且具备文件系统日志可以在系统崩溃后对相关文件进行恢复。缺点就是读写性能尤其是写性能不如裸设备的,因为要写文件系统日志。但是虽然硬件的发展,在后期已经看不出来明显的区别了。现在仍有很多公司让ORACLE数据库安装在文件系统存储上。文件系统对小白特别友好。
- 自动存储管理系统-ASM --【Automatic Storage Management】
- 是一种便于管理和高性能的集群文件系统(优点)
- 管理Oracle数据文件 日志文件 控制文件等(作用)
- 自动将数据在不同的磁盘间负载均衡(磁盘均衡)
- 提供完整的磁盘镜像(故障组 数据冗余)
- 解决很多存储管理上的难题(共享存储 负载均衡)
- 可用于单实例或RAC数据库(ASM实例的多样性)
- ASM可以使用OMF模式(ORACLE文件系统)
1.2. ASM 关键特性
ASM可以使数据在磁盘组中均匀的分布,并且可以独立于操作系统层面,做到磁盘的镜像,保证磁盘上面数据的安全。
1.3. ASM存储:物理和逻辑概念
- 磁盘组(DISK GROUP)是一个或者多个ASM磁盘组成的逻辑分区。ASM将其作为一个集合来管理。每个磁盘组都包含与自身关联的元数据。在概念上,ASM磁盘组类似于典型存储中VG.
SQL> select group_number,name,type,total_mb,free_mb from v$asm_diskgroup;GROUP_NUMBER NAME TYPE TOTAL_MB FREE_MB
------------ ------------------------------ ------ ---------- ----------1 DGDATA01 EXTERN 2048 4882 DGGRID01 NORMAL 3072 18883 DGGRID02 NORMAL 3072 21044 DGRECOVERY EXTERN 3072 28885 DGSYSTEM EXTERN 8192 2880
- 从磁盘组内分配文件空间(ASM FILE)。磁盘组中存储的文件的内容将在磁盘组的磁盘中平均分布或条带化。以便消除热点(频繁访问的部分)并在各个磁盘上提供一致的性能。每个ASM文件都包含在一个磁盘组中,但是,一个磁盘组可以包含多个ASM FILE。而一个数据库可以使用来自多个磁盘组不同的文件。
- ASM DISK(ASM磁盘)
- 是为ASM磁盘组预留(可使用的)存储设备
- 通过正常的操作系统接口来访问(IO接口)
- 必须可由ASM所有者读取和写入(GRID:asmadmin)
- RAC集群中的所有节点必须都可以访问
- 在不同节点上可以有不同的操作系统名称或绝对路径(如果每个操作系统上连接的存储具有多条存储访问路径那么就要由多路[链路]融合软件去做融合)
SQL> select NAME,PATH,total_mb,free_mb from v$asm_disk;NAME PATH TOTAL_MB FREE_MB
-------------------- -------------------------------------------------- ---------- ----------
DGGRID01_0001 /dev/asm-grid02 1024 608
DGGRID02_0002 /dev/asm-grid06 1024 704
DGGRID02_0000 /dev/asm-grid04 1024 704
DGGRID01_0002 /dev/asm-grid03 1024 632
DGGRID01_0000 /dev/asm-grid01 1024 648
DGGRID02_0001 /dev/asm-grid05 1024 696
DGRECOVERY_0000 /dev/asm-dgrecovery1 3072 2888
DGDATA01_0000 /dev/asm-dgdate01 2048 488
DGSYSTEM_0000 /dev/asm-dgsystem1 8192 2880
ASM DISK可以是:
- 整个物理磁盘或物理分区
- 存储阵列中的磁盘或分区
- LVM VG上的逻辑卷(LV) 但是非常不建议你使用LVM。
- 存储服务器上的逻辑单元(LUN)
- 网络文件系统(NFS)非常不建议使用NFS,存储性能比较差
- 分配单元(AU):ASM磁盘划分的最小可用读写单元。而且也是ASM逻辑存储的基本构成。他是由存储器(磁盘 LUN RAID阵列磁盘)物理块构成的(参考你的ASM DISK所使用介质)。如果你的ASM磁盘是VG-LV构成的话,其使用的是LV的LE所对应的PE构成的。但是非常不建议你使用LVM。
- 在创建磁盘组时可用配置AU大小
-
- 11g默认是1MB
- 19C默认的是4MB
- 小AU的优点就是能够被数据库ASM的DB_BUFFER_CACHE快速缓存。
- 大AU的优点就是能够提高更高效的连续读写操作或多块读取操作。
1.4. ORACLE19C-ASM冗余级别
ORACLE19C ASM提供了4种冗余级别:
- External:asm 磁盘组不提供数据冗余,依靠外部raid提供数据保护
- Normal:asm 磁盘组提供2份数据冗余,至少需要2个故障组,最多同时损坏一个故障组的磁盘,假定磁盘空间足够的话,最多可损坏n-1个磁盘
- High:asm 磁盘组提供3份数据冗余,至少需要3个故障组,最多同时损坏二个故障组的磁盘,假定磁盘空间足够的话,最多可损坏n-1个磁盘
- Flex:asm 磁盘组提供3份或者2份数据冗余,至少需要3个故障组,在拥有5个以及以上故障组情况下最多同时损坏二个故障组的磁盘,当故障组数少于5个时最多损坏一个故障组磁盘,最多可损坏n-1个磁盘
2. 实操
2.1. ASMCMD命令介绍
使用grid用户执行ASMCMD命令,在asm中,任何命令都可以使用help+命令来输出帮助。
[grid@hfdb30:/home/grid]$asmcmd help
asmcmdStarts asmcmd or executes the commandSynopsisasmcmd [-V] [--nocp] [-v {errors | warnings | normal | info | debug} ] [--privilege {sysasm | sysdba} ] [-p] [--inst <instance_name>] [--discover][<command>]DescriptionThe environment variables ORACLE_HOME and ORACLE_SID determine theinstance to which the program connects, and ASMCMD establishes abequeath connection to it, in the same manner as a SQLPLUS / ASSYSASM. The user must be a member of the OSASM group.If Flex ASM is enabled, the ASMCMD connects to any one of the ASMinstances running in the cluster. The connection to ASM instance doesnot depend on the environment variables ORACLE_HOME and ORACLE_SID.The ASMCMD alert log shows to which instance ASMCMD is connected to.If the user wants to connect to a specific ASM instance, --inst optionshould be used to specify the instance name.Specifying the -V option prints the asmcmd version number andexits immediately.Specifying the --nocp option disables connection pooling feature forASMCMD.Specifying the -v option prints extra information that can helpadvanced users diagnose problems.Specify the --privilege option to choose the type of connection. There areonly two possibilities: connecting as SYSASM or as SYSDBA.The default value if this option is unspecified is SYSASM.Specifying the -p option allows the current directory to be displayedin the command prompt, like so:ASMCMD [+DATA/ORCL/CONTROLFILE] >Specifying the --discover option uses discovery string obtained fromListener, does not use ORACLE_SID.[command] specifies one of the following commands, along with itsparameters.Type "help [command]" to get help on a specific ASMCMD command.commands:--------afd_configure, afd_deconfigure, afd_di, afd_dsget, afd_dssetafd_filter, afd_label, afd_lsdsk, afd_lslbl, afd_refreshafd_scan, afd_state, afd_unlabelmd_backup, md_restoreamdu_extractlsattr, setattraudcleanaudittrail, audclearproperty, audcleartimestampaudcreatejob, auddropjob, audloaduniauditfiles, audsetdebugaudsetjobinterval, audsetjobstatus, audsetproperty, audsettimestampaudsettraillocation, audshowtimestamp, lsaudcleaneventslsaudcleanupjobs, lsaudconfigparamscd, cp, du, find, help, ls, lsct, lsdg, lsof, mkaliasmkdir, pwd, rm, rmalias, setsparseparent, showclustermodeshowclusterstate, showpatches, showversionchblk, lsblk, mapau, mapblk, mapextentchdg, chkdg, dropdg, iostat, lsdsk, lsod, mkdg, mountoffline, online, rebal, remap, stamp, stamplist, umountchfg, lsfg, mkfg, mvfile, rmfgpwcopy, pwcreate, pwdelete, pwget, pwmove, pwsetchqg, lsqg, mkqg, mvfg, rmqgchcc, dsget, dsset, lscc, lsop, mkcc, rmcc, shutdownspbackup, spcopy, spget, spmove, spset, startupchtmpl, lstmpl, mktmpl, rmtmplchgrp, chmod, chown, groups, grpmod, lsgrp, lspwusr, lsusrmkgrp, mkusr, orapwusr, passwd, rmgrp, rmusr, rpusrvolcreate, voldelete, voldisable, volenable, volinfovolresize, volset, volstat
常用命令
ls | ls -ls | 列出ASM目录下的内容及其属性、磁盘空间占用 和 lsdg命令同理 |
du | du dgdata1 | 显示指定的ASM目录下ASM文件占用的所有磁盘空间 |
pwd | pwd | 查看当前路径 |
cd | cd .. | 进入上层目录 |
lsct | 列出当前ASM客户端的信息 | |
lsdg | 列出所有磁盘组及其属性 | |
lsof | 列出数据文件 控制文件等文件的信息 | |
lsdsk | 列出盘的信息(ASM DISK) | |
rm | rm -rf | 删除命令 |
cp | 磁盘组与操作系统之间拷贝文件 |
[grid@hfdb30:/home/grid]$asmcmd ls -ls
State Type Rebal Sector Logical_Sector Block AU Total_MB Free_MB Req_mir_free_MB Usable_file_MB Offline_disks Voting_files Name
MOUNTED EXTERN N 512 512 4096 4194304 5120 4972 0 4972 0 N DGDATA1/
MOUNTED NORMAL N 512 512 4096 4194304 3072 2108 1024 542 0 Y DGGRID1/
MOUNTED NORMAL N 512 512 4096 4194304 3072 2604 1024 790 0 N DGGRID2/
MOUNTED EXTERN N 512 512 4096 4194304 5120 4460 0 4460 0 N DGRECOVERY1/
MOUNTED EXTERN N 512 512 4096 4194304 8192 828 0 828 0 N DGSYSTEM1/
在 ASMCMD 环境中,ASM 本身并不直接支持文件重命名操作。ASM 的设计目的是管理存储,而不是提供文件系统级别的操作,如重命名。因此,你不能直接使用 ASMCMD 来重命名文件。
不过,你可以通过以下步骤间接实现文件的重命名:
ASMCMD> cp thread_2_seq_50.313.1186845409 thread_2_seq_50.313.1186845409.bak
copying +DGRECOVERY1/hfdb/ARCHIVELOG/2024_12_04/thread_2_seq_50.313.1186845409 -> +DGRECOVERY1/hfdb/ARCHIVELOG/2024_12_04/thread_2_seq_50.313.1186845409.bakASMCMD> cp +DATA/orcl/tablespace01.dbf +DATA/orcl/new_tablespace01.dbf
2.2. 系统动态添加ASM可用磁盘
2.2.1. 前期准备
目前 ASM 磁盘组信息:
[grid@hfdb30:/home/grid]$asmcmd lsdg
State Type Rebal Sector Logical_Sector Block AU Total_MB Free_MB Req_mir_free_MB Usable_file_MB Offline_disks Voting_files Name
MOUNTED EXTERN N 512 512 4096 4194304 5120 4972 0 4972 0 N DGDATA1/
MOUNTED NORMAL N 512 512 4096 4194304 3072 2108 1024 542 0 Y DGGRID1/
MOUNTED NORMAL N 512 512 4096 4194304 3072 2604 1024 790 0 N DGGRID2/
MOUNTED EXTERN N 512 512 4096 4194304 5120 4456 0 4456 0 N DGRECOVERY1/
MOUNTED EXTERN N 512 512 4096 4194304 8192 828 0 828 0 N DGSYSTEM1/
检查磁盘组配置情况:
[grid@hfdb30:/home/grid]$sqlplus / as sysasm
set line2222 pages1000
col name for a30
col path for a60
col mode_status for a10
col diskgroupname for a10
col type for a10
select a.path,a.name,a.mode_status,b.name diskgroupname,b.type
from v$asm_disk a,v$asm_diskgroup b
where a.group_number=b.group_number;
PATH NAME MODE_STATU DISKGROUPN TYPE
------------------------------------------------------------ ------------------------------ ---------- ---------- ----------
/dev/asm-grid3 DGGRID1_0002 ONLINE DGGRID1 NORMAL
/dev/asm-grid4 DGGRID2_0000 ONLINE DGGRID2 NORMAL
/dev/asm-grid1 DGGRID1_0000 ONLINE DGGRID1 NORMAL
/dev/asm-grid2 DGGRID1_0001 ONLINE DGGRID1 NORMAL
/dev/asm-dgsystem1 DGSYSTEM1_0000 ONLINE DGSYSTEM1 EXTERN
/dev/asm-grid6 DGGRID2_0002 ONLINE DGGRID2 NORMAL
/dev/asm-dgdata1 DGDATA1_0000 ONLINE DGDATA1 EXTERN
/dev/asm-grid5 DGGRID2_0001 ONLINE DGGRID2 NORMAL
/dev/asm-dgrecovery1 DGRECOVERY1_0000 ONLINE DGRECOVERY EXTERN 19 rows selected.SQL> show parameter asm_diskstringNAME TYPE VALUE
------------------------------------ ---------- ------------------------------
asm_diskstring string /dev/asm*
通过以上查询可以发现,dgdata1 磁盘组有 1 块磁盘组成,冗余方式为外部冗余。
📢 注意: 如果 DATA 磁盘组是 NORMAL 冗余,则需要至少 2 块新磁盘;如果 DATA 磁盘组是 HIGH 冗余,则需要至少 3 块新磁盘。
2.2.2. 配置新 ASM 磁盘
ASM 磁盘配置方式为多路径+UDEV 方式,新增两块盘大小一致磁盘 /dev/sdm
和 /dev/sdn
作为需要更换的新磁盘,大小为 5G。
[root@hfdb30 ~]# ll /dev/sd*
brw-rw---- 1 root disk 8, 0 Dec 4 21:06 /dev/sda
brw-rw---- 1 root disk 8, 1 Dec 4 21:06 /dev/sda1
brw-rw---- 1 root disk 8, 2 Dec 4 21:06 /dev/sda2
brw-rw---- 1 root disk 8, 16 Dec 4 21:06 /dev/sdb
brw-rw---- 1 root disk 8, 17 Dec 4 21:06 /dev/sdb1
brw-rw---- 1 root disk 8, 32 Dec 4 21:06 /dev/sdc
brw-rw---- 1 root disk 8, 33 Dec 4 21:06 /dev/sdc1
brw-rw---- 1 grid asmadmin 8, 48 Dec 4 21:06 /dev/sdd
brw-rw---- 1 grid asmadmin 8, 64 Dec 4 21:06 /dev/sde
brw-rw---- 1 grid asmadmin 8, 80 Dec 4 21:06 /dev/sdf
brw-rw---- 1 grid asmadmin 8, 96 Dec 4 21:06 /dev/sdg
brw-rw---- 1 grid asmadmin 8, 112 Dec 4 21:06 /dev/sdh
brw-rw---- 1 grid asmadmin 8, 128 Dec 4 21:06 /dev/sdi
brw-rw---- 1 grid asmadmin 8, 144 Dec 4 21:06 /dev/sdj
brw-rw---- 1 grid asmadmin 8, 160 Dec 4 21:06 /dev/sdk
brw-rw---- 1 grid asmadmin 8, 176 Dec 4 21:06 /dev/sdl
brw-rw---- 1 root disk 8, 192 Dec 4 21:06 /dev/sdm
brw-rw---- 1 root disk 8, 208 Dec 4 21:06 /dev/sdn
生成uuid:
for i in {m..n};
do
echo "KERNEL==\"sd?\",SUBSYSTEM==\"block\", PROGRAM==\"/usr/lib/udev/scsi_id --whitelisted --replace-whitespace --device=/dev/\$name\",RESULT==\"`/usr/lib/udev/scsi_id --whitelisted --replace-whitespace --device=/dev/sd$i`\", SYMLINK+=\"asm-disk$i\",OWNER=\"grid\", GROUP=\"asmadmin\",MODE=\"0660\""
doneKERNEL=="sd?",SUBSYSTEM=="block", PROGRAM=="/usr/lib/udev/scsi_id --whitelisted --replace-whitespace --device=/dev/$name",RESULT=="1ATA_VBOX_HARDDISK_VBb73b1077-44f36cb7", SYMLINK+="asm-dgdate02",OWNER="grid", GROUP="asmadmin",MODE="0660"
KERNEL=="sd?",SUBSYSTEM=="block", PROGRAM=="/usr/lib/udev/scsi_id --whitelisted --replace-whitespace --device=/dev/$name",RESULT=="1ATA_VBOX_HARDDISK_VBc212c542-6652c568", SYMLINK+="asm-dgdate03",OWNER="grid", GROUP="asmadmin",MODE="0660"
配置uuid:
[root@hfdb30 ~]# vi /etc/udev/rules.d/99-oracle-asmdevices.rules
[root@hfdb30 ~]# /sbin/udevadm trigger --type=devices --action=change
[root@hfdb30 ~]# ls -lsa /dev/asm*
0 lrwxrwxrwx 1 root root 3 Dec 4 21:18 /dev/asm-dgdata1 -> sdl
0 lrwxrwxrwx 1 root root 3 Dec 4 21:18 /dev/asm-dgdate02 -> sdm ####磁盘的路径
0 lrwxrwxrwx 1 root root 3 Dec 4 21:18 /dev/asm-dgdate03 -> sdn
0 lrwxrwxrwx 1 root root 3 Dec 4 21:18 /dev/asm-dgrecovery1 -> sdk
0 lrwxrwxrwx 1 root root 3 Dec 4 21:18 /dev/asm-dgsystem1 -> sdj
0 lrwxrwxrwx 1 root root 3 Dec 4 21:18 /dev/asm-grid1 -> sdd
0 lrwxrwxrwx 1 root root 3 Dec 4 21:18 /dev/asm-grid2 -> sde
0 lrwxrwxrwx 1 root root 3 Dec 4 21:18 /dev/asm-grid3 -> sdf
0 lrwxrwxrwx 1 root root 3 Dec 4 21:18 /dev/asm-grid4 -> sdg
0 lrwxrwxrwx 1 root root 3 Dec 4 21:18 /dev/asm-grid5 -> sdh
0 lrwxrwxrwx 1 root root 3 Dec 4 21:18 /dev/asm-grid6 -> sdi
[root@hfdb30 ~]#-- 在节点2上面配置
[root@hfdb31 ~]# vi /etc/udev/rules.d/99-oracle-asmdevices.rules
[root@hfdb31 ~]# /sbin/udevadm trigger --type=devices --action=change
[root@hfdb31 ~]# ls -lsa /dev/asm*
0 lrwxrwxrwx 1 root root 3 Dec 4 21:21 /dev/asm-dgdata1 -> sdl
0 lrwxrwxrwx 1 root root 3 Dec 4 21:21 /dev/asm-dgdate02 -> sdm
0 lrwxrwxrwx 1 root root 3 Dec 4 21:21 /dev/asm-dgdate03 -> sdn
0 lrwxrwxrwx 1 root root 3 Dec 4 21:21 /dev/asm-dgrecovery1 -> sdk
0 lrwxrwxrwx 1 root root 3 Dec 4 21:21 /dev/asm-dgsystem1 -> sdj
0 lrwxrwxrwx 1 root root 3 Dec 4 21:21 /dev/asm-grid1 -> sdd
0 lrwxrwxrwx 1 root root 3 Dec 4 21:21 /dev/asm-grid2 -> sde
0 lrwxrwxrwx 1 root root 3 Dec 4 21:21 /dev/asm-grid3 -> sdf
0 lrwxrwxrwx 1 root root 3 Dec 4 21:21 /dev/asm-grid4 -> sdg
0 lrwxrwxrwx 1 root root 3 Dec 4 21:21 /dev/asm-grid5 -> sdh
0 lrwxrwxrwx 1 root root 3 Dec 4 21:21 /dev/asm-grid6 -> sdi[root@hfdb30 ~]# ls -lsa /dev/sd*
0 brw-rw---- 1 root disk 8, 0 Dec 4 21:18 /dev/sda
0 brw-rw---- 1 root disk 8, 1 Dec 4 21:18 /dev/sda1
0 brw-rw---- 1 root disk 8, 2 Dec 4 21:18 /dev/sda2
0 brw-rw---- 1 root disk 8, 16 Dec 4 21:18 /dev/sdb
0 brw-rw---- 1 root disk 8, 17 Dec 4 21:18 /dev/sdb1
0 brw-rw---- 1 root disk 8, 32 Dec 4 21:18 /dev/sdc
0 brw-rw---- 1 root disk 8, 33 Dec 4 21:18 /dev/sdc1
0 brw-rw---- 1 grid asmadmin 8, 48 Dec 4 21:18 /dev/sdd
0 brw-rw---- 1 grid asmadmin 8, 64 Dec 4 21:18 /dev/sde
0 brw-rw---- 1 grid asmadmin 8, 80 Dec 4 21:18 /dev/sdf
0 brw-rw---- 1 grid asmadmin 8, 96 Dec 4 21:18 /dev/sdg
0 brw-rw---- 1 grid asmadmin 8, 112 Dec 4 21:18 /dev/sdh
0 brw-rw---- 1 grid asmadmin 8, 128 Dec 4 21:18 /dev/sdi
0 brw-rw---- 1 grid asmadmin 8, 144 Dec 4 21:18 /dev/sdj
0 brw-rw---- 1 grid asmadmin 8, 160 Dec 4 21:18 /dev/sdk
0 brw-rw---- 1 grid asmadmin 8, 176 Dec 4 21:18 /dev/sdl
0 brw-rw---- 1 grid asmadmin 8, 192 Dec 4 21:18 /dev/sdm
0 brw-rw---- 1 grid asmadmin 8, 208 Dec 4 21:18 /dev/sdn
2.2.3. 原 ASM 磁盘组添加新磁盘
这里有两种方式,使用 sqlplus 命令行方式或者 ASMCA 图形化管理。
图形化方式过于简单,不做演示,本文使用命令行方式进行操作:
[grid@hfdb30:/home/grid]$sqlplus / as sysasmSQL> show parameter asm_power_limitNAME TYPE VALUE
------------------------------------ ----------- ------------------------------
asm_power_limit integer 1-- 当 asm_power_limit 设置为 0 时,不会自动重平衡,但是可以使用下面的语句来手动重平衡(比如白天加盘了,晚上再让它手动执行)
-- alter diskgroup DATA rebalance power 10;
查看磁盘状态-->进而获得哪个磁盘属于哪个磁盘组:
set lines 200;
col name for a30;
col path for a30;
select path, state, name, total_mb, free_mb from v$asm_disk;PATH STATE NAME TOTAL_MB FREE_MB
------------------------------ -------- ------------------------------ ---------- ----------
/dev/asm-dgdate02 NORMAL 0 0
/dev/asm-dgdate03 NORMAL 0 0
/dev/asm-grid2 NORMAL DGGRID1_0001 1024 700
/dev/asm-grid1 NORMAL DGGRID1_0000 1024 700
/dev/asm-grid4 NORMAL DGGRID2_0000 1024 868
/dev/asm-grid3 NORMAL DGGRID1_0002 1024 708
/dev/asm-dgdata1 NORMAL DGDATA1_0000 5120 4972
/dev/asm-dgrecovery1 NORMAL DGRECOVERY1_0000 5120 4456
/dev/asm-dgsystem1 NORMAL DGSYSTEM1_0000 8192 828
/dev/asm-grid5 NORMAL DGGRID2_0001 1024 868
/dev/asm-grid6 NORMAL DGGRID2_0002 1024 868SQL> select group_number,name,type,total_mb,free_mb from v$asm_diskgroup;GROUP_NUMBER NAME TYPE TOTAL_MB FREE_MB
------------ ------------------------------ ------ ---------- ----------1 DGDATA1 EXTERN 5120 49722 DGGRID1 NORMAL 3072 21083 DGGRID2 NORMAL 3072 26044 DGRECOVERY1 EXTERN 5120 44565 DGSYSTEM1 EXTERN 8192 828
添加新磁盘:
SQL> alter diskgroup DGDATA1 add disk '/dev/asm-dgdate02','/dev/asm-dgdate03' rebalance power 10;Diskgroup altered.SQL> select * from v$asm_operation;no rows selectedSQL>
等待磁盘组数据重平衡完毕,即 v$asm_operation
查询结果为空,重平衡后发现磁盘组的空间和磁盘发生变化,空间变成了新旧磁盘的总空间,新磁盘已经成功添加:
[grid@hfdb30:/home/grid]$asmcmd lsdg
State Type Rebal Sector Logical_Sector Block AU Total_MB Free_MB Req_mir_free_MB Usable_file_MB Offline_disks Voting_files Name
MOUNTED EXTERN N 512 512 4096 4194304 12288 12116 0 12116 0 N DGDATA1/
MOUNTED NORMAL N 512 512 4096 4194304 3072 2108 1024 542 0 Y DGGRID1/
MOUNTED NORMAL N 512 512 4096 4194304 3072 2604 1024 790 0 N DGGRID2/
MOUNTED EXTERN N 512 512 4096 4194304 5120 4456 0 4456 0 N DGRECOVERY1/
MOUNTED EXTERN N 512 512 4096 4194304 8192 828 0 828 0 N DGSYSTEM1/
[grid@hfdb30:/home/grid]$sqlplus / as sysasmset line2222 pages1000
col name for a30
col path for a60
col mode_status for a10
col diskgroupname for a10
col type for a10
select a.path,a.name,a.mode_status,b.name diskgroupname,b.type from v$asm_disk a,v$asm_diskgroup b where a.group_number=b.group_number;PATH NAME MODE_STATU DISKGROUPN TYPE
------------------------------------------------------------ ------------------------------ ---------- ---------- ----------
/dev/asm-dgdate02 DGDATA1_0001 ONLINE DGDATA1 EXTERN
/dev/asm-dgdate03 DGDATA1_0002 ONLINE DGDATA1 EXTERN
/dev/asm-grid2 DGGRID1_0001 ONLINE DGGRID1 NORMAL
/dev/asm-grid1 DGGRID1_0000 ONLINE DGGRID1 NORMAL
/dev/asm-grid4 DGGRID2_0000 ONLINE DGGRID2 NORMAL
/dev/asm-grid3 DGGRID1_0002 ONLINE DGGRID1 NORMAL
/dev/asm-dgdata1 DGDATA1_0000 ONLINE DGDATA1 EXTERN
/dev/asm-dgrecovery1 DGRECOVERY1_0000 ONLINE DGRECOVERY EXTERN1/dev/asm-dgsystem1 DGSYSTEM1_0000 ONLINE DGSYSTEM1 EXTERN
/dev/asm-grid5 DGGRID2_0001 ONLINE DGGRID2 NORMAL
/dev/asm-grid6 DGGRID2_0002 ONLINE DGGRID2 NORMAL11 rows selected.
如果是扩容磁盘组,至此已经完成扩容了。
2.2.4. 从原 ASM 磁盘组踢出旧磁盘
ASM磁盘提倡:只增不减,在生产过程中最好不要去做这个操作。
-- 这里跟添加磁盘不一样,不能写磁盘路径名称,只能写磁盘名称,即 v$asm_disk.name
SQL> alter diskgroup DGDATA1 drop disk 'DGDATA1_0002' rebalance power 10;Diskgroup altered.Diskgroup altered.SQL> select * from v$asm_operation;GROUP_NUMBER OPERA PASS STAT POWER ACTUAL SOFAR EST_WORK EST_RATE EST_MINUTES ERROR_CODE CON_ID
------------ ----- --------- ---- ---------- ---------- ---------- ---------- ---------- ----------- -------------------------------------------- ----------1 REBAL COMPACT WAIT 1 1 0 0 0 0 01 REBAL REBALANCE RUN 1 1 0 0 0 0 01 REBAL REBUILD DONE 1 1 0 0 0 0 0SQL> select * from v$asm_operation;GROUP_NUMBER OPERA PASS STAT POWER ACTUAL SOFAR EST_WORK EST_RATE EST_MINUTES ERROR_CODE CON_ID
------------ ----- --------- ---- ---------- ---------- ---------- ---------- ---------- ----------- -------------------------------------------- ----------1 REBAL COMPACT REAP 1 1 1 0 0 0 01 REBAL REBALANCE DONE 1 1 7 7 0 0 01 REBAL REBUILD DONE 1 1 0 0 0 0 0SQL> select * from v$asm_operation;no rows selected
等待磁盘组数据重平衡完毕,即 v$asm_operation
查询结果为空,重平衡后发现磁盘组的空间和磁盘发生变化,旧磁盘已经成功踢出:
[grid@hfdb30:/home/grid]$asmcmd lsdg
State Type Rebal Sector Logical_Sector Block AU Total_MB Free_MB Req_mir_free_MB Usable_file_MB Offline_disks Voting_files Name
MOUNTED EXTERN N 512 512 4096 4194304 10240 10080 0 10080 0 N DGDATA1/
MOUNTED NORMAL N 512 512 4096 4194304 3072 2108 1024 542 0 Y DGGRID1/
MOUNTED NORMAL N 512 512 4096 4194304 3072 2604 1024 790 0 N DGGRID2/
MOUNTED EXTERN N 512 512 4096 4194304 5120 4456 0 4456 0 N DGRECOVERY1/
MOUNTED EXTERN N 512 512 4096 4194304 8192 828 0 828 0 N DGSYSTEM1/
[grid@hfdb30:/home/grid]$
由于是使用UDEV 配置,所以需要将旧磁盘从配置中删除(所有节点均执行):
-- 从 UDEV 配置文件移除以下旧磁盘信息
vi /etc/udev/rules.d/99-oracle-asmdevices.rules
-- 刷新 UDEV 配置
/sbin/udevadm trigger --type=devices --action=change