注册
基于VMware虚拟机搭建DMDSC共享存储集群环境
培训园地/ 文章详情 /

基于VMware虚拟机搭建DMDSC共享存储集群环境

qinxue 2022/11/15 1409 1 0

本文主要介绍如何基于虚拟机添加共享磁盘,在虚拟机中部署DMDSC集群环境,便于理解DMDSC的相关知识。
1. 环境准备
硬件:两台相同配置机器,2G内存,20G本地磁盘,2块网卡,另有一块共享磁盘40G。
网 络 配 置: 每台机器配置2个网卡:机器1 (192.168.122.130,10.12.10.55),机器2:(192.168.122.132,10.12.10.60)
下面步骤是介绍如何在虚拟机中添加共享磁盘。
1.选择目标虚拟机UbuntuKy_64,编辑虚拟机设置
image.png

2.虚拟机设置界面硬件栏,选择"添加"
image.png
3.选择“硬盘”,点击“下一步”
image.png
4.磁盘类型建议选择SCSI,点击“下一步”
image.png
5.“创建新虚拟磁盘”,点击“下一步”
image.png
6.分配磁盘空间大小,如性能有要求,建议选择存储为单个文件且立即分配空间,点击“下一步”
image.png
7.指定磁盘位置,点击“完成”
image.png
8.新磁盘已添加完成
9.选择目标虚拟机Ub64_2,“编辑虚拟机设置”
image.png
10.虚拟机设置界面硬件栏,选择"添加"
image.png
11.选择“硬盘”,点击“下一步”
image.png
12.磁盘类型建议选择SCSI,点击“下一步”
image.png
13.“使用现有虚拟磁盘”,点击“下一步”
image.png
14.浏览路径选择上文第7步自定义的虚拟磁盘文件,点击“完成”
image.png
15.自动返回虚拟机设置界面硬件栏后,点击“确定”
16.目标UbuntuKy_64,Ub64_2虚拟机,再次进入虚拟机设置硬件界面,点击设备栏选择刚创建的共享磁盘设备,选择“高级”
image.png
17.在“硬盘高级设置”中,选择相同的虚拟设备节点,点击确定
image.png
返回检查
image.png
18.由于原生虚拟机配置会自动生成“.lck文件”锁定自有文件,无法同时开启两端虚拟机
image.png
image.png
19.修改目标UbuntuKy_64,Ub64_2虚拟机中配置文件
image.png
添加以下参数(vmx参数说明: http://sanbarrow.com/vmx.html)
disk.locking=“FALSE”
disk.EnableUUID = “TRUE”
diskLib.dataCacheMaxSize = “0”
diskLib.dataCacheMaxReadAheadSize = “0”
diskLib.dataCacheMinReadAheadSize = “0”
diskLib.dataCachePageSize= “4096”
diskLib.maxUnsyncedWrites = “0”
scsi0:2.deviceType = “disk”
scsi0:2.sharedBus = “Virtual”
scsi0:2.shared = “true”
scsi标识号按虚拟设备节点修改
20.开启两端虚拟机验证所有可用块设备的信息,共享磁盘已正确加载
lsblk
image.png
21.UbuntuKy_64节点,查看挂载磁盘信息
df -h #查看挂在磁盘信息
image.png
fdisk -l #对照找出未挂载磁盘信息
image.png
df -hT #查看挂载磁盘类型
22.UbuntuKy_64节点,创建磁盘分区

  1. 输入 fdisk /dev/sdb
  2. 依次输入 n ->p -> 1->回车-> +100M ->回车,完成第一块磁盘划分
  3. 依次输入 n ->p -> 2->回车-> +100M ->回车,完成第二块磁盘划分
  4. 依次输入 n ->p -> 3->回车-> +100M ->回车,完成第三块磁盘划分
  5. 依次输入 n ->p ->4 ->回车->回车->回车,完成第四块磁盘划分
    6) 输入W,写入退出
    image.png
    fdisk -l查看新建磁盘分区
    23.挂载存储
    [root@ DB0]# vi /etc/udev/rules.d/60-raw.rules
ACTION=="add", KERNEL=="sdb2", RUN+="/bin/raw /dev/raw/raw2 %N"
ACTION=="add", KERNEL=="sdb3", RUN+="/bin/raw /dev/raw/raw3 %N"
ACTION=="add", KERNEL=="sdb4", RUN+="/bin/raw /dev/raw/raw4 %N"
ACTION=="add", KERNEL=="raw[1-4]", OWNER="root", GROUP="root", MODE="660" 

[root@ DB0]# reboot

注:如果没有start_udev命令,可reboot重启机器后查看dev/raw下的文件。
注意:两台设备都需要修改。可通过blockdev --getsize64 /dev/raw/raw1命令查看裸设备大小。如果60-raw.rules文件不存在,直接创建即可。

2. 裸设备搭建2节点 DMDSC

1.安装DM数据库
机器1安装数据库
创建dmdba用户,并切换到dmdba用户下,数据库安装在/dm8目录下;
将dm iso文件挂载到/mnt/dm目录后,进入/mnt/dm目录,执行./DMInstall.bin。按照图像化界面提示,下一步安装。

机器2安装数据库
创建dmdba用户,并切换到dmdba用户下,数据库安装在/dm8目录下;过程……略;
2.配置 dmdcr_cfg.ini
在/home/dscdata下新建dmdcr_cfg.ini文件;

 DCR_VTD_PATH            = /dev/raw/raw2
 DCR_OGUID            = 45330
[GRP]
 DCR_GRP_TYPE         = CSS
 DCR_GRP_NAME         = GRP_CSS
 DCR_GRP_N_EP         = 2
 DCR_GRP_DSKCHK_CNT         = 60
[GRP_CSS]
 DCR_EP_NAME          = CSS0
 DCR_EP_HOST          =  192.168.122.130 #内网地址
 DCR_EP_PORT          = 9341
[GRP_CSS]
 DCR_EP_NAME          = CSS1
 DCR_EP_HOST          = 192.168.122.132  #内网地址
 DCR_EP_PORT          = 9343
[GRP]
 DCR_GRP_TYPE         = ASM
 DCR_GRP_NAME         = GRP_ASM
 DCR_GRP_N_EP         = 2
 DCR_GRP_DSKCHK_CNT   = 60
[GRP_ASM]
 DCR_EP_NAME          = ASM0
 DCR_EP_SHM_KEY          = 93360
 DCR_EP_SHM_SIZE          = 10
 DCR_EP_HOST          = 10.12.10.55  #外网地址
 DCR_EP_PORT          = 9349
 DCR_EP_ASM_LOAD_PATH = /dev/raw
[GRP_ASM]
 DCR_EP_NAME          = ASM1
 DCR_EP_SHM_KEY          = 93361
 DCR_EP_SHM_SIZE          = 10
 DCR_EP_HOST          = 10.12.10.60  #外网地址
 DCR_EP_PORT          = 9351
 DCR_EP_ASM_LOAD_PATH = /dev/raw
[GRP]
 DCR_GRP_TYPE         = DB
 DCR_GRP_NAME         = GRP_DSC
 DCR_GRP_N_EP         = 2
 DCR_GRP_DSKCHK_CNT         = 60
[GRP_DSC]
 DCR_EP_NAME          = DSC0
 DCR_EP_SEQNO          = 0
 DCR_EP_PORT          = 5236
 DCR_CHECK_PORT          = 9741
[GRP_DSC]
 DCR_EP_NAME          = DSC1
 DCR_EP_SEQNO          = 1
 DCR_EP_PORT          = 5236
 DCR_CHECK_PORT          = 9742

3.初始化ASM磁盘组
在机器1上启动dmasmcmd工具,依次输入以下命令
[root@ DB0]# cd /dm8/bin
[root@ DB0]# ./dmasmcmd

  ASM> create votedisk '/dev/raw/raw2' 'vote'
  ASM> create asmdisk '/dev/raw/raw3' 'LOG0'
  ASM> create asmdisk '/dev/raw/raw4' 'DATA0'
  ASM> init dcrdisk '/dev/raw/raw1' from '/home/dscdata/dmdcr_cfg.ini' identified by 'abcd'
  ASM> init votedisk '/dev/raw/raw2' from '/home/dscdata/config/dmdcr_cfg.ini'


4.配置 dmasvrmal.ini
 在/home/dscdata下新建dmasvrmal.ini文件;

  MAL_INST_NAME             = ASM0
  MAL_HOST             = 10.12.10.55 
  MAL_PORT             = 7236

[MAL_INST2]
  MAL_INST_NAME             = ASM1
  MAL_HOST             = 10.12.10.60
  MAL_PORT             = 7237

注意:两台机器该文件相同。

5.配置 dmdcr.ini
在机器1的/home/dscdata下新建dmdcr.ini文件;

DMDCR_MAL_PATH             = /home/dscdata/dmasvrmal.ini
DMDCR_SEQNO            = 0

#ASM重启参数,命令行方式启动
DMDCR_ASM_RESTART_INTERVAL = 0
DMDCR_ASM_STARTUP_CMD =  /dm8/bin/dmasmsvr dcr_ini=/home/dscdata/dmdcr.ini

#DB重启参数,命令行方式启动
DMDCR_DB_RESTART_INTERVAL = 0
DMDCR_DB_STARTUP_CMD =  /dm8/bin/dmserver path=/home/dscdata/dsc0_config/dm.ini dcr_ini=/home/dscdata/dmdcr.ini


在机器2的/home/dscdata下新建dmdcr.ini文件;

DMDCR_PATH             = /dev/raw/raw1
DMDCR_MAL_PATH             = /home/dscdata/dmasvrmal.ini
DMDCR_SEQNO            = 1

#ASM重启参数,命令行方式启动
DMDCR_ASM_RESTART_INTERVAL = 0
DMDCR_ASM_STARTUP_CMD =  /dm8/bin/dmasmsvr dcr_ini=/home/dscdata/dmdcr.ini

#DB重启参数,命令行方式启动
DMDCR_DB_RESTART_INTERVAL = 0
DMDCR_DB_STARTUP_CMD =  /dm8/bin/dmserver path=/home/dscdata/dsc0_config/dm.ini dcr_ini=/home/dscdata/dmdcr.ini


6.启动CSS,ASM服务
分别先后启动两台机器的CSS、ASM服务
手动启动 dmcss 命令:
[/dm8/bin]# ./dmcss DCR_INI=/home/dscdata/dmdcr.ini

手动启动 dmasmsvr 命令:
[/dm8/bin]# ./dmasmsvr DCR_INI=/home/dscdata/dmdcr.ini

7.使用 dmasmtool 工具创建 DMASM 磁盘组
选择机器1,启动 dmasmtool 工具。
[/dm8/bin]# ./dmasmtool DCR_INI=/home/dscdata/dmdcr.ini
ASM>create diskgroup ‘DMLOG’ asmdisk ‘/dev/raw/raw3’ #创建日志磁盘组
ASM>create diskgroup ‘DMDATA’ asmdisk ‘/dev/raw/raw4’ #创建数据磁盘组

8.配置dminit.ini 文件
创建dminit.ini 配置文件,保存到/home/dscdata 目录

  system_path              = +DMDATA/data
  system               = +DMDATA/data/dsc/system.dbf
  system_size              = 128
  roll                = +DMDATA/data/dsc/roll.dbf
  roll_size              = 128
  main                = +DMDATA/data/dsc/main.dbf
  main_size              = 128
  ctl_path              = +DMDATA/data/dsc/dm.ctl
  ctl_size              = 8
  log_size              = 256
  dcr_path              = /dev/raw/raw1
  dcr_seqno              = 0
  auto_overwrite              = 1
  PAGE_SIZE              = 32
[DSC0]
  config_path             = /home/dscdata/dsc0_config
  port_num             = 5236
  mal_host             = 192.168.122.130
  mal_port             = 9340
  log_path             = +DMLOG/log/dsc0_log01.log
  log_path             = +DMLOG/log/dsc0_log02.log
[DSC1]
  config_path             = /home/dscdata/dsc1_config
  port_num             = 5236
  mal_host             = 192.168.122.132
  mal_port             = 9341
  log_path             = +DMLOG/log/dsc1_log01.log
  log_path             = +DMLOG/log/dsc1_log02.log


9. 使用 dminit 初始化 DB 环境
选择机器1,启动 dminit工具初始化数据库。dminit 执行完成后,会在/home/dscdata/dsc0_config 和/home/dscdata/dsc1_config下生成配置文件 dm.ini 和 dmmal.ini。

./dminit control=/home/data/dminit.ini

10. 启动数据库服务器
首先,将机器1上/home/dscdata/dsc1_config目录/home/dscdata/dsc目录拷贝到机器2相同目录下。然后,再分别启动 dmserver 即可完成 DMDSC集群搭建。
如果 DMCSS 配置有自动拉起 dmserver 的功能,可以等待 DMCSS 自动拉起实例,不需要手动启动。
如果需要手动启动,可参考下面的操作步骤:
机器1:
./dmserver /home/dscdata/dsc0_config/dm.ini dcr_ini=/home/dscdata/dmdcr.ini
机器2:
./dmserver /home/dscdata/dsc1_config/dm.ini dcr_ini=/home/dscdata/dmdcr.ini

评论
后发表回复

作者

文章

阅读量

获赞

扫一扫
联系客服