长春人行OA系统双机热备及Veritas备份

双机热备5753

及相关软硬件实施文档
一、硬件情况：
1．   IBM X255 服务器两台，配置相同。
2．   外置磁盘柜一台，（EXP 300）。
3．   ServerRaid 4Lx 阵列卡两块。
4．   外置SCSI电缆线两条（用于连接主机和磁盘柜的）。
5．   IBM 显示器一台
6．   KVM一套。
7．   备份服务器一台（HP d530 CMT，HP DDS4磁带机）
8．   扫描仪一套

二、软件情况：
1．   IBM ServeRAID Manager（版本7.1），此软件随机赠送。
2．   IBM ServeRAID BIOS/Firmware Update Diskette，此软件随机赠送。
3．   IBM ServerGuide Setup and Installation CD(版本7.1)，此软件随机赠送。
4．   Windows 2000 Advance Server CD。
5．   Rose HA 软件一套。
6．   Veritas Backup Exec软件一套。
7．   Norton9.0防病毒软件一套

三、硬件安装步骤：
1．   连接好主机，键盘，鼠标，显示器，以及显示器共享器（注意：连接主机和共享器的鼠标和键盘线上有标注接服务器还是共享器，不要接错）。
2．   分别插入服务器和磁盘扩展柜的硬盘，每个服务器插2块36G的SCSI硬盘，磁盘柜中插入4块73G的SCSI硬盘。
3．   用SCSI电缆将每一台主机的ServeRaid 4Lx 卡和磁盘扩展柜后端接口相连，4Lx卡采用intet80303 100Mhz控制芯片，为单通道卡。PCI总线为64位33Mhz/66Mhz，板载高速Cache 32M，SCSI传输速率为160MB/s
4．   将每台主机中一块网卡用交叉线连接，用作心跳线，检测对方是否在线。
5．   将每台主机中的另一块网卡和网络连接。
6．   接好主机的磁盘扩展柜的电源，都是冗余电源，采用两路分离的供电线路（单路供电容易引起单点故障，使得冗余电源失去意义）。

四、IP地址/别名/域设置
备份域控制器（备份服务器，即HP d530 CMT）：11.60.22.3 / 255.255.255.0
备份域：Backup.com
主服务器：nodeB-s：11.60.22.2 / 255.255.255.0
          心跳地址：192.168.0.3 / 255.255.255.0
热备服务器：nodeB-s：11.60.22.1 / 255.255.255.0
           心跳地址：192.168.0.1 / 255.255.255.0
（说明：设置11.60.22.2为主服务器，而11.60.22.1为热备服务器，是为安全考虑。
参考安全防护的警告，1号地址往往是恶意用户、黑客攻击的重点，采用这种非习惯做法有助于提高服务器的安全系数）
虚拟服务器：2000cluster： 11.60.22.10 / 255.255.255.0
共享盘阵的盘符：X                                                   

五、软件安装步骤:
1．   升级ServeRaid卡的BIOS 和Firmware。
2．   用IBM ServeRAID Manager（版本7.1）启动，设置服务器本机的RAID，IBM X255 服务器主板自带一个SCSI 管理卡，不支持RAID，使用其中一块硬盘安装系统，另外一块备用。
3．   安装操作系统，系统安装好后再对磁盘柜做设置。
4．   安装操作系统，可以使用IBM提供的IBM ServerGuide Setup and Installation CD来做设置，然后进入无人值守安装，这样可以省去安装各种驱动程序的步骤。
5．   安装HP d530 CMT 2000 advance server成域控制器。
管理员administrator 口令：123456

六、安装操作系统
1．     关闭EXP300
2．     打开nodeB-s，从IBM ServeGuide Setup and Installation CD 启动。
3．     语言选择“English”。
4．     键盘选择“Unite States”; 鼠标选择“Unite States”。
5．     接收协议，按“NEXT”。
6．     选中操作系统“Windows 2000 advance Server” 按“NEXT”。
7．     选择“Express”按“NEXT”。
8．     设置“日期”和“时间”。
9．     选中“Controller3”图标（4Lx卡）按鼠标右键，选择“Restore to Factory Default Setting”
10． 跳过对控制器的其它设置
11． 继续安装，输入2000 advance server 注册信息
12． 为系统创建分区，自动拷贝驱动程序到系统安装分区。
13． 系统提示插入2000源盘，Copy 系统文件，弹出光盘，提示重启
14． 进入无人安装模式
15． 打开NodeA-s，以同样的步骤安装
16． 两台服务器本地管理员administrator 口令：123456
17． 将两台服务器都添加到Backup域，管理员administrator 口令：123456
（ 如果你手够快，拿两张安装CD，也可以同时安装，就是要频繁切换KVM了，呵呵～～ ）

七、安装共享盘柜EXP300
18． 关闭NodeA-s，打开EXP300,打开NodeB-s
19． 放入ServeRaid启动光盘，启动进入嵌入式Linux系统
20． 点中“Controller 1”图标按鼠标右键，选择“Create Array”。
21． 选择“Customer Configuration”, 然后按“NEXT”。
22． 根据客户自己的需求创建阵列和逻辑驱动器，设置为RAID 5EE，两块硬盘做热备。
23． 重新启动服务器，进入系统。
24． 分区格式化硬盘为NTFS格式，设置盘符为X：
25． 再次用ServeRaid光盘重启，进入阵列管理界面。
   
26． 鼠标右键点击“Controller 1”,选择“Cluster Action”,   然后选择“Configure for Clustering”。
27． 然后会弹出一个窗口
             Controller Name:   B
             Partner    Name:   A
             Channel     ID :    7
             Logical   Drive1 : shared,   Merge group =1    （共享盘柜）
       等待硬盘初始化和同步完成后，退出配置工具，并且关闭nodeB-s。
28． 用ServeRaid启动，进入阵列管理界面，
29． 鼠标右键点击“Controller 1”,选择“Cluster Action”。
30． 然后选择“Configure for Clustering”。
Controller Name:   B
Partner    Name:   A
Channel     ID :   6
31． 退出配置工具，重启nodeA-s。
32． 系统报错，给出N多提示，这是两块卡暂时还没有同步造成的（这可能和控制卡的版本升级），不用理会，让控制自己调整。大致提示如下：
Your system has unattended mode activated, If you wish to corrent the above conditions, press any key to exit this mode, Then ,use one of the above function keys to correct the problem
   F2 列详细信息   F4 Retry command   F5 改变配置并设置驱动器到Defunct   F10 继续不改变配置
不用理会，让系统自己处理。
33． 进入系统后，系统看不到盘阵，请Copy ServeRaid中2000操作系统的Cluster目录下的Support目录中的ipshahto.exe 到C:\
34． 进入DOS提示符模式：输入如下指令：
Ø        c:
Ø        cd \
Ø        copy con switch.bat
c:\ipshahto.exe   synchoff
^Z保存退出
Ø        switch（回车，接管盘柜控制权）
第一次切换时间可能比较长一点，一般不超过3分钟，耐心等一下，以后速度就快了。系统的大致提示如下：
IBM ServeRAID Hostile TakeOver Utility Version 6.10.0.0
Copyright IBM Corporation 1997-2003.
WARNING: The logical drives will NOT be synchronized.
WARNING: ServeRAID #0 (sp#4): RdVerify FAILED on ONL logical drive #0 (mergeId #
1). LastError = 0x45d.
ServeRAID #0 (sp#4): RdVerify FAILED on ONL logical drive #0 (mergeId #1). BSBES
B = 0x00001d61.
ServeRAID Adapter #0
Drive # 0        1        2        3        4        5        6        7
State    OK[1]    FRE      FRE      FRE      FRE      FRE      FRE      FRE
到这里就可以确认盘柜已经接管成功了。
35． 使用磁盘管理器，可以看到新添加的盘，设置盘符X:（一定要和主机的相同）
36． 打开主机nodeA-s，进入操作系统，重复33、34步，切换时可以看到这样的提示
    IBM ServeRAID Hostile TakeOver Utility Version 6.10.0.0
Copyright IBM Corporation 1997-2003.
ServeRAID Adapter #0
Drive # 0        1        2        3        4        5        6        7
State    OK[1]    FRE      FRE      FRE      FRE      FRE      FRE      FRE
    OK,现在两块控制卡同步已经完全完成了！！
（说明：
测试对磁盘柜的设置成功与否，可以通过执行如下脚步：switch.bat 来获得对磁盘柜的接管权。脚步中的具体参数可以通过 ipshahto.exe /? 来查看。）

八、安装Rose HA 软件并进行配置
1．   首先在主机和备机上安装Rose HA   软件。安装过程中需要输入本机和对方服务器的主机名，不要输错。其他默认就可以。
2．   然后在两台主机上分别启动Rose HA 。
3．   选择“files”菜单下的“License”，看看其Host ID ,并记录到申请卡上（在软件包装内），另外一台也记录Host ID到这张申请卡，发传真给代理商，一般在下午6点前，会有注册号发送到你注册的邮箱中，我收到的如下：
    　中国人民银行长春中心支行 Build6004 Win2000 2BB8191320 2618D57320
HostID: 2BB8191320
Serial: 0005070716352121
Date:   99999999
License:
3814688835345901
0138345125239634
9824951241240939
1426806126353307
7919052602815341
3139147433233284
7475238725312908
1819475624506611
8838518374752792
0772220154283939
HostID: 2618D57320
Serial: 0005070716352121
Date:   99999999
License:
0312177812339805
1751189972023241
6382606431660023
2213249682180093
1022333844668174
2227187856318017
3618298523419525
7164897626221817
8929197492770938
9959350118429633
4．   输入上述的License到对应的主机上，现在Rose HA集群可以启动了。
5．   选择“files”菜单下的“Start Cluster Operation”。
6．   设置 TCP/IP Socket Private Net。选择快捷方式栏中的TCP/IP Socket Private Net 图标，如图所示： ，设置私有地址，如下：
   
通过对方私有网卡IP地址监听对方心跳。
7．   双机间建立VOLUME共享服务，赋予主机和备机一个共享的磁盘空间X，该磁盘空间由磁盘阵列柜提供。
8．   需要做一个批处理文档，来解决SCSI对外接磁盘柜EXP 300的接管问题，在VOLUME的设置界面中的Start Executable 中导入c:\switch.bat。
9．   双机间建立IP共享服务，赋予主机和备机一个漂移的IP地址11.60.22.10。
    主服务器：nodeB-s：11.60.22.2
    热备服务器：nodeB-s：11.60.22.1
并建立IP和Volume的关联关系
   
10．           双机间建立ALIAS共享服务，赋予主机和备机一个漂移的主机名2000Cluster，并建立其和IP的关联关系。
     
11．               建双机服务停止，并改为手工启动
12．               在主机上安装Domino R5服务，程序目录放在C: 数据目录放在X:盘，R5进行相应的设置，去掉启动口令，确认启动没有问题，q退出R5数据库服务
13．               备机运行Switch.bat切换盘阵到备机，重新添加X：盘符到共享盘。重复安装Domino R5同上
14．               Domino R5上进行相关的设置，去掉启动口令
15．               确认备份启动R5正常后，停止R5服务
16．               添加Domino服务。
17．               OK,设置完成。
   

九、测试双机热备
1．   在双机上做bring in/bring out操作。OK!
   
2．   在双机之间做take over的操作。 OK!
   
3．   关闭/重启活动机，备机的接管情况。OK!
   
4．   拔掉活动主机的外网连接线，备机的接管情况。   Ok！
   
5．   数据库切换测试   OK!!
   
以上测试都通过。

十、使用双机系统的注意事项：
一定要保证EXP300全天24小时都不要断电，这样有助于保持盘阵的稳定。

十一、        双机日常维护：
1.        双机系统已经设置为全自动模式，不需要人工干预，尽量不要人为在双机服务器上进行操作。平时按ctrl+alt+del锁定。
2.        主机、备机没有启动顺序的要求。

十二、        安装Veritas备份
1、           放Backup Exec 9.1光盘到HP d530,自动运行，或者执行根目录下的Brower.exe程序，启动安装，选择本地安装，安装备份服务器。
     
2、           输入各种License号码，安装完成重启
3、           再次放入Backup Exec 9.1光盘到HP d530,自动运行，或者执行根目录下的Brower.exe程序，启动安装，选择远程安装，然后推送Agent软件到两台热备服务器。
      推送时，选择推送完毕后立即重新启动。
4、           推送完毕，两台热备份服务器弹出计时重启窗口，计时完毕后自动重启。
5、           安装完毕

十三、        使用Veritas备份
1、   系统备份已经选择使用磁带机，当磁带写忙了，会提示换磁带。
2、   备份管理界面
   
3、   制定备份策略为：周日――周五在1:00开始增量备份，最迟在5:00结束；周六在1:00开始全备份，最迟在5:00结束。备份数据为共享盘阵上的Lotus目录下的数据库数据文件。
   
4、   备份向导
  
5、   IDR备份向导
  
6、   恢复向导
  

十四、        测试备份，OK!
1.        使用HP磁带和IBM磁带都读写正常。
2.        手工备份成功完成！
  
3.        手工恢复正常
4.        自动作业运行正常
  

十五、        使用veritas备份的注意事项
1.        备份系统也设置为自动模式，基本不需要人工干预。平时按ctrl+alt+del锁定。
2.        两台双机在登录进入OS之前，确保备份服务器打开已经进入操作系统，因为双机上的备份需要依靠备份服务器的认证，平时可以保持备份服务器24小时开机。

十六、        备份系统日常维护：
1.        当磁带使用完毕后，请及时换带。
2.        将每盒磁带上标注好备份开始和结束的日期，方便以后恢复查找。
3.        如果发现备份失败，可以启动Veritas的备份窗口，选择备份向导进行手工备份。软件有丰富的中文帮助手册，并不复杂。

十七、        柯达i200大幅面扫描仪安装使用
柯达有一个简明的中文安装手册，2-3页也很快就能装好，还包括怎么拆扫描仪
1.按照说明书，组装扫描仪
2.在主机上安装1394火线卡
3.开机重新启动，2000以上系统能自动识别
4.装上加密狗到LPT口
5.安装3张光盘上的软件到系统上，一个驱动，两个其它软件。
6.可以使用系统附带的映像程序，扫描文件，在扫描时弹出的窗口的下方，选择AOF或者Flat来决定是使用进纸器或者扫描平台扫描文件
7.当然，象其它扫描仪一样，你也可以安装OCR识别软件扫描、图像处理软件扫描（ACDSEE、photoshop等）这取决于你的使用习惯和工作内容。
8.使用系统带的映像程序，做扫描操作测试，AOF/Flat分别测试，OK!
9.如果扫描仪的平台镜面脏了，请使用扫描仪所带的清洗附件擦拭。

十八、        Norton防病毒客户端直接光盘安装
＊ 需要安装的防病毒客户端的服务器范围：
HP d530 CMT 备份服务器
双机中的主服务器nodeB-s
双机中的热备服务器nodeA-s
1．配置网关指向 11.60.22.2542．编辑hosts文件，添加11.60.17.3   jlchcnav 3．在运行中输入
\\11.60.17.3
4．打开防病毒服务器上的安装目录，运行Setup，按提示安装完成，由于采用网络部署，不需要从新启动计算机。 安装完成后，防病毒自动运行。病毒库更新与防病毒服务器同步，也不需要人工参与。

本文来自ChinaUnix博客，如果查看原文请点：http://blog.chinaunix.net/u2/70914/showart_727348.html