Domino 群集简介

SkyBelieve

Domino 群集简介（一）

撰稿者:白炯心

概述
----随着Lotus Domino群件系统的普遍应用，Domino系统的规模不断扩大，基于Domino的关键应用也不断增多。Domino系统的可用性和可扩展性就成了许多用户关注的问题。针对这些方面的需求，Lotus提供了Domino群集的功能。当群集中的一个Domino服务器出现故障或需要进行维护时，用户将转向群集中的其他服务器，这样整个系统的可用性就大大提高了。


----一般来说，用户在Domino系统中使用群集有以下原因：


提高关键应用的可靠性

提高负载的可伸缩性

迁移服务器

灾难备份

Domino群集的优点包括：


失效转移


----用户的关键数据库、关键服务器，包括中继服务器都可以转移到群集中其他服务器。发生失效转移时，用户的请求被重定向到其他服务器，这样，用户在服务器当机时仍可以访问数据库。



负载平衡


----服务器间的负载平衡可以保证用户对服务器的请求较均匀地分布在群集里的各个服务器上，优化整个系统的性能。



群集复制


----要建立有效的群集，关键之一就是在两个或多个服务器上建立数据库的副本。 群集复制保证了所有的修改都能立即传播到群集中其他副本上。它利用事件驱动的机制使数据库严格同步，保证了信息的高可用性和一致性。



系统扩展


----当用户数增加时，利用群集可以方便地对Domino系统进行扩展。用户帐户可以均匀地分布在群集中，这样，对突发的负载高峰能够进行负载平衡。数据库也可以建立多个副本，提高数据的可用性。



群集的规划


----规划一个Domino群集系统，主要需考虑以下方面：



确定Domino系统需要提供的服务


----Domino 服务器上的任务包括邮件邮递、复制、Internet邮件、LDAP目录服务、Web、中继服务等等。确定了需要提供的服务之后，才能决定是否需要群集，因为并不是所有的任务都支持群集。例如，Domino R4.6x的群集不支持Web用户，因此，将Web数据库放在R4.6x群集上并不能提高可用性。而对于使用Notes客户端访问服务器的用户来说，将邮件和应用数据库放在群集上可以实现高可用性和负载平衡，是值得考虑的方案。



分析数据库的特点


----确定了Domino系统需要提供的服务之后，需要分析系统中要用到的数据库的特点，以帮助进行硬件的规划。数据库的主要特点包括：


系统中数据库的数量和类型

数据库的大小

数据增加、修改和删除的频率

数据的时效性

数据库的用户的数量和分布

数据库副本在群集中的位置

服务器之间的网络连接

----分析了上述特点后，可以据此决定哪些数据库需要在群集中建立多个副本。一般说来，邮件数据库建立两个副本就足够了，内容需要频繁更新的应用数据库也不应超过三个副本，以免数据同步所需要的开销太多，影响系统的性能。



分析用户的特点


----根据所使用的服务器功能，用户可以分为四类

仅使用邮件

邮件和日程安排

数据库用户

Web用户

网络协议和拓扑结构


----Domino 支持TCP/IP、SPX/IPX和NetBEUI等协议，但群集内部的通讯只能使用TCP/IP协议。因此，Notes用户可以用其他协议访问 Domino服务器，而服务器之间的群集复制则基于TCP/IP。在同一群集中的服务器必须使用相同的协议集。Lotus推荐用户在群集环境中只使用 TCP/IP，因为失效转移等功能专门针对TCP/IP作了优化。


----Domino群集对网络拓扑没有限制，只要是能够支持Domino本身的网络都可以。建议使用专门的局域网来进行服务器之间的通讯，这样，可以减少群集内部的通讯对整个系统性能的影响。



规划硬件环境


----群集硬件的规划原则与单个Domino服务器基本相同，主要的区别在于需要预留一些内存和CPU处理能力，用来处理群集内部的通讯，以及负载平衡。群集中的各服务器不一定要使用相同的硬件，规划时主要考虑硬件能否提供需要的性能指标就可以了。硬件的瓶颈通常出现在以下地方：


内存

CPU

磁盘I/O

磁盘空间

网络带宽

其中，内存可以按用户数量进行估算：


---- 服务器需要的基本内存 + （并发用户数 / 2）MB


复制器需要的内存为：


---- 复制器数量 * 16 MB + 群集复制器数量 * 16 MB


---- 所需的磁盘空间主要用于操作系统、Domino程序文件、Domino数据库等，Windows NT系统还需要页面文件（大小等于实际物理内存+10%）。



群集的设计


---- 以下从技术的角度对群集进行说明。

SkyBelieve

Domino 群集简介（二）
撰稿者:白炯心

群集的构成
----随首先，管理进程（AdminP）对Domino群集的建立和运行起着极为重要的作用。将服务器加入群集的过程就是由管理进程完成的。


----群集的主要组成部分包括：

群集管理进程


----群集管理进程 (CLADMIN) 是Domino的服务器任务之一，它负责配置(包括增加、删除)和启动其他群集组件。群集管理进程在服务器启动和群集成员变动时都会自动运行。



群集管理器


----群集管理器运行在群集中的每个服务器上，用来跟踪群集中所有成员的状态，包括每个服务器是否可用，负载如何等信息。当一个服务器被加入群集中时，Domino会自动启动群集管理器。


群集管理器的任务包括：


确定哪些服务器属于同一群集

监测服务器的可用性及负载

将服务器状态的改变通知其他群集管理器

根据群集中服务器的状态，重定向对数据库的请求

根据群集中服务器的状态，平衡服务器的负载

将失效转移和负载平衡事件记录到服务器的日志中



群集复制器


----群集复制器任务(CLREPL)负责进行群集中数据库副本间的数据同步。它是事件驱动的，利用CLDBDIR.NSF数据库来确定哪些服务器上的数据库需要复制。


----一旦某个服务器不再响应，群集复制器会重试几次，并不断增加重试的间隔，直到间隔达到一小时。因此，当服务器从故障中恢复后，群集复制器不会再尝试进行复制，最好立即强制进行常规复制，以保证数据的同步。



群集统计信息


----群集的统计信息保存在每个服务器的统计信息缓存中。群集共有两类统计信息：


----Server.Cluster，与服务器的活动相关的统计信息，如失效转移事件、群集中服务器的状态等


----Replica.Cluster，与群集复制事件相关的统计信息，如更新的文档数等。


群集数据库目录


----群集数据库目录(CLDBDIR.NSF)在群集中的每个服务器上都有一个副本，它是由群集数据库目录管理器任务(CLDBDIR)自动创建和更新的。它包含群集中所有数据库的目录，及每个数据库的简要表。其他群集任务和组件会从CLDBDIR.NSF中读取所需的信息。



Notes客户端群集组件


----Notes客户端包含两个群集组件，群集缓存和Notes API。群集缓存就是data目录中的CLUSTER.NCF文件，其中保存了群集中其他服务器的列表。Notes API使应用程序可以使用Domino群集的失效转移和负载平衡功能。Notes客户端不需要作专门的配置。



失效转移


----Notes客户端第一次访问群集中的服务器时，会自动产生CLUSTER.NCF文件，记录群集中服务器的列表。从一个服务器到另一个服务器失效转移的过程为：


用户视图打开服务器上的数据库


客户端收到"服务器没有响应"消息，之后搜索CLUSTER.NCF文件，找到并访问列表中的下一个服务器


服务器的群集管理器确定所请求的数据库的副本在哪里


如果此数据库副本不在当前服务器上，群集管理器将告知客户端副本所在的服务器的名称，客户端由此去访问该服务器


用户看到所需的数据库已打开

----失效转移通常是按副本来进行的，实际上还可以按路径来进行，这主要用于同一服务器上有同一数据库的多个副本的情况。


----当某个系统不可用时，以下用户活动会触发失效转移：


对数据库的操作：


打开数据库

打开文档链接、视图链接或数据库链接

使用@commanf([FileOpenDatabase])

运行LotusScript程序，其中调用了Db.OpenWithFailover

从Java程序调用打开数据库的函数

工作站复制



对宿主服务器的操作：


查找服务器地址

发送邮件

查找邮件地址

邮件邮递

通过服务器打开URL时

----不会发生失效转移的情况：


用户正在编辑文档，只有重新打开数据库才能触
发失效转移，因此用户的修改不能直接保存


选择菜单"文件" - "数据库" - "属性"，"存取控
制"，"打开"，或"新建拷贝"


选择菜单"查看" - "转到"


指定在已不可用的服务器上运行的代理


服务器任务


服务器作为新建数据库的模板服务器


失效转移对用户的影响


----用户打开数据库时如果发生了失效转移，用户实际打开的数据库图标会出现在工作台上，以后也将一直访问新的数据库副本，除非管理员将服务器标记为忙，用户才会转移回去。邮件数据库发生失效转移后，如果用户重新登录Notes，或切换了场所文档，邮件书签将恢复到宿主服务器上，不管该服务器是否已恢复。



负载平衡


----负载平衡通过将新的会话重定向到其他服务器上，使负载较为均匀地分布在群集中，从而提高群集资源的利用率。当Domino服务器作为群集的一员运行时，它会不断监测自己的负载情况，也会记录其他服务器的状态。当负载达到管理员设定的阀值时，服务器的状态为忙。如果用户此时执行前面列出的可触发失效转移的操作之一，试图打开一个会话，他将被重定向到群集中其他可用的服务器上。如果所执行的操作不能触发失效转移，或没有其他服务器可用，用户的操作将仍在原服务器上执行，尽管服务器已处于忙状态。



群集设计规则


---- 以下是一些群集的基本规则：


必须使用层次名，这是AdminP的要求，AdminP用来建立群集

在同一群集中的服务器必须属于同一域，即共享同一公共通讯录

一个服务器在同一时刻只能属于一个群集

群集中可以有2到6个服务器

一个域中可以有任意多个群集

群集中的服务器必须使用同样的网络协议集

建议使用专用的网络进行服务器间的通讯

可以将不同硬件和操作系统的服务器加入同一群集

SkyBelieve

Domino 群集简介（三）

撰稿者:白炯心
邮件数据库的分布示例
----下图是一个由四个服务器组成的群集系统。可以看到，在群集中分布邮件数据库时，每个数据库只需建立一个副本。注意不要把一个服务器上的所有数据库的副本都放到另一个服务器上，以免当服务器不可用时，另一个服务器负载过重。



应用数据库的分布示例


----下图是一个Domino应用系统的例子。可以看到，重要的数据库，如Public.nsf，对可用性要求最高，则在三个服务器上都有副本。其他常用的数据库，如Forms.nsf，对可用性也有一定要求，则需要在另一服务器上建立副本。而不常用的数据库，如LowUsage.nsf，则不必建立其他副本，以减少系统的开销。



群集的安装和配置


----要使用群集功能，Domino必须是R5企业级服务器，或R4.6x Advanced Services License。


----群安装群集的基本步骤如下：


安装并配置第一台服务器

创建验证日志数据库

注册附加服务器

安装并配置附加服务器

在一个服务器上创建群集

将群集数据库目录CLDBDIR.NSF复制到要加入群集的所有服务器上

将其他服务器加入群集

（可选）如果要使用私有局域网进行服务器间的通讯，在配置服务器后应手工进行端口配置


配置私有局域网


----为群集设置私有局域网（ LAN）可以 将服务器探测和群集复制同其余网络通讯分开。这样可防止群集通讯降低主网络速度。


----下面是为群集设置私有网络的过程。


在群集的每个服务器上安装附加网络接口卡。这些卡应通过私有中心服务器或转换器连接。


配置 LAN 使用 TCP/IP


为每个服务器分配第二个 IP 地址。例如：在使用两个服务器的群集中，可以使用地址 192.168.64.1 和 192.168.64.2


为新 IP 地址分配主机名，并将项目放到 HOSTS 文件或 DNS 文件中。例如：在使用两个服务器的群集中，可以分配主机名 ACME_CLU 和 ACME2_CLU。HOSTS 文件中的项目可能为：
192.168.64.1 ACME_CLU
192.168.64.2 ACME2_CLU


确保每个群集服务器都可以 ping 其他群集服务器的 IP 地址和主机名，来校验私有 LAN 正常运作。同时，应确保其他服务器也能使用正规 LAN 地址 ping 群集服务器


在每个群集成员的“服务器”文档的“端口”“Notes 网络端口”附签中，添加并为私有 LAN 启用新端口。
例如：在“服务器”文档的“端口”“Notes 网络端口”附签中添加下列信息：
Port=CLUSTER
Notes Network=Cluster Network
Net Address=ACME_CLU
Enabled=ENABLED


从相应的子网为每个端口分配 IP 地址并且将信息以下列格式写入 NOTES.INI 文件:
PORT1_TcpIPAddress=0,a.b.c.d:1352
PORT2_TcpIPAddress=0,e.f.g.h:1352
其中 PORT1 和 PORT2 是端口名称，a.b.c.d 和 e.f.g.h 是这些端口的 IP 地址。
例如：端口名称为 TCPIP 和 CLUSTER，这些信息可能是：
TCPIP_TcpIPAddress=0,192,114,32,5:1352
CLUSTER_TcpIPAddress=0,192.168.64.1:1352


将下列内容添加到 NOTES.INI 文件中：
Server_Cluster_Default_Port=Cluster Port
其中 Cluster Port 是为群集创建的端口。此例中，此行为：
Server_Cluster_Default_Port=CLUSTER


重新启动服务器。


确保 Domino 使用私有 LAN


----要校验 Domino 是否使用私有 LAN，请执行以下操作：

在服务器控制台，键入 show cluster。

在结果中，查找 Server cluster default port: Cluster Port。

其中 Cluster Port 是为群集创建的端口。此例中为：
Server cluster default port: CLUSTER


确保群集复制使用私有 LAN


----要确保群集复制使用私有 LAN，可以查看群集统计信息。


在 Domino Administrator 中，单击“服务器”“统计信息”附签。


展开“所有统计信息”，并展开 NET。


展开群集的端口名。


查看私有 LAN 端口的下列统计信息：
BytesReceived
BytesSent


展开 Replica，然后展开 Cluster。


展开 SessionBytes，并查看下列群集复制统计信息：
In
Out


比较NET.portname.BytesReceived 和 Replica.Cluster.SessionBytes.In 的值。这些值应彼此非常接近，尽管并不相同。


比较NET.portname.BytesSent 和 Replica.Cluster.SessionBytes.Out 的值。这些值也应该很接近。它们不完全相同，因为私有网络不仅用于群集复制。



确认群集已正确运行：


在Domino Administrator中的"服务器"标签下，展开"群集"，群集名称后面列出了群集中所有服务器的名称


在Domino Adminstrator中的"配置"标签下，展开"群集"，再点击下面的"群集"，群集名称后面列出了群集中所有服务器的名称


打开已加入群集的服务器文档，在"基本"标签下"群集名称"域中正确列出了群集的名称


在Domino Administrator中的"服务器"标签下，选择一个群集中的服务器，点击它的"状态"标签，在任务列表中应有CLDBDIR和CLREPL


群集中所有服务器上都应有群集目录数据库，其标题为"Cluster Directory（R4）"，文件名为CLDBDIR.NSF，这些数据库的副本ID（replica ID）都应相同

SkyBelieve

Domino 群集简介（四）
撰稿者:白炯心


--------------------------------------------------------------------------------

管理Domino群集


触发失效转移
----有多种情况都可以触发失效转移，下面介绍管理员如何通过设置一些参数来触发失效转移。



服务器不可用


----管理员在进行软硬件维护工作时，可以将服务器关机或断开网络连接，这时服务器对用户来说即为不可用，会触发失效转移。



服务器限制访问


----管理员也可以将服务器设为限制访问状态。在此状态下，服务器将拒绝所有新的打开数据库的请求，但对本地数据库的访问不受影响，已与数据库建立连接的用户也不会被断开。限制访问状态是通过一个NOTES.INI参数Server_Restricted来设置的，也可以在服务器控制台上用命令来设置：


set config Server_MaxUsers = maximum number of active users


----如果服务器已达到其最多用户数的设置，而群集中又没有其他可用的服务器，则用户会收到一条错误信息：


Server Error: Access to the server is restricted due to maximum number of users.


----用户不能与服务器建立连接。



数据库不可用


----在以下情况发生时，数据库是不可用的。



数据库停止服务


----管理员将数据库标记为停止服务，这时已打开数据库的用户不受影响，新的用户请求将被重定向到数据库的其他副本。



数据库等待删除


----为了减小对用户的影响，只有在所有用户都已关闭与数据库的连接之后才能将数据库标记为等待删除。标记之后，服务器将不再接受打开此数据库的请求。


----管理员可以在群集数据库目录中将数据库设为停止服务或等待删除。


设置邮件路由的失效转移


在Domino Adminstrator中，点击"配置"标签，展开"消息处理"区段


点击"配置"


选择要设置的服务器的配置文档


点击"路由器/SMTP" - "高级" - "控制"标签


在群集失效转移域中，选择以下选项之一：
禁用
Enabled for last hop only (the default)
Enabled for all transfers in this domain
其中"禁用"表示禁止邮件路由的失效转移，"Enabled for last hop only" 表示只对邮件邮递的最后一个跳段启用失效转移，"Enabled for all transfers in this domain" 表示对本网络域中全部邮件邮递都启用失效转移。


保存并关闭配置文档

注意，此项设置影响到客户端的邮件传递，但不影响邮件服务器不可用时从客户端发送邮件。当邮件服务器失效时，用户发送邮件后，邮件邮递将转移到群集中的其他服务器，由其他服务器的路由器完成。



设置负载平衡


服务器忙的定义


服务器可用性指标


----群集中的每个服务器都会定期检测自己的负载，检测的指标是服务器对客户端请求的平均响应时间。服务器的负载通过服务器可用性指标来表示，它的数值在0到 100之间，100表示服务器负载很轻，响应速度最快，0表示服务器负载很重，响应速度慢。为了计算该指标，Domino服务器运行一组Notes RPC操作，测量其响应时间，并按以下公式计算：


----服务器可用性指标 = 100 - 当前响应时间 / 最优响应时间



服务器可用性阀值


----通过设置服务器可用性阀值，管理员可以定义服务器何时进入忙状态。这个阀值是通过NOTES.INI中的Server_Availabitity_Threshold参数来设置的，也可以用以下Domino控制台命令来设置：


set config Server_Availability_Threshold = n


----其中 n 的范围在0到100之间。



群集活动的监控和记录


----使用服务器控制台和Domino Adminstrator都可以对群集当前的状况进行监控。



使用控制台：


----在Domino服务器的控制台上输入命令：


show cluster


----此命令会显示群集中服务器的名称，它们的可用性指标等信息。


show stat server


----显示某个服务器的可用性指标和可用性阀值。


show stat server.cluster.*


使用Domino Adminstrator:


----在Domino Adminstrator中可以分别查看每个服务器的状态：


在服务器标签下，选择要查看的服务器


点击"统计信息"标签


在统计信息列表中，点击"服务器"查看服务器的可用性指标和阀值，点击"服务器" - "群集"查看其他统计信息。

----群集的失效转移和负载平衡活动都会记录在服务器的日志中，可以打开log.nsf查看。

SkyBelieve

Domino 群集简介（五）

撰稿者:白炯心


--------------------------------------------------------------------------------

设置群集复制


群集复制器
----缺省情况下，Domino服务器会自动启动一个群集复制器任务(CLREPL)，数据库中的修改会被立即复制到其他服务器上的副本中。如果数据库更新得非常频繁，群集复制器可能来不及处理所有的复制请求，数据的更新就会延迟。这时，可以考虑启动多个群集复制器任务，并行处理复制请求。



对某些数据库禁用群集复制


----群集建立时，所有数据库都会被群集复制器复制。管理员可以在CLDBDIR.NSF数据库中禁用或启动某个数据库的群集复制设置。注意这个设置只影响所选择的副本，不影响其他副本和常规复制。



在Internet上使用群集


----在Domino R5企业版服务器中，增加了Internet群集管理器(ICM)，用来将Domino群集的优点扩展到Domino Web服务器和HTTP客户端上。


----ICM使Domino系统可以为HTTP客户端(Internet浏览器)提供失效转移和负载平衡功能，提高Web服务器和数据库的可用性。ICM支持HTTP和HTTPS协议。


----ICM 是HTTP客户端和Domino Web服务器之间的中介。当Domino服务器在群集中运行时，它生成URL将HTTP客户端的请求转向ICM。ICM维护着关于群集中服务器和数据库的可用性信息，它通过定期向群集中的Web服务器发送探针，来确定它们的状态和可用性。当ICM收到客户端的请求后，它会使该客户端转向包含所请求的数据库的最可用的服务器。


----ICM 既可以在群集中的某个服务器上运行，也可以在群集之外。当ICM在在群集中的某个服务器上时，它访问本地的群集数据库目录当它在群集之外运行时，它访问群集中某个服务器上的群集数据库目录。如果此服务器不可用，它还可以转向群集中的其他服务器。ICM使用它本地的Domino目录，因此，ICM与群集必须在同一域中。


----在大多数情况下，使用ICM都可以提高性能。运行ICM的开销很小，但它所提供的负载平衡可以使性能有显著提高。



ICM的配置方式


在群集之外配置一个或多个ICM


----这种方式一般适用于访问量较大的Web站点，服务器最好作为专用的ICM服务器。为了提高可用性，还可以利用操作系统的群集将两个或多个ICM服务器配成群集。


----下图就是在群集之外配置两个ICM的例子。浏览器用户通过这两个ICM来访问后端的Domino群集。



在群集中配置一个或多个ICM


----这种方式不需要额外的硬件来设置专门的ICM。如果在群集中配置了多个ICM，它们之间可以进行失效转移。



配置和启动ICM


----管理员可以在Domino服务器文档中对ICM进行配置。ICM的具体配置步骤请参考Domino R5管理员帮助。


----可以将ICM加入NOTES.INI的ServerTasks参数中，使ICM在服务器启动时自动启动。如


ServerTasks=ROUTER,REPLICA,...,ICM


----也可以在控制台上输入以下命令：


load icm



失效转移和负载平衡


----使用ICM时，失效转移和负载平衡的工作方式与普通Domino群集相同。管理员所作的配置，如服务器可用性指标、数据库等待删除等也相同。注意，在服务器达到最多用户数时，如果没有其他服务器可用，ICM能够让用户转向该服务器，这一点与普通Domino群集不同。



----ICM维护着以下信息，以便查找客户端请求的数据库副本：


数据库的可用性和存储位置，从群集数据库目录中得到

每个服务器的可用性，ICM会定期探测群集中的所有服务器

哪些服务器支持HTTP，哪些服务器支持HTTPS，从每个服务器的服务器文档中得到

----ICM通过以下步骤来决定打开数据库的哪个副本：


确定数据库副本的位置，它们是否被标记为禁用或等待删除


检查包含数据库副本的每个服务器的可用性指标


通过PING服务器的HTTP或HTTPS端口确定服务器的可用性


去掉所有不可到达和在限制访问状态的服务器


去掉所有忙和已达到最多用户数的服务器


从剩余的服务器中选择负载最轻的。如果没有剩余的服务器，则从忙或已达到最多用户数的服务器中选择一个


当一个服务器失效时，连接到此服务器的客户端会收到一条出错信息。要想转移到另一个副本上，用户需要再次连接ICM，如重新输入URL，或点击浏览器中的"返回"按钮。



监控ICM


----ICM会将主要的事件记录在服务器日志中，如找不到数据库等。打开log.nsf的"其他事件"视图就可以看到。


----从Domino Administrator中，还可以看到ICM的统计信息，如收到的命令总数、成功和不成功的重定向等。

Mc_Hill

哦,学习ing

qingzhou

好，SkyBelieve   辛苦了。
加精鼓励~~~

SkyBelieve

谢谢，版主！！！

  

终于盼到了，我的第一篇精华！！！！

zydudu

好文，收藏

kukar

谢谢，收藏