Chinaunix

标题: 集群监控工具十八般兵器,哪个您最拿手?(获奖名单已公布-10-24) [打印本页]

作者: send_linux    时间: 2013-09-17 16:18
标题: 集群监控工具十八般兵器,哪个您最拿手?(获奖名单已公布-10-24)
获奖名单已公布,详情请看:http://bbs.chinaunix.net/thread-4102939-1-1.html

随着大数据和其他对计算需求密集的问题来临,对大规模的计算机和网络的监控变得越来越重要,如何使得这些IT基础设施的利用率 变高,受到越来越多的企业关注,也是值得广大IT运维朋友值得思考并解决的一个问题。大部分的监控平台都能够提供了一整套的监控服务,它可以帮助您快速的了网站的可用率、服务器性能、服务状态等信息,发现故障立即通知到指定的用户,赶在用户之前发现并处理掉故障,从而提升用户体验。但是对于不同规模的IT基础设施和网络规模来说,选择不同的监控工具和监控手段则是需要运维管理工作人员认真考虑的。

有小而灵活的cacti,而功能复杂但是需要定制的Nagios,也是很多运维人员的最爱。还有以高性能计算设备监控为主的Ganglia。Ganglia是UC Berkeley发起的一个开源集群监视项目,设计用于测量数以千计的节点。Ganglia的核心包含gmond、gmetad以及一个Web前端。主要是用来监控系统性能,如:cpu 、mem、硬盘利用率, I/O负载、网络流量情况等,通过曲线很容易见到每个节点的工作状态,对合理调整、分配系统资源,提高系统整体性能起到重要作用。

Ganglia引起了计算机网络监控领域的一场大型革命,它独到的设计理念、强大的功能、丰富的插件,以及它与Nagios、sFlow等工具的有机结合,成为大型计算机网络监控领域当之无愧的王者。

本期话题:
1、说说您使用哪些监控软件,各自优缺点是什么
2、您是否使用过Ganglia,说说您的部署和运营经验

本期嘉宾:
ChinaUnix集群和高可用版版主:Gray1982

活动时间:2013年9月17日-10月10日

本期奖品:
活动结束后,我们会评选出5位积极参与话题讨论的网友奖励《Ganglia系统监控》图书1本,对其他积极参与讨论的网友(回帖有参考价值)我们将奖励积分20分。


    原书名:Monitoring with Ganglia
    原出版社: O'Reilly Media
    作者: Matt Massie    Bernard Li    Brad Nicholes    Vladimir Vuksan   
    译者: 陈学鑫 张诚诚
    出版社:机械工业出版社
    ISBN:9787111436744
    上架时间:2013-9-9
    出版日期:2013 年9月
    开本:16开

活动要求:
1、 要言之有物,不能低于20个字
2、 本次话题主要关IT运维监控工具的心得体会和使用技巧,其他问题可能不做重点
         
作者: wlforyou1    时间: 2013-09-17 21:14
先沙发。监控工具的话,一共都很少用第三方的,都是用系统自带的命令查看。然后配合日志功能。
作者: renxiao2003    时间: 2013-09-17 22:23
我都拿手。哈哈。板凳坐上。
作者: send_linux    时间: 2013-09-17 23:09
renxiao2003 发表于 2013-09-17 22:23
我都拿手。哈哈。板凳坐上。


这么厉害?欢迎分享啊,呵呵
作者: missing-cn    时间: 2013-09-17 23:13
先后用过cacti、nagois、zabbix,目前在用zabbix。
zabbix的优点是很灵活、图形展现非常不错,配合自定义脚本几乎可以监控任何事情,需要自己设计模版文件、定义graph、screen等。缺点是系统级别报警设置相对比较多,如果不筛选的话报警邮件会很多;并且自定义的项目报警需要自己设置,过程比较繁琐;web监控不能使用模版,只能一个个单独设置,如果web监控较多,设置会耗费不少时间,关键是都是重复劳动!!
作者: wenhq    时间: 2013-09-17 23:15
本帖最后由 wenhq 于 2013-09-17 23:27 编辑

1.第一个问题,如果说他们的优缺点的话那跟之前那个nagios的帖子不是一样的问题么?

a.nagios 适合监视大量服务器上面的大批服务是否正常, 重点并不在图形化的监控, 其集成的很多功能例如报警;cacti 主要用途还是用来收集历史数据和画图, 所以界面相比要好看一些。
b.nagios 监控的是对服务器的关键服务及进程进行监控。cacti是对流量及主机在线状态监控。
c.ganglia 主要是利用通过XDL(xml的压缩格式)或者XML格式传递监控数据,达到监控效果。其侧重点是系统的性能。gmetad可以部署在集群内任一台节点或者通过网络连接到集群的独立主机,它通过单播路由的方式与gmond通信,收集区域内节点的状态信息,并以XML数据的形式,保存在数据库中。
Gmond监控程序(Ganglia Monitoring Daemon,Gmod)是一个组播守护进程,它运行在每一个被监控的节点上。该程序的安装并不依赖于网络文件系统(NFS文件系统)或者数据库服务器。

Gmond的功能主要以下四项:

1). 监控宿主机状态的改变
2). 报告相关的改变
3). 通过单播或组播来监控ganglia其它节点的状态
4).  对集群状态请求进行应答,该请求通过XML进行描述

集群内的节点,通过运行gmond收集发布节点状态信息,然后gmetad周期性的轮询gmond收集到的信息,然后存入rrd数据库,通过web服务器可以对其进行查询展示
d.由2部分构成,zabbix server与可选组件zabbix agent。一个基于WEB界面的提供分布式系统监视以及网络监视功能的企业级的开源解决方案。
zabbix能监视各种网络参数,保证服务器系统的安全运营;并提供柔软的通知机制以让系统管理员快速定位/解决存在的各种问题

2.ganglia部署比较简单。ganglia依赖的库太多,所以首先要准备好。即先用yum安装依赖库。这样相对简单点。
然后按照手册配置即可。这个软件可以集合nagios等来做为hadoop云平台的监控工具。
作者: zongg    时间: 2013-09-18 09:56
1、说说您使用哪些监控软件,各自优缺点是什么
答: 我使用过的监控软件有nagios,cacti,zabbix. 现在用的是zabbix+cacti。

感觉cacti安装配置和使用最简单,现在的CactiEZ安装更是简单,并安装了所有的插件,阈值,阈值,存活性。。都有。大家可以通过cactiusers.org 获得。

优点:
        1)强大的图表功能。
        2)树图设置自由度高,可以调节经常看的图放在前面。
        3)用户权限设置细。

缺点:
        1)检验的频率是默认情况下5分钟。增加频率导致缺失的数据和错误的结果。没有zabbix好。
        2)web界面设置有时候需要找一会。


nagios:

优点:
        1)开源
        2)易用的web前端
        3)调试插件是适度简单
        4)适合大型网络
        5)报警设置多样性
缺点:

        1)配置复杂
        2)插件的易用性不好,至少我感觉没有cacti的好用。
        3)初学者投入的时间比较大

zabbix:

优点:
        1)支持多平台的监控软件
        2)功能强大,监控灵活,报警灵活
        3)支持分布式
        4)自带画图功能,得到的数据可以绘成图形
        5)全web管理。自带key
        6)同时支持调用脚本。很方便
        7)zabbix 支持5000台机器的监控(官方数据)

缺点:

        1)批量修改不方便
        2)中文资料少
        3)画图没cacti好

2、您是否使用过Ganglia,说说您的部署和运营经验
答:没用过。略。
作者: liuweni    时间: 2013-09-18 10:09
munin的默默飘过……
作者: heidern    时间: 2013-09-18 11:14
ganglia没用过

07年开始一直在用nagios+cacti,几乎满足了所有的监控需求,个人没用过zabbix,但看了好多文档都没找出有什么事情是zabbix能做但nagios做不了的

作者: yifangyou    时间: 2013-09-18 13:12
1、说说您使用哪些监控软件,各自优缺点是什么
答:1)mrtg是我第一个安装和使用的监控软件,
           优点:能够监控各自设备的流量包括各种路由和交换机,很多IDC和CDN服务商使用它来统计流量和计费
           缺点:只支持snmp协议,不能够自定义监控项,只能看到网路相关的数据
      2)ganglia是我第二个使用的监控软件,使用了3年时间
           优点:利用多播在同一个局域网内集合所有机器的监控信息,服务端只要向一台监控机请求即可,服务端压力小,能够监控大量服务器,能够监控多个ganglia集群,形成树状结构,理论上可以监控无穷台机器。可以自定义监控项,监控展示有表格和图像两种,支持手机版。
           缺点: 没有报警机制,出现问题不能够及时报警
     3)zabbix是我用过的定制化最高的监控软件
          优点:可以自由定制监控项,报警阈值,报警方式。监控项非常全面
          缺点:服务端负载很高,单台服务端支持的客户端少。

2、您是否使用过Ganglia,说说您的部署和运营经验
我用过ganglia3年了,对ganglia了解挺深,
ganglia的部署可以见我的博文:http://blog.chinaunix.net/uid-11121450-id-3147002.html
部署时在服务端最麻烦的是按照rrdtool,安装rrdtool最好使用rpm安装,客户端不依赖任何软件,编译好可以拷贝到相同系统的另外的机器上使用。
对于ganglia可以支持自己定义监控项,例如我写过监控mysql进程数,
gmetric -nmysql_process_num -v`mysql -e "show processlist"|wc -l` -tuint16 -u个
这个脚本只需要放到crontab 中1分钟执行一次,gmetric就会把数据发到gmond中加入到监控数据项中。在后台就会出现对应的监控曲线图。
ganglia有一个bug,有时会一直报错把错误信息写到/var/log/message中,而且写得很快,就会导致系统盘被写满。


作者: xw721xw    时间: 2013-09-18 15:25
回复 2# wlforyou1


   

必须的使用监控呀!!!




作者: niao5929    时间: 2013-09-18 23:45
只用过HEARTBEAT作了个ORACLE10G2的双机系统,结合DRBD来实现纯软件的,发现长时间运行之后需要从起HEARTBEAT进程,否则双机切换会超时,一直没有找到解决办法!!
作者: niao5929    时间: 2013-09-18 23:45
是自由开源的东东就值得关注!!!
作者: tomac_cu    时间: 2013-09-19 09:56
1、说说您使用哪些监控软件,各自优缺点是什么
到现在为止,只用MRTG,因为布署简单,功能强大,
最主要的原因是够用了。

2、您是否使用过Ganglia,说说您的部署和运营经验
没有使用过。
作者: aoma    时间: 2013-09-19 17:51
对于集群监控,现在主要集中在xcat这个开源项目上。XCAT是一个用perl写的开源项目,适合从几十台的集群系统到上万台的集群系统,从开始系统的装配到系统的管理,能够快速部署,支持linux/unix/windows和多厂商,包括IBM/HP/DELL等多系统,这个系统从xcat 2.0后系统架构进行了重构,更灵活的扩展功能,且版本更新也很快。
作者: igkimm    时间: 2013-09-19 19:55
PRTG

nagios

cacti

OTRS

MRTG

PRTG、

Solarwinds

智和SugarNMS

广通信达Broadview NCC
美信CreCloud
作者: ruochen    时间: 2013-09-19 20:58
cacti+nagios==>zabbix
作者: cgweb    时间: 2013-09-20 10:56
开源监控软件比较(cgweb)

作者: ccjsj1    时间: 2013-09-20 11:36
1、说说您使用哪些监控软件,各自优缺点是什么
答: 我使用过的监控软件有centreon+nagios,cacti,现在用的是centreon+nagios监控主机,cacti监控网络设备。

centreon:
有点:        1.开源
              2.集成各分布的nagios,统一在页面展示;
        3.比nagios界面友好,配置监控是使用模版,更方便

缺点:        1.安装有些复杂

nagios:
优点:
        1.开源
        2.易用的web前端
        3.调试插件是适度简单
        4.适合大型网络
        5.报警设置多样性
缺点:
        1.配置复杂

cacti:
优点:        1.开源
        2.强大的图表功能。

缺点:
        1.配置有些复杂

2、您是否使用过Ganglia,说说您的部署和运营经验
答:没用过。略。
作者: 305838894    时间: 2013-09-20 12:25
现在一直在用nagios
优点:配置稍微复杂点,但是应用灵活,完全可以根据自己的想法去完成任务。尤其是对于人少但是管理的机器多的情况下,更全面的了解服务器组的状态,尤其是报警系统的存在,
缺点:有的时候需要监控**器,或者自己定义的服务,对于需要写脚本来说是一大难题,
作者: zhudiqingyin    时间: 2013-09-21 15:50
ganglia 觉得不怎么好用,哈哈,不过还算可以,勉强推荐一下!
作者: cgweb    时间: 2013-09-22 00:23
ganglia在集群监控上面应用很广。
作者: gnah    时间: 2013-09-22 12:53
只用过cacti和nagios,
自己瞎捣鼓的,研究不深,可能有些功能没发现.
用cacti做统计cpu,内存,磁盘,网络都有统计,还可以把收集到的数据保存起来,便于分析. 但好像没有警报的功能.
所以加上了nagios做警报. nagios好像又不能把收集到的数据保存到数据库.
所以目前采用了cacti+nagios
Ganglia没用过, 马上装个测试一下,如果能兼有统计和警报就太好了
作者: tengh    时间: 2013-09-22 15:36
本帖最后由 tengh 于 2013-09-22 15:40 编辑

目前刚刚在实验室的服务器上把ganglia 3.5安装好,我们现在有16台机架式服务器,做量化计算的。

现在的感觉是ganglia安装好之后查看机器状态方便了,通过图形界面即可,cpu,内存、网络、磁盘等信息一目了然。


这个对于我们来说另一个用途就是有一个机器状态历史记录信息,知道机器的运行状态,提供更有说服力的数据。对申请项目也是有益的。

由于了解不深,所以现在基本上都是按照默认设置,等有时间了在慢慢看manual。

现在正在看ganglia、Nagios和Splunk结合使用,这套监控体系,具备错误报警、性能调优、问题追踪和自动生成运维报表的功能。
作者: chszs    时间: 2013-09-22 15:47
运维工程师很擅长这个。
作者: ding_cw    时间: 2013-09-23 09:30
服务器不多  暂时只用Cacti的路过   其余的监控软件还在学习摸索中
作者: xiaoyun222    时间: 2013-09-23 10:21
nagios +ganglia

nagios是监控服务状态的信息与报警功能。


ganglia  查看资源利用率,方便合理分配机器的资源。

正好这2个产品可以互补,各自发挥自己的特点。

怎么才能能到奖品啊,正好可以系统学习下ganglia, 看到大家写了好多啊。
作者: chenbin200818    时间: 2013-09-23 10:40
我都自己写的集群监控。。。。。。
作者: bbzsxjj    时间: 2013-09-23 12:28
nagios+cacti 这个是王道,特别是nagios+nrpe非常灵活,而且跨平台监控也很方便,写个脚本就OK了。
作者: Bentley_Z    时间: 2013-09-24 14:57
那些常用的你们都说完了,我也没啥好说的了。我就说个不常见的吧。
   之前一直用cacti+nagios,但是现在换公司了。公司要求高,现在用的是HP的Arcsight产品。分ESM、Logger、SmartConnector和SupperConnector等几个组件,来采集分析各种类型的设备日志进行监控。结果可以备份到存储上或本地,方便日后调查和还原。
  整个环境通过connector收取日志发送到ESM上,通过管理员定义的规则ESM自动分析出结果,然后以报表和仪表板的方式展现出来。仪表板展现时时的,报表展现周报,月报或年报。控制方式可以是console控制台或web方式,方便灵活。
这款软件可以做到,监控硬件信息,设备运行状态,各种形式的攻击,门禁,交易信息,用户登录等等所有的事情。其他监控软件能做到的,没有Arcsight做不到的。
  非常可惜的是Arcsight收费的,而且不是一般的贵。这款监控软件是金融和电信行业的首选。
不足之处:收费太高,安装部署繁琐,需要HP派专业团队实施,且实施耗时较长,4人团队大概要半年时间。
心得:即使如此,用过Arcsight之后,觉得没有任何一款监控软件能和Arcsight相媲美。

作者: xiaochuanjiejie    时间: 2013-09-24 15:16
heidern 发表于 2013-09-18 11:14
ganglia没用过

07年开始一直在用nagios+cacti,几乎满足了所有的监控需求,个人没用过zabbix,但看了好多 ...


同意你的说法。。。。。
作者: msee    时间: 2013-09-24 17:16
貌似楼主主要为推广书来着,集群监控么选择是不少,但监控目的是什么?报告+CASE生成,然后是问题解决,再后面升级方案+知识库,再往后就是完整的服务管理。
监控?选择运行方式多的(主动、被动、级联...),用户数多的,一是有问题可以得到帮助,二是很多插件拿来即可用,象 hacmp,rac,websphere,weblogic,hmc,主流存储
通知?本地log是当然,但远远不够,得加上消息系统,另外自动生成case到缺陷跟踪或请求跟踪很必要啊,因为直接涉及后面责任人,即谁来负责,有的运维称之为派单,而且这个过程也得好好日志,以防抵赖,象 (2013-九月-24 14:19:56 星期二 The xx System itself - 已记录发送的邮件)结合邮件日志,可抵赖不了,然后整个解决过程log也必不可少
服务?安排计划宕机最起码的吧
报告?丰富多彩
总之 监控只能是服务平台的一部分,虽然是必不可少的
作者: 930567969    时间: 2013-09-24 18:55
本帖最后由 930567969 于 2013-09-24 19:02 编辑

1、说说您使用哪些监控软件,各自优缺点是什么
答:⑴第一次自己搭载的监控系统是nagios+cacti了,因为这个资料很多,而且推荐使用它的人蛮多的,有点就是这2者搭配使用,基本满足日常监控需求了。缺点是监控网络流量的时候感觉不准。
     ⑵现在公司在用的zabbix,这个中文资料虽然没上者多,但搭建方法比上者简单,全新部署一台新机的(要是本身是复制的虚机的镜像的话),3分钟上机改下配置文件重启服务即可,而且它的功能=nagios+cacti之和了,再加上第三方的监控DB插件(如mysqlbix、orabbix)满足了目前公司所有的监控需求!而且在你熟悉了zabbix的item和key之后,在前端上设立阀值、监控项目非常简单!且有自定义key功能,足矣满足一些复制的监控需求了
2、您是否使用过Ganglia,说说您的部署和运营经验
答:目前还未亲自搭建体验过,如有机会有兴趣使用下

作者: zhengsenlin888    时间: 2013-09-24 21:25
本帖最后由 zhengsenlin888 于 2013-09-24 21:26 编辑

1、说说您使用哪些监控软件,各自优缺点是什么
答: 我使用过的监控软件有mrtg,cacti,zabbix. 现在用的是zabbix。
zabbix 因为安装简单,还有代理。最喜欢的是zabbix的分布式监控。也就是不管网络怎么复杂都可以通过代理来监控到。
不过监控的软件mrtg cacti nagios zabbix, 有些需要自定义监控的项目总是实现起来很麻烦。所以有的监控项目基本都是通过编写自定义脚本来实现监控。
我用zabbix监控的就只是一些磁盘,cpu,内存,硬盘,磁盘I节点,主机是否通讯而已。

2、您是否使用过Ganglia,说说您的部署和运营经验
答:没用过。可以送本书看看吗。哈哈。
作者: jimmy-_-lixw    时间: 2013-09-25 00:29
本帖最后由 jimmy-_-lixw 于 2014-04-06 21:56 编辑

提示: 内容被隐藏或删除 内容自动屏蔽
作者: george_young    时间: 2013-09-26 17:16
回复 12# niao5929


    不明白,你们的系统那么繁忙?能导致经常性切换?

我们用的MYSQ+DRBD+Heartbeat+snmp+nagios+自己写的脚本去监测服务&脑裂 ,到现在近半年都没有发生过一次迁移和脑裂。
作者: george_young    时间: 2013-09-26 17:24
基本得功cacti都有,没有得功能大部分用nagios加脚本也能实现。目前还没有发现要换其他平台得必要。

玩玩还好,上生产平台和几百台机器,这不是个简单的活
作者: royzs    时间: 2013-09-27 13:41
只用Nagios和Cacti,感觉Zabbix不太好操作,只是简单看了一下,不过很多同行喜欢zabbix
另外听说Cacti能够监控服务器的apache的连接数,统计并发变化图,不过是自己写插件,网上没有找到类似的插件,哪位大牛写过,可否共享一下
作者: ulmer    时间: 2013-09-27 21:44
回复 1# send_linux

咋沒有人用 opensource OpsView?
级好使用!!! Webfront + nagios background

特点见: http://www.opsview.com/solutions/core
   
作者: jimmy-_-lixw    时间: 2013-09-29 16:05
本帖最后由 jimmy-_-lixw 于 2014-04-06 21:58 编辑

提示: 内容被隐藏或删除 内容自动屏蔽
作者: jimmy-_-lixw    时间: 2013-09-29 16:06
本帖最后由 jimmy-_-lixw 于 2014-04-06 22:00 编辑

提示: 内容被隐藏或删除 内容自动屏蔽
作者: jimmy-_-lixw    时间: 2013-10-04 09:47
本帖最后由 jimmy-_-lixw 于 2014-04-06 22:01 编辑

提示: 内容被隐藏或删除 内容自动屏蔽
作者: caabcal    时间: 2013-10-04 23:29
监控MySQL数据库及其服务器,应该使用哪些软件?
作者: caabcal    时间: 2013-10-04 23:29
监控Oracle数据库及其服务器,应该使用哪些软件?
作者: cgweb    时间: 2013-10-05 14:26
MySQL Monitor和Nagios都可以
作者: hicooper    时间: 2013-10-10 08:27
我觉得一个真正完整的监控系统至少应该实现硬件、应用、业务这三个层面的监控,目前开源软件比如nagios、cacti、zabbix等等在硬件方面做的不错,应用方面就不太理想了,对中间件的监控还不错,但是对虚拟化和C/S架构的应用做的就不太好,而业务级别的监控基本上就是没有。业务方面splunk和tivoli做的不错,其实tivoli很强大,把组件买全了可以实现硬件、应用、业务三个层面的监控,但是价钱也十分强大。。。
作者: AIXORA    时间: 2013-10-10 10:58
监控工具真是五花八门,不过到底有多少公司原投入资金到安全运行方面,真是值得怀疑。也就是我们号称运维人员的关心一下。
怎么没有人有用ibm systems director来监控。

作者: Ly_stu    时间: 2013-10-10 11:01
本帖最后由 Ly_stu 于 2013-10-10 11:03 编辑

1、说说您使用哪些监控软件,各自优缺点是什么
用过cacti、nagios,zabbix只是了解还没用过,
小弟 根据个人理解简单说一下各自的优缺点:
感觉cacti安装配置和使用最简单
优点:
         借助rrdtool绘制出 强大的图表信息。
缺点:
         1)检验的频率是默认情况下5分钟。检测信息不够实时,增加频率导致缺失的数据和错误的结果。
      2)虽然也支持告警,但各用插件的使用与调整,感觉很不顺手,web界面设置有时候需要找一会。


nagios:

优点:
          存在模块概念,管理多节点 很方便;
        强大的告警功能,支持多节点,信息相对实时。通过指定协议实现监控告警信息的收集,【linux nrpe ; windows nsclient snmp】
        现在应用中,是nagios与cacti结合应用【nagios强大告警,cacti收集流量数据图】
缺点:
        告警反馈的信息简洁,不能直接确实 问题的根本原因;  
        刚开始学习,架构的理清需要一段时间。

Ganglia “It has been used to link clusters across university campuses and around the world and can scale to handle clusters with 2000 nodes." 这句很喜欢,下一步会涉足她的学习……  
作者: jimmy-_-lixw    时间: 2013-10-16 16:39
本帖最后由 jimmy-_-lixw 于 2014-04-06 22:01 编辑

提示: 内容被隐藏或删除 内容自动屏蔽
作者: zhengsenlin888    时间: 2013-10-19 16:19
:wink:  fff
作者: send_linux    时间: 2013-10-19 18:27
zhengsenlin888 发表于 2013-10-19 16:19
fff


这个是指?
作者: cjyfff    时间: 2013-10-21 14:28
回复 18# cgweb


    这幅图给力啊,支持!!!
作者: mr1311    时间: 2013-10-26 13:23
NG配起來麻煩
仙人掌
作者: FIGHTERBEAT    时间: 2013-10-30 07:40
我还都没用过呢,不知道到底是什么,还请前辈们多多指点
作者: FIGHTERBEAT    时间: 2013-10-30 07:40
我还都没用过呢,不知道到底是什么,还请前辈们多多指点
作者: E8software    时间: 2013-12-06 09:29
E8.ITSM&E8.Helpdesk ------ 您身边的IT服务管理专家。   
丰富的行业经验/ 成熟ITSM工具平台/灵活构建您的各种IT运维服务管理流程/灵活实施您的配置库/自定义各种服务目录、服务级别、规则引擎及各种参数。

详细信息:http://www.feifanit.com.cn/productITSM.htm




欢迎光临 Chinaunix (http://bbs.chinaunix.net/) Powered by Discuz! X3.2