灾难&故障 你IT系统的业务连续性有保障吗？（获奖名单已公布-2013-6-7）

send_linux

获奖名单已公布，详情请看：http://bbs.chinaunix.net/thread-4085386-1-1.html

对于企业而言，最大的挑战是什么？生存，只有先生存才可能考虑壮大发展。但是随着信息科技技术的不断发展，IT系统已经成为企业必不可少的工具之一，并且有关企业生存发展的重要数据大多都存储在IT系统之内，那么IT系统一旦遭遇不可抗拒因素而崩溃，数据丢失，你有信心让企业继续生存下去吗？

业务连续性的重要性已经越来越得到企业的认可，从美国911事件到汶川大地震等自然灾害，从艺龙宕机到某银行信用卡大机故障，这不仅仅是经济损失，还有信誉、品牌等无形的价值。面对这些自然或人为灾难，你所在企业是生存还是消亡，完全取决于你的态度。

业务连续性（简称“BCM”）是关系企业生死存亡的课题之一，其大多是一套立基于IT系统的管理体系，IT系统在其中起着至关重要的作用，可以说IT系统的稳健性将直接决定其称成败。那么你对你所在企业的IT系统有信心吗？

对于IT系统而言，业务连续性的最为重要的两大技术问题就是备份和恢复，企业数据正年复一年地不断增长，不管是主存储系统还是备份系统都越来越“臃肿”，管理越来越复杂。对于备份和恢复而言，海量数据问题使得传统的备份恢复解决方案越来越符合期望值，你有切实可行的办法来帮助其“减负”，以使业务连续性达到期望值吗？

你对企业IT系统的备份和恢复解决方案有信心吗？你在备份、容灾和恢复方面遭遇到哪些问题？或者你对企业灾备有哪些更好的建议？亦或是你对于改进灾备系统以保证业务连续性有更好的解决方案或想法？一起来讨论讨论吧！

本期话题：
1、如果您已经面对大数据带来的备份问题，您是如何解决的？
2、如果您还在对您的大数据灾备解决方案进行选型，你理想中的大数据灾备解决方案有哪些特色？

活动时间：2013年3月29日-5月15日

本期嘉宾：
衍水狂客：ChinaUnix论坛存储备份版块资深版主

本期奖品：
最佳经验分享奖：奖励价值200元家用wifi路由器
积极经验分享奖4名，各奖励价值100元的保温杯一个；
参与讨论的会员，获得社区积分20分


更多参与，更多好礼！

yuanzh78

1、如果您已经面对大数据带来的备份问题，您是如何解决的？
准备在hadoop的基础上开发一套，就用hadoop自带的hbase和hdfs来解决，云时代了，不跟上不行了，
要花大力气和大成本了

2、如果您还在对您的大数据灾备解决方案进行选型，你理想中的大数据灾备解决方案有哪些特色？
   本地磁盘设备间有同步备份，异地数据异步备份，
保障关键数据的可恢复性与业务应用的可持续性，
性价比要高

tomer

最可笑的是总共不到1T的数据量也来凑热闹，也想干时髦，搞云平台；

T-Bagwell

这个真不好说
数据量不大的话，一两P数据直接搞多副本就可以了
但是数据量大的话，比如几十p，几百p的那种，就不好搞多副本了

这种情况，赶脚怎么做都有弊端

1、如果您已经面对大数据带来的备份问题，您是如何解决的？

不知道别人是怎么做的，数据量小的时候，直接搞个多副本就可以了
数据量大，可以考虑将存储点分散开，这样做的话数据处理效率可能就会有影响
如果可以做冗余的话就能更加减少损失，貌似也会有损失，不是没有损失，是尽量减少

2、如果您还在对您的大数据灾备解决方案进行选型，你理想中的大数据灾备解决方案有哪些特色？

如果我选型的话，当然选择零损失的灾备，大数据灾备我理想中的解决方案特色应该如下：
1. 不影响数据的快速处理
2. 不影响业务正常运营
3. 数据永不丢失
4. 节省存储空间

由于经验不多，暂时也想不全

seesea2517

咱小数据就不说啥，只说理想吧：快、稳、安。
快速：备份快，恢复快
稳定：备份容易，流程变动少，数据不丢失
安全：数据不被窃取，不被修改

mz198424

1、如果您已经面对大数据带来的备份问题，您是如何解决的？
我们的处理是设定一个主从数据备份。

2、如果您还在对您的大数据灾备解决方案进行选型，你理想中的大数据灾备解决方案有哪些特色？
要保证数据的安全性和完整性，性价比一定要高。
不能影响原业务的运转速度。
出现问题能够及时处理。
存储空间还要使用合理。

xike2002

1、如果您已经面对大数据带来的备份问题，您是如何解决的？
答：其实实现数据备份有很多种解决方案，这个可以根据你企业的投入资金和数据的重要性而进行相应的选择。
零投入解决方案
实现数据备份并不一定都需要资金投入。当数据重要性不高，系统简单，而且没有自动化和长期保存的需求时，完全可以利用现有的资源，搭建一个数据备份系统，而无需任何的资金投入。
例如，对简单办公环境下的个人数据进行备份。在Windows、Linux等桌面操作系统内，大多集成有一些简单的数据备份功能。这些备份功能足以实现对普通文件的自动的定时的备份。还有很多功能不错的小型备份软件可以从Internet上下载，这些软件虽然不能实现对专业级数据库的支持，但对一般桌面办公系统来说，功能也都是足够了。
至于备份数据的保存，可以选择本机磁盘的空闲空间或者网络服务器的空间。一般来讲，选择网络服务器的空间更加安全，因为一旦本机磁盘出现故障，很可能整个磁盘无法访问，那样存放在本机磁盘的备份数据也就失去了意义。
总结：单机备份；数据量较小；无长期保存需求，仅仅为了防止数据丢失；无专业数据库应用；系统可随时停机；手工恢复数据。
1~2万元投入解决方案
对于一些需要长期保存数据的系统来说，简单的在网络服务器上保存备份数据，就显得不够经济了，应该采购一台磁带机和一些磁带作为备份数据的长期保存介质。一般一台磁带驱动器的价格就在1~2万元左右。采购了磁带机就没钱买备份软件了，没关系。仍然使用系统自带的备份功能，还是可以解决问题的。事实上很多系统的数据需要长期保存，但是并没有很高的自动化要求，对计划停机的限制也不严格，在这种情况下，如果没有大型数据库应用，一般都可以解决数据备份需求。
例如个人级的网站、小型医疗系统、小型档案系统等。这些系统与个人级桌面系统相比，数据量要大一些，而且要求数据相对较长期的保存。但是数据形式基本都是文件形式，没有复杂的数据库结构，而且停机进行数据备份完全是可以允许的。这样的需求，操作系统集成的备份软件加上一个磁带机，完全可以实现系统的每天自动备份。
总结：单机备份；数据量一般；需要长期保存数据；无专业数据库应用；允许计划内停机；手工恢复数据。
3~5万元投入解决方案
当系统需要通过网络进行数据备份时，操作系统集成的备份功能就无法满足需求了。这时，除了采购磁带机之外，还需要采购较专业的备份软件来实现网络备份。一般Windows平台的备份软件产品价格不高，2~3万元的软件投入应该可以达到设计目标。加上1~2万元的磁带机成本，总体成本可以控制在3~5万元之间。
这样的系统已经可以支持一定的数据库应用，并且可以实现自动化的数据恢复。对中型的办公系统、小型专业网站、小规模的校园网等环境来说，这一系统已经全面达到数据保护的目的。需要注意的是，这个方案只针对Windows、Linux等平台的主机系统，如果主机平台是Unix小型机，这样的投资就无法满足功能需求了。
总结：简单网络备份；Windows操作系统平台；数据量一般；需要长期保存数据；有一定数据库应用；允许计划内停机；自动化恢复数据。
10万元投入解决方案
当系统数据的重要性很高时，数据备份的投资力度相应的也会增大。尤其是当系统要求7×24小时可用，没有给备份工作提供停机备份的时间窗口时，备份系统必须具有能够对打开文件进行备份的能力，即所谓在线备份技术。这就要求备份软件的功能足够强大。同时，随着系统自动化要求的提高，手工管理磁带介质的方式难以满足系统的需求，在数据量不是很大的情况下，可以考虑采购自动加载机（AutoLoader）进行准自动化的磁带管理。
在这样的要求下，投入在软件和硬件方面的资金都需求有所增加。一般Windows平台上能够进行在线备份的软件，投资应该在6~8万元，而自动加载机的价格也在3万元左右，这样整体的系统投资基本在10万元左右。
以此投资力度建立的备份系统可以支撑一个相当规模的Windows网络环境，对其中的文件、数据库应用、邮件系统、用户信息等数据都可以进行集中统一的备份保护。备份过程完全是自动化的，无需人工干预。而且，当系统中某节点出现故障时，数据恢复工作也完全是自动化和智能化的，只要提供备份介质和可引导的系统启动盘，备份软件就可以恢复出系统故障前的状态。
这种备份系统的应用环境也十分广泛。中小学校园网、证券交易营业部、政府机关办公网络系统、中型企业网了系统、电子商务网站等待，都基本处在这一需求层次上。从一定意思讲，这个层次的系统应用是最为广泛的。基本上由Windows平台构成的较复杂的网络环境中，这种数据备份方式都可以适用。从另外一个方面讲，这个层次的用户也是备份市场需求构成的主要力量。
总结：中型网络备份；Windows操作系统平台；数据量较大；需要长期保存数据；典型数据库应用；邮件系统等其他专业数据；基本无停机备份；智能化恢复数据。
30万元以上的投入
当数据量达到TB级时，单台磁带机和自动加载机已经无法满足自动化管理的需求，而需求配置自动化程度更高的磁带库设备。一般这种环境下操作系统平台也会以Unix为主，或者是更为复杂的多种操作系统平台混和系统。这种环境下，数据保护工作的复杂程度进一步增加。一个典型的混和平台环境，数据备份系统投资额基本都在30万元以上。
如果以30万元投入计算，其中软件部分所占的投入约为30~40%，用来采购支持Unix平台的高端备份软件服务器端和客户端代理，以及一些数据库接口程序和磁带库支持程序等部分。其他60~70%的资金是用来采购磁带库设备以及一定数量的磁带。如果需要实现SAN架构下的LAN Free的数据备份，则还需要增加10万元左右的资金投入，用以搭建SAN的光纤交换部分。
这种解决方案不仅可以全面的实现混和系统平台的全自动化数据备份工作，支持各种大型数据库应用，实现7×24小时的不停机数据在线备份，而且可以实现不需要占用网络资源的LAN Free的数据备份。同时，在这样的解决方案中，数据的傻瓜化恢复功能已经不再重要，由于系统结构的复杂和数据关系的复杂，完全无需人工干预的傻瓜化智能灾难恢复往往会造成系统状态的不一致，从而丧失了数据恢复的意义。在这种级别的应用环境中，系统需要对数据恢复的方式和内容更加灵活的控制。系统应该可以提供选择性的恢复数据，以及指定时间的状态恢复。
这种级别的数据备份系统一般应用在大型的海量存储系统中。例如大型企业中心数据系统、省市级国家机关专用信息系统、科研院所专业信息系统、一般资料检索系统等。这些系统基本上完全排除了系统故障，极高的要求业务系统的连续性、稳定性和可用性，完全不允许任何情况下的计划内和计划外停机。对备份任务对系统资源的占用一般也有严格而明确的限制，一般不允许备份数据流大量占用网络带宽资源。总之，在这一应用层次上，备份系统已经被作为一个独立的系统来看待，备份工作已经是整个系统正常运行不可缺少的一个组成部分。所谓的高端备份市场就是指这一领域的市场需求。
总结：大型网络备份；Unix或多种操作系统平台；数据量达到TB级；需要长期保存数据；大型数据库应用；邮件系统等其他专业数据；完全无停机备份；灵活的恢复数据；不占用网络带宽资源。
100万元以上的投入
对于数据中心级的存储系统，数据备份系统的建设也大大增加。这主要源于两方面的原因：数据量的庞大和安全性要求的提高。事实上，在数据中心级的超大型存储系统中，对备份系统的功能要求，并不比前一个层次更多。但是其动辄数十甚至上百TB的数据量，却使磁带库设备的硬件成本翻倍的增加。另外，由于这些数据一旦丢失或损坏，后果将十分严重，所以其在线存储系统也大多采用了远程容灾等手段，这进一步增加了与之配合的备份系统的软硬件成本投入。一般一个配合远程容灾系统的数据备份系统，其投资额度都不会小于100万元。
在这种超大型的系统中，备份系统的软件投入比例一般为20~30%，而硬件投入占绝大部分，有70~80%之多。采购内容基本没有什么变化，软件部分基本还是备份服务器端、备份客户端、数据库接口模块、磁带库支持模块等部分，对容灾系统而言，有时候也会有特殊的在线存储设备接口模块。而对硬件设备部分，基本还是磁带库及其连接设备。当然，在如此大容量的环境中，采购磁带也是一笔不可忽视的资金投入。
有趣的是，在如此大资金的投入下，建成的数据备份系统，其真正面临系统故障的机会是少之又少。因为这种数据中心级的存储系统，其数据可用性要求已经达到了顶峰，所以在线存储系统大多采用目前最为稳定的产品，并配合最为先进的技术来保证数据不丢失。那么是不是说这样的备份系统就没有意义了呢？当然不是！事实上，在这种大型的数据中心里，备份系统的另一个意义凸现了出来，那就是文件的归档保存。我们知道在线存储系统的技术再先进，也只能保证当前的数据不丢失不损坏，而无法帮系统记录下从前的历史数据，而备份系统的功能正在于此。那些需要保留下来，以便进行统一分析的数据和状态，都完整的保留在备份系统中。
例如国家气象中心的气象数据存储系统、电信计费中心的计费数据、银行数据中心的储户交易数据等等。这些存储系统都具有非常强大的在线存储系统，其数据保护力度之大，即使在发生火灾地震这样的灾难时，也可以保证数据不会丢失。但这些系统都建立了投资巨大的备份系统，其作用主要就是为了保存重要的历史信息和状态，以便进行统一的数据分析和数据挖掘。
当然，在数据中心级的存储系统中，极偶尔的也会出现意外事件。也许大家对不久前，发生在首都机场的网络系统意外故障还记忆犹新，这说明，再坚固的意外防范措施，也难免有百密一疏的时候。在这个时候，备份系统的作用灵光一现，已经足以抵付当初的巨额投资了。实际上，如果没有备份系统的存在，发生在首都机场的意外，造成的可就不仅仅是几十分钟的延误了。
总结：数据中心级网络备份；Unix或多种操作系统平台；数据量达到几十TB；需要长期保存数据；大型数据库应用；邮件系统等其他专业数据；完全无停机备份；灵活的恢复数据；不占用网络带宽资源；配合远程容灾系统；实现数据归档功能。

2、如果您还在对您的大数据灾备解决方案进行选型，你理想中的大数据灾备解决方案有哪些特色？
答：就目前的经验和状况来看，理想中的大数据灾备方案应该有以下特色：
（1）数据备份速度要快
（2）不影响现有业务的正常运行
（3）数据的存储空间问题
谈的不周到的地方，欢迎大家补充

yezj2004

继续关注一下这方面的信息

fire_cpp

吾辈小庙，没保障……坐等高人发表见解。

carllai

感觉这一块很重要但实施起来又比较困难，一方面企业限制IT成本，不愿花大价钱采购设备，另一方面对数据安全又比较敏感，有点儿矛盾。