备份方案模板.docx
《备份方案模板.docx》由会员分享,可在线阅读,更多相关《备份方案模板.docx(45页珍藏版)》请在冰点文库上搜索。
备份方案模板
Commvault
备份方案
CommVaultSystems(美国慷孚系统公司)
2006年3月
1数据备份建议综述
在数据是整个系统运作的核心。
人为的操作错误,软件缺陷,硬件故障,电脑病毒,骇客攻击,自然灾难等诸多因素,均有可能造成数据的丢失,从而给整个系统造成无法估量的损失。
CommVault提供统一的企业数据管理方案来确保高性能数据保护、整体的可用性和对复杂存储网络的便捷管理。
公司专注于创造并实现快速、可靠和易于使用的方案来满足用户对数据管理的需求,CommVault非常荣幸能够为xxxx提供数据集中备份的解决方案,我们相信能够在和贵x进行合作的过程中发挥自己的技术优势。
CommVaultSystems是1996年从AT&T贝尔实验室分立出来发展成独立的软件公司,致力于备份和恢复性能的创新。
2000年,公司发表了旗舰产品:
CommVaultGalaxy™备份和恢复软件,该软件4次荣获存储业界的嘉奖。
自2000年,CommVaultSystems与全球顶级的软件和硬件厂商建立了稳固的联盟来增强软件的功能并创造了杰出的数据管理方案组件,这些厂商包括:
DELL、EMC、HP、HDS、Microsoft和NetworkAppliance。
在2002年,CommVault发表了QiNetix平台来提供统一的数据管理。
QiNetix对Galaxy稳健的数据保护和通用技术平台作了新的扩展,创造性地实现了交互和集成的解决方案。
这样,数据备份和恢复、数据迁移、数据可用性、存储资源管理和存储架构管理被有机地结合在一起。
QiNetix在极大地扩展了现有功能的同时,确保了异构企业环境中的文件、关键业务应用程序和当今被广泛使用的数据库的可靠性和快速恢复。
至今,QiNetix软件被安装在许多全球2000强企业中。
如今,CommVaultSystems是一家被Gartner列为企业级数据和存储管理软件领导者的独立公司,目标专注于创造并实现全面、快速、可靠并易于使用的数据保护方案。
它的特出特点和优势如下:
1.磁盘优化技术(Optimizeddisk)
2.跨越磁盘(Mediaspanningondisk)
3.一次性恢复(OnePassiRestor)
4.合成全备份(SyntheticFull)
5.辅助拷贝(AuxiliaryCopy)
6.存储策略(StoragePolicies)
7.存储组迁移(MediaGroupMigration)
8.数据老化(DataAging)
9.自动发现存储设备(AutoDiscoveryofstoragedevices)
10.应用级的集成(Applicationlevelintegration)
11.小颗粒精确恢复(GranularRestores)
12.单一实例备份和恢复(Single-Instance)
13.可伸缩性(Scalability)
14.印象级备份(ImageLevelBackup)
15.重起功能/检测点(Restart/Checkpoint)
16.Galaxy高级功能包(AFP)
17.数据加密(DataEncryption)
18.储藏跟踪(VaultTracker)
19.CommCell迁移(CommCellMigration)
20.网格存储(GridStor)
21.数据校验(DataVerification)
2备份方案
2.1备份系统架构
系统结构说明:
在xxxx的备份方案中,其结构描述如下:
1.SAN网
有高速SAN网连接,构成统一的存储区域网。
2.Ethernet网
有Ethernet连接,构成统一的Ethernet网。
3.连入SAN网的生产数据存储设备
有连入SAN网的磁盘存储设备,用于存储生产系统的数据。
4.连入SAN网的磁盘备份设备
连入SAN网的磁盘备份设备,用于高速备份和恢复。
如果目前没有该设备,并不影响数据的正常备份,但建议增加该设备,来增强备份/恢复的性能。
5.连入SAN网的磁带库
连入SAN网的磁带库,用于存放备份数据。
6.连入LAN网的NAS
两中心都有连入LAN网的NAS设备,NAS连入SAN网可作为选项,用于高速共享索引缓存。
如果目前没有该设备,并不影响数据的正常备份,但建议增加该设备,这样可提高性能,更容易管理,同时也不占用LanFree生产机的资源。
Commvault软件配置说明:
●CommServe
CommServe服务器是备份管理控制服务器,它只需连接在LAN上。
●MediaAgent
对有连入SAN网的生产服务器,这些服务器同时也连接在LAN上,对这类服务器能进行LANFree备份和针对其它LAN的服务器实现LAN备份。
●iDataAgent
用来做文件系统备份和恢复;
●iDataAgentforDatabase,Application
实现对数据库的联机备份.
●1-Touch
所有的Windows具备“一键”恢复系统的功能,减少数据恢复的复杂度和时间。
以上是为我们提供的数据备份方案,设计的目的是采用业界最先进的备份技术完成对系统数据在线、快速、多层次的备份保护,并能提供扩展的解决方案,从技术上保证了信息系统的可靠性。
2.2备份模式
在上面的系统架构上,主要提供两种备份模式。
●LANFree模式:
对那些连入SAN网的生产机,可以采用LANFree模式,在该模式下,在生产机内需要安装iDA和SANMA模块。
在备份操作时,iDA模块把需要备份的数据从生产数据存储设备中读入生产机,并在生产机内把备份数据传给SANMA模块,SANMA模块将把数据通过SAN写到备份设备上;在恢复操作时,SANMA将通过SAN网从备份设备上读入恢复数据,在生产机内把数据传给iDA,iDA把数据写入生产系统。
在LANFree模式下,备份/恢复操作的数据经过SAN网转送。
●LAN模式
对那些没连入SAN网的生产机,可以采用LAN模式,在该模式下,在生产机内只需要安装iDA模块。
在备份操作时,iDA模块把需要备份的数据从生产数据存储设备中读入生产机,并通过LAN把备份数据传给专用MA服务器,MA服务器将把数据通过SAN写到备份设备上;在恢复操作时,MA服务器将通过SAN网从备份设备上读入恢复数据,并通过LAN把数据传给iDA,iDA把数据写入生产系统。
在LAN模式下,备份/恢复操作的数据需要经过LAN网转送。
2.3备份系统的存储策略
由于用户的数据量十分大,同时备份数据的存放地点、用途、时间、重要性以及相对应的部门和服务器都不尽相同。
如何有效方便的管理这些备份数据的存放介质,也是一个非常复杂的管理工作。
在Commvault备份系统中,提供了存储策略机制,将用户端和不同性质的备份数据关联在了一起。
在每个存储策略中,都可以定义不同的副本(Copy),每个副本都可以定义不同的数据类型和时间保留策略,同时每个副本也关联了不同的物理存储设备点。
每个物理存储设备点都是在存储资源中定义的,如果是磁盘,就是相应的MountPath。
如果是带库,就是相应的ScratchPool(暂存池),而暂存池可以根据条码号或者磁带库槽位来定义。
这样通过存储策略将物理存储设备点和客户端关联以来,能够方便的管理所有的物理介质。
通过Commvualt的存储策略机制,用户可以方便的将不同性质,不同内容的,不同时间段的备份数据方便的指向不同的存储设备点。
而在恢复或者查找备份的数据时,Commvault能够自动的将这些数据查找出来,避免了传统备份软件在查找数据时候的复杂操作。
下面我们推荐一些设定策略的典型方法,帮助理解存储策略:
●单一副本
我们可以针对某一个备份设备来设定这种存储策略,这种策略比较简单,只保留一个副本,消耗的资源较少,对一些不太重要的备份数据可采用该种方法来设定策略。
在采用该策略时,建议将备份数据写到对方中心的存储设备上,万一当一个中心出现灾难时,对方中心还有备份数据。
●在线复制
对重要的数据,我们可以采用在线复制的策略,在这种策略下,可以同时往两个存储设备上写入数据,可同时写入的组合是多样的,如:
磁带和磁带、磁盘和磁盘、磁盘和磁带。
在本项目中,我们可以同时写入放在两个中心的磁带库中。
●多层存储
为了提高备份效率并能满足费用的要求,D2D2T的ILM策略是很有效的方法,我们可以先把数据备份到磁盘设备上,再把数据辅助复制到磁带上,并为磁盘和磁带上的数据分别设置保留期,比如:
在磁盘上的保留期为3个月,在磁带上的保留期为永久。
Commvault通过存储策略实现了ILM的管理,能够方便的实现不同数据在不同介质上的无缝迁移,每个存储策略包含:
–定义备份设备的集合
–定义了并发备份流的最大数目(实现多流的并发备份)
–定义了所有的数据拷贝(备份的设备)
–定义和备份任务相关联的方式
在存储策略中定义了不同类型的拷贝(Copy),每个拷贝都有自己的属性集。
这些属性定义了管理备份数据的方式、位置和保留时间。
总共有3种拷贝:
PrimaryCopy
•所有备份数据都将首先备份到该存储策略的PrimaryCopy中。
SynchronousCopy(不是Primary和Selective的Copy)
•先前所有的备份数据(全和增量)通过辅助拷贝可以复制到SynchronousCopy中,该拷贝种的数据和PrimaryCopy或SourceCopy(源拷贝)一样。
如果该拷贝选择了InLineCopy选项,该拷贝就是PrimaryCopy的镜像格式,可以是磁盘到磁盘,磁盘到磁带,磁带到磁带。
SelectiveCopy
•先前所有的FullBackupData(全备份数据)通过辅助拷贝可以复制到SelectiveCopy中,所以SelectiveCopy中都是PrimaryCopy或者SorceCopy中的全备份数据。
所有相同存储策略中的不同数据拷贝,通过辅助拷贝操作,将数据在同一个存储策略中无缝的进行迁移。
2.4备份数据保存时间策略
首先说明一下关于数据保存时间的术语,备份循环周期。
在CommVault术语中,每个备份循环都是从1个完全备份(或等价的全备份)开始,经过任意次数的增量备份或差异备份甚至不同天数,到下一个全备份结束。
(Commvault会自动判别)。
举例:
F是FullBackup,I是IncrementBackup,D是DiffBackup,E是nobackup。
以下都是2个Cyc。
FIIIIIIFIIIIII是2个Cyc
FIIIIIIFDDDDDD是2个Cyc
FIDIFIIIIIIIIII是2个Cyc
FIDEEIFIIIEEDD是2个Cyc
根据不同数据的性质和存放地点的不同,对不同的备份数据应该有不同的时间保存策略。
Commvault建议分为以下几种:
针对磁盘保留时间策略,由于磁盘空间有限,上面的数据主要用作快速恢复。
所以一般建议保留周期为1到2个循环周期。
而磁带分为2种情况:
是用作数据的备份和恢复,那么也建议和磁盘的保留时间策略一样,采用2到4个循环周期。
是用作数据的归档,作为归档数据应该是关键应用和财务数据才需要的。
这些数据是备查的,用来了解业务趋势的,所以只要保存全备份数据即可。
备份策略可以采用一年以内保存季度末全备份,一年以上保留年末全备份。
CommVault有扩展保留功能:
●扩展保留功能允许在一个存储策略里对不同的数据集合设定不同的保留时间,例如:
在30天内做周保留;在1年内做月保留;在7年内做年保留。
●扩展保留能有效地减少磁带的耗费。
●保留规则也可以用于磁带共享的情况:
允许多个作业在同一磁带上,它们必须有相同的保留时间;如果你写入到同一磁带的数据集合具有不同的保留时间,将导致保留策略无意义。
2.5备份系统技术特点
●高性能
⏹Commvault采用了D2D2T的备份模式,能够利用磁盘加速备份,提高了备份速度。
⏹Commvault提供SyntheticFulls(合成全备份)功能,可以将MediaServer上的全备份和增量备份合并成最新的全备份。
而不需要从客户端作全备份。
这样能减少全备份的次数,减少全备份窗口。
⏹Commvault采用的DataInterFacePairs方式,能够让备份数据通过专用的备份网络,从而避免和业务网络的互相干扰。
同时,也能实现多块网卡的负载均衡。
⏹Commvault的D2D2T模式中,磁盘备份采用的是文件系统作为备份介质,从而能够提供多个并发备份和恢复流,提高了备份效率。
⏹Commvault提供直接从磁盘恢复的功能,这样能够快速的定位备份内容,大大提高了恢复速度。
⏹Commvault备份支持Failure-Resume机制,通过内建的CheckPoint机制,能从备份或者异地复制失败或中断点继续往下备份,从而大大减少了备份窗口。
提高了备份成功率。
⏹分布式的索引机制,提供了更强的顺缩性和可靠性。
备份时能够在MediaAgent中实现负载均衡。
●高可靠
⏹CommVault可采用DRCommServe服务器,避免备份服务器失败,而无法备份恢复数据。
⏹Commvault支持将备份数据复制到不同的存储介质上,从而实现备份介质的冗余。
⏹Commvault采用分布索引和共享索引缓存区,这样当任何一台MediaServer的崩溃都不会造成备份恢复的失败。
⏹Commvault在每个备份介质集中,都包含了相应的元数据索引,能够快速的从备份介质上重建索引。
⏹Commvault的报警和报表机制能保证任何错误都能发送给系统管理员。
⏹支持GridStor,确保备份的成功率和效率。
⏹支持从客户,到MEDIASERVER,COMMSERVR的Cluster和AutoFailover。
●易管理
⏹通过存储策略,将备份存储设备统一的管理起来,降低了设备和介质管理的复杂度。
⏹直观完善的界面,所有的操作在一个窗口中就能维护管理。
⏹所有的操作都可以基于策略,方便了相同部门和环境下的数据管理和备份。
⏹丰富的报表,能明确管理所有的存储资源和客户端。
⏹完善的用户分组和权限机制,确保备份系统的方便管理。
●低成本
⏹Commvault能够跨越磁盘,磁带,光盘不同的备份介质。
⏹统一集成的授权方式,降低了软件隐含成本。
(不需要多个服务器域管理)
⏹能够结合ILM方案,进一步的降低成本。
⏹完善的SRM报表,能够报告每个应用和客户所耗用的存储资源。
从而能够进一步的进行资源分析和计算成本。
⏹通过合并磁带流技术,能够将多个并发任务的数据合并到1合磁带上,从而减少了磁带的数量,降低成本。
●扩展性
⏹能够方便的升级到SAN环境下。
支持LAN-FREE,Server-Free,ImageBackup等方式。
⏹支持所有主流存储设备的快照,复制等先进功能。
⏹能够支持所有主流应用的在线备份。
⏹支持软件快照功能,实施远程异步复制。
⏹通过代理备份方式,能够实现备份零窗口,Server-Free等备份模式。
3Commvault备份和恢复的特点
CommVaultGalaxy备份和恢复软件具有强大和完整的功能,能支持全系列的磁带、磁盘和光盘介质来做数据备份,Galaxy基于磁盘的数据保护方案,能让管理员把磁盘介质作为高性能的备份设备,并能支持任何存储结构,如:
DAS、NAS、SAN或IP-SAN,也能支持任何数据传输方法,如:
基于IP或基于数据块。
CommVault基于磁盘的数据保护技术有更快的备份速度、更小的备份窗口的优势,能提供并行的更高速的恢复性能、随机存取的数据备份,并能用基于策略的方法把数据移到二级存储介质上作长期保留。
Galaxy拥有从集中LAN备份到SANServerless备份等系列数据保护方案,用户能选择这些系列数据保护方案来保护UNIX或Windows环境,用户也能选不同性能的存储来匹配你的业务需求,从而极大的降低了数据生命周期的总费用。
CommVault基于磁盘的数据保护方案能透明的扩展到其他的介质上,象磁带或光盘。
能用单一的、统一的浏览来查看被保护的数据,不管数据在什么介质上。
CommVaultGalaxy能直接从任何介质上恢复数据,不论它最原始的备份介质是什么类型。
在数据生命周期的任何阶段,用户仅仅只要用策略来描述数据的类型,数据的移动和存储设备的控制都是自动的、平稳的进行。
能让用户在恰当的时间和恰当的地方存放数据,以应对可用性和费用的限制。
Galaxy备份和恢复的优势如下:
3.1磁盘优化技术(Optimizeddisk)
Galaxy软件把数据写入磁盘时,是把磁盘作为直接存取设备,而许多竞争者的产品是把磁盘仿真成磁带,作为顺序存取设备进行读写数据。
Galax软件优化读写操作达到了磁盘文件系统结构的优势,提高了读写定位的性能。
因为磁盘有多个读写磁头,多个主机能同时进行数据存取,多流备份和恢复作业能同步写入磁盘。
Galaxy软件也能用磁盘作为分级存储中的永久层,而不是一个把数据写入磁带之前的临时缓存区。
因此,Galaxy软件允许客户充发挥多种磁盘存取方案的优势,有效的利用一个或多个本地和异地备份存储。
当备份被设置到磁盘时,Galaxy软件利用了“磁带库”的概念,因此,无论是备份到磁盘还是磁带,管理员的功能设置是相同的。
以任何方式(SAN、NAS、DAS、LAN和WAN)连接的磁盘,都能作为Galaxy软件的备份设备。
用Galaxy软件备份到磁盘的其他一些特征如如下:
●备份数据能透明地跨越不同的装载点(介质跨越);
●备份卷能被其他应用共享;
●备份卷能被不同介质代理使用,不影响操作也不会造成数据丢失;
●动态装载路径共享使得SAN存储池中的磁盘能被多个Galaxy介质代理访问到,存储磁盘访问由CommServer资源管理来协调。
Galaxy软件理解随机存储设备的特性并且能充分利用特定容量存储资源实施一个存储方案,来帮助IT工程师优化存储资源。
利用本地文件系统和两部分索引设置,CommVault能够提供比竞争者虚拟带库方案更高的性能。
当下列几种数据不能充分快地传送给备份介质时,Galaxy软件能够组织并优化磁盘作为备份设备显得更加重要:
●慢速的WAN连接;
●小文件过多;
●用户应用的APIs输出数据过慢;
●磁盘在慢速写入和间断写入时没有磁带那种停止/前进/定位问题。
随着磁盘价格持续下跌,用磁盘备份数据将继续增长。
用中间二级磁盘存储的新的应用将继续进入市场并使得二级存储更加有效。
CommVaut能够充分利用随机磁盘的存储特性,能够管理不同介质上多个数据拷贝,使得Galaxy软件成为用磁盘作为备份介质的最好方案。
CommVault公司承诺所支持的磁盘设备能作为二级存储,这些包括像EMCCentera、NetworkApplianceNearStore、StorageTekBladestore和EMCCLARiiONCX系列,同时也包括来自StoneFlyNetworks,LeftHand基于IP-SAN系统的iSCSI,这仅仅是部分厂商的名字。
3.2跨越磁盘(Mediaspanningondisk)
就象能跨越磁带样,Galaxy也能让备份作业从一个文件系统跨越到另外一个,而不需要用户干预和中断备份,这点很关键,可以减少管理的复杂程度,不需要为备份准备可用的空间而一直监视和管理。
3.3一次性恢复(OnePassiRestor)
在传统的备份和恢复操作是,管理员必须面对的众多问题之一是:
他要恢复的数据的物理位置,另一方面,管理员或用户被提醒给介质一个物理标签或存放地,用来区别同类介质以便更好地取回。
Galaxy的“OnePassiRestore”在恢复的过程中,确保最佳的磁头读取顺序,由于在不同天里备份的文件在不同的磁带上,在恢复时,用软件装载或卸载磁带多次,为了替代这一过程,QiNetix在恢复前,先建一个预先排序表,这样就能保证任何数据只读一次,所要的数据只需一次读带就能完成!
OnePassiRestore能让管理员或用户在检索、查询要恢复的文件时不需要知道介质的物理位置,只要在iDataAgent的BrowseBackupData上点一下,输入要找的文件名或通配符,就能按要求去找文件。
另一个好处是,查找时仅返回有用的文件,不相关的文件不返回。
3.4合成全备份(SyntheticFull)
合成全备份功能可以通过把上一个全被份和与之相关的增量备份合并起来生成一个新的“全”备份,合成全备份的优势包括在生成全备份时不要再去接触原来的数据,这就消除了对应用服务器CPU的影响,同时可以创建一个新的全备份来做数据保护、设置新的站点和系统测试等用途。
为了扩大ILM的效率,合成全备份能从不同的介质子上完成。
例如,前一周的全备份在磁带上,而每天的增量备份在磁盘上,这样做是为了快速备份和快速恢复。
合成全备份能用这个在磁带上的全备份和在磁盘上的增量备份来合成一个新的全备份,用来做异地保存或灾难恢复。
这种灵活性使IT技术人员能裁剪恢复计划,利用所有层次的存储提供最大的性能和效率。
3.5辅助拷贝(AuxiliaryCopy)
用辅助拷贝功能,Galaxy软件能在不同的介质和地方之间创建或迁移备份数据的拷贝。
这种“分级存储”是完全基于策略的,在系统的后台进行,不需要用户干预。
数据拷贝的创建是基于策略的设定,而数据的保留和裁减是基于保留策略。
因此,当存储方式过去了需要改变时,数据的拷贝能在整个存储集合上被终止或被再创建。
一个应用辅助拷贝做D2D2T的实例
辅助拷贝功能对节省存储的费用很关键,可用辅助拷贝功能把过期的数据复制到廉价的介质上,让贵重的介质空出来给关键的数据做快速存取,这也是ILM的初衷。
利用好该功能,能有效的改变公司的ROI和TCO。
辅助拷贝比计划备份(scheduledbackup)的优先级低,辅助拷贝是在较低存储资源使用周期内在后台被激活执行的,另外,内置的自动重起功能也是有效的。
这样一个高级别的作业可以暂停辅助拷贝,来加速完成作业,当高级别的作业完成后,辅助拷贝能被再次恢复操作,从中断的地方继续进行。
这种内置的功能可以更有效的利用存储,减少对人的依赖,并能确保关键的数据按时完成备份。
3.6存储策略(StoragePolicies)
存储策略也是ILM的主要因素,通过存储策略(SP),所有关键的决定都被定义,存储策略是逻辑的方法来响应物理的资源和目标位置,存储资源包括下列可配置的项目:
●数据拷贝的位置;
●存储目标的类型;
●光盘;
●磁盘;
●磁带;
●带库;
●驱动器池;
●介质类型;
●容量;
●数据路径;
●要创建的数据拷贝个数;
●每个拷贝要保留的周期;
●再生极限。
一旦存储策略被设定,数据就能用下列的方法来被指定给一个存储策略,很容易的用鼠标点击一下就能把数据指定给不同的存储策略,就改变了数据管理的方法,不需要重新对硬件、连线和网络进行设置就完成了这种改变。
所有的操作都在Galaxy软件内部完成,与定义存储策略是分开的。
这种特点减少了IT在维护工作中的费用和复杂程度,如:
设置、基本设备的维