您的位置:首页 > 移动互联

系统容灾备份和业务高性能运行,杉岩USP异步复制实现兼得

发布时间:2022-07-29 12:49:28  来源:互联网     背景:

  当今时代,数据和信息犹如各行各业的业务基础和命脉。信息化在带来便捷的同时,也必须面对数据丢失的风险。

京东智联云物联网

  天有不测风云,自然世界,如火灾、地震等灾难事件时有发生。对IT人来说,当某处应用系统因为灾难停机,往往需要7*24小时紧急待机处理,期间还得对数据安全提心吊胆。

  面对风险和难题,企业应该做好万全之策,例如更新容灾系统,守住最后一道保障关卡。本文就为你详解容灾系统中的重要“招式”——异步远程复制。

  作为容灾系统的核心技术之一,存储系统的数据复制是一种可保持两地间数据一致性和实现灾难恢复的关键技术,当生产中心故障时,用户可利用灾备中心的数据备份恢复生产数据,此外也可以通过灾备中心直接提供运营支撑环境快速恢复业务,满足企业对RPO和RTO的要求。

  数据复制实现原理和问题分析

  同步复制or异步复制

  当前,存储系统的复制技术通常分为同步复制和异步复制。同步复制可以做到主/备集群的数据同步更新,要求每一个写入操作在执行下一个操作处理之前,在源端和目标端都能完成;而异步复制因为采用周期性同步的方式,在处理下一个操作前,无需等待数据复制到目标系统中。

  同步复制有着能最大限度地减少数据丢失量的优势,拥有更强的数据一致性,但也因此会影响生产系统的性能。而异步复制能在保证主从数据的最终一致性的同时,最大限度减少由于数据远程传输的时延而造成的业务性能下降。在建设容灾系统时,企业可以结合不同的业务场景,选择不同的数据复制方式。因此,如果不是业务上对此有非常苛刻的要求,在对业务性能要求高,但是RPO要求不高的场景,通常采用异步复制的方式进行容灾备份。

  异步远程复制,快照机制成主流

  目前,业界实现异步复制技术主要分为基于日志机制和基于快照机制两类。

  1.基于日志机制

  对于基于日志的数据复制,客户端的数据更新请求,首先要写入日志中,当日志写入成功,然后再把数据写入对应的存储空间。日志中会给每一个数据更新操作分配一个唯一递增的序列号,从而保障数据恢复时能够按照正确的顺序执行,保障数据一致性和完整性。备份集群从主集群远程读取到日志操作后,基于日志序列号在本地进行数据回放,从而完成数据复制工作。

  该机制由于需要先把数据写入日志,然后再更新本地集群,因此至少有一次以上的写入数据放大,进而导致业务写性能存在一倍以上的性能下降,在异步数据复制场景比较少见。

2018玩黑莓bb10

edge浏览器更改ua

  2.基于快照机制

  基于快照的数据复制,就是定时在主集群对数据进行一次“照相”,生成一个描述当前数据状态的快照。备份集群通过比较主集群两个快照差异,来确认快照间隔时间内所发生的数据变化,并通过同步快照时间的差异数据来完成数据复制工作。

系统容灾备份和业务高性能运行,杉岩USP异步复制实现兼得

  图1 基于快照机制实现异步远程复制-初始全量同步

系统容灾备份和业务高性能运行,杉岩USP异步复制实现兼得

  图2 基于快照机制实现异步远程复制-增量同步

  基于快照的数据复制由于数据同步效率高,因此使用场景广泛。但是,由于需要通过频繁的更新快照来记录数据状态,并且通过比较两个快照之间的数据差异来实现增量数据同步,因此快照的的实现机制以及获取快照之间差异数据的效率决定了基于快照的数据复制机制的效率。

  为了方便记录不同存储卷的数据状态,常用的方法是使用一个额外的索引位图。当存在数据更新时,先更新对应位图中的状态信息,再写入数据。但这种方式引入了两个问题:

  1. 索引位图的更新需要通过互斥锁来保证一致性,在常用的块存储多路径场景,不同的存储网关更新索引位图时会存在锁竞争,导致出现频繁抢锁,极大地影响存储的写入性能。

  2. 由于索引位图存储较为集中并且需要频繁更新,很容易成为写热点,进而影响存储集群的读写性能。

  针对上述问题,杉岩USP统一存储平台通过基于快照机制的异步远程复制方案和深度优化,实现后台异步远程复制高效增量同步和用户前台业务高性能平稳运行两不误。

友盟开放平台

  杉岩USP异步远程复制,打造高性能方案

  杉岩数据采用基于自有专利的ALUA卷级负载均衡、自适应索引IO聚合和高性能RoW快照技术,提供一个高性能、高可靠的数据复制方案。

智能电视怎么越来越卡

  ALUA机制

  杉岩USP在业内率先支持ALUA机制(点击查看:杉岩USP统一存储平台业内率先支持ALUA机制),避免了多路径场景的锁竞争问题,提升了不同卷的索引位图访问聚合度,大大减少下盘访问的平均开销,提升前台业务IO的整体性能;并且利用ALUA的动态负载均衡功能,可有效降低后台异步远程复制任务对前台业务IO的影响,而ALUA的秒级故障快速切换功能则可有效保障前台业务IO的平稳连续运行。

  细粒度数据块状态位图和IO聚合

  杉岩USP异步复制特性,可将卷或快照的索引位图拆分为更精细粒度的子块,并结合层次的内存元数据索引,既可加速获取快照之间的差异数据,又可减少对索引数据的频繁访问;并且索引位图数据打散存放,可避免频繁访问索引位图数据所带来的访问热点问题。同时,针对索引位图的更新还进行了自适应的IO聚合处理,进一步降低了更新索引位图对业务IO性能的影响。

  RoW机制

  杉岩USP异步远程复制的快照采用RoW(写时重定向)机制,可有效避免快照对业务写IO的影响,同时基于独有专利技术解决传统RoW快照造成空间离散影响读性能的问题,可最大程度降低异步复制快照对业务IO的性能影响。

三星galaxy s21什么时候上市

  价值总结

  杉岩USP统一存储平台的异步远程复制功能既充分保证了高效的后台增量同步,实现系统容灾备份,又有效保障了前台业务的高效平稳和连续运行,使用户拥有了高可靠、高稳定、高可用和高性能的极致体验。主要价值如下:

  远端备份和恢复:业务数据失效后,可通过远端的备份数据进行恢复,避免主端存储集群数据失效后,由于数据丢失造成的损失。

  持续的业务支撑:灾难发生时可以通过从端存储集群快速接管主端存储集群的业务数据,以保证业务的可靠性,避免主端存储集群故障后,由于业务中断造成的损失。

  容灾恢复:灾难发生后可以通过从端存储集群的数据实现主端存储集群数据的恢复,避免灾难发生后,由于业务数据丢失或恢复时间过长造成的损失。


返回网站首页

本文评论
百悟科技:围绕需求场景的企业短信服务
  短信服务作为最早的移动互联网服务之一,凭借覆盖面广、直达率高、成本低等特点而广受企业的喜爱。无论是会员运维还是营销推广,短信服务的影响力与渗透力都在不断增强。华...
日期:07-28
悠易互通斩获北森2021年互联网行业人力资源管理杰出实践奖
  2021年12月28日悠易互通凭借在人才管理的出色表现,斩获北森2021年互联网行业人力资源管理杰出实践奖。悠易互通在人才管理理念的先进性、实践的影响力、数字化技术应用的...
日期:07-30
腾讯吴运声:腾讯云+AI助力中国天眼FAST发现22颗新脉冲星_中国天眼发现240余颗脉冲星
  9月3日,2022年世界人工智能大会“腾讯论坛”在上海举办。腾讯云副总裁、腾讯优图实验室总经理吴运声发表了“加快AI技术与场景创新,助力数字经济高质量发展”主题演讲。吴...
日期:09-04
创想无限!2022华为开发者大赛中国区东部赛区开幕式邀您参加!_华为设计大赛
  开发者是数字时代勇于创新的中坚力量,每一个开发者都了不起。  2022华为开发者大赛以“Spark Infinity 创想无限”为主题,鼓励全球开发者充分发挥想象力和创新精神,用I...
日期:07-25
混合办公,以安全弹性锻造企业可持续发展韧性
  数字技术与各行业的深度融合催生出众多新模式新业态。如果说在线学习、远程会议等一些数字化应用在疫情前还处于探索、尝试的阶段,新常态下,这些新的模式几乎取代了传统的...
日期:10-21
新品上市丨深信服Oracle数据库资源池解决方案,承载用户的每一份重托
当下主要的数据库建设方案,普遍是围绕服务器、存储、操作系统、感冒进了icu会是什么病数据库软件等各个层面堆砌松耦合建设的传统数据库方案。解决问题的方式便是“哪疼医哪,...
日期:07-29
李佳琦双11直播200亿_双十一明星也剁手!李佳琦在直播间抢极米投影
  10月20日晚,双11预售启动,李佳琦、薇娅两位“带货之王”再次打破纪录,数据显示,李佳琦直播间销售额最终达到106.53亿元,薇娅直播间销售额达到82.52亿元,两人共销售约189亿元。...
日期:07-26
磨刀霍霍奔向家居物联网,毫米波雷达稳步突进蓄势待发
  ——“天猫精灵,今天天气怎样”  ——“今天天气晴,气温19℃到27℃。”国美618有活动吗  智慧生活时代,智能家居产品进驻千家万户,这样的对话场景每天都在发生。但智能...
日期:07-26
聚力智能边缘、引领时代浪潮,英特尔偕同生态伙伴拥抱数智新生活!
  “十四五”发展关键期,高质量发展成时代最强音。将新一代信息技术与工业进行深度融合,既是加快构建高质量发展新格局的必然要求,也是社会实现高质量发展的新趋势。在万物互...
日期:12-27
央视聚焦618物流配送,泰坦机器人探索室内外无人配送新模式
  据京东公布的618最终战报统计,今年的618年中购物节销售额再创新高,平台累计下单金额超3793亿元,创下历史纪录,预计全网累计揽收包裹量将达100亿件。在全国防疫调控的大背景...
日期:10-11
百度松果学堂成立 为中国AI发展提供科技人才培养引擎
  8月18日,百度联合央视新闻举办“世界大会2021”大会,全景呈现AI赋能千行百业和百姓生活。会上,百度CTO王海峰宣布成立百度松果学堂,打造源于产业的AI人才培养平台,致力于让每...
日期:07-29
“智慧享老,移路相伴”——中国移动北京公司银发服务升级,暖心守护银发一族
  随着科技的发展,智能化应用渗透到生活中每一个角落,与此同时,很多老人却饱受“数字鸿沟”困扰,购物、看病、支付等,面临诸多困难。为帮助老年人跨越数字鸿沟,共享信息化发展成...
日期:07-14
2021世界计算机大会长沙开幕_计算产业新征程2022世界计算大会新闻发布会在长沙召开
  8月24日上午,2022世界计算大会新闻发布会在长沙成功召开。工业和信息化部电子信息司副司长徐文立,湖南省工业和信息化厅党组成员、副厅长彭涛,长沙市人民政府副市长康镇麟,...
日期:08-25
假期结束,春节活动不停:京东携手Pico带来600元优惠券等福利
  开工大吉!当我们还在回味冬奥会开幕式的浪漫,还在回想大年三十和全家人聚集一起,看春晚抢购京东提供的15亿红包和好物的那一幕幕幸福时光,7天的春节假期不知不觉间画上完美...
日期:07-30
当贝X3 Pro激光投影仪正式亮相!年度最值得买的高端投影仪来了_当贝X3投影距离
  最新消息,当贝X系列投影新品——当贝X3 Pro激光4K投影仪目前已经上架电商平台,并开启预售。这次当贝X3 Pro的一大亮点是4K激光投影仪,并且在配置、画质、外观等方面持续升...
日期:07-14
激光电视 贴吧_激光电视又上热搜了,争议点变实锤?
  日前,一桩家电界的旧案迎来终审判决,而这个官司的主角正是备受争议的“激光电视”。 乍一看,似乎只是一件普通的商业纠纷。但细心的人可能会发现,这场原本应该以“口水战”...
日期:07-29
开迈斯充电体验官沙龙(杭州站)暨大众汽车集团(中国)“众充•随行”充电体验空间巡展圆满举行
  2022年9月23日,由开迈斯新能源科技有限公司、大众汽车集团(中国)联合主办的开迈斯充电体验官沙龙(杭州站)暨大众汽车集团(中国)“众充•随行”充电体验空间巡展在杭州余...
日期:09-24
极米投影仪play特别版评测_便携投影中画质扛把子——极米Play超悦版
  想要自己打造户外露营、露天电影、车载影院、家庭影院,那选购投影要机身小巧,有内置电池,这两点几乎是不能忽视的硬性要求。结合现实论述消费者知情权如何实现理想汽车充电...
日期:07-25
南方电网推出国产电力专用芯片“伏羲”:基于自主 CPU 内核和封测技术
  1 月 25 日消息,据人民日报报道,为应对电网数字化、网络化发展下的精准测控控制需求,中国南方电网有限责任公司依托国家重点研发计划,基于国产自主 CPU 内核和封测技术,集中...
日期:08-08
技术赋能教育,智能引领未来_【高交会IT展】科技赋能教育新想象,人工智能推动教育信息化
  随着互联网与教育的融合不断深入,教育信息化在内涵、深度和质量上也在不断发展,智慧教育成为备受关注的焦点和未来发展的方向。信息技术与教育融合创新,已成为教育高质量发...
日期:07-29