首页 > 传媒 > 关键词  > 数据保护最新资讯  > 正文

突破数据库备份恢复瓶颈:华瑞指数云“无损快照”技术赋能企业数据库实现秒级数据保护

2025-05-20 10:00 · 稿源: 站长之家用户

引言

在快节奏的数字化时代,数据已成为企业的生命线。各行各业都在以比较罕见的速度产生和积累数据,而如何有效、可靠地保护和恢复这些数据,成为了企业持续运营和创新发展的关键挑战。

在近日举办的 IF Club 技术研讨会上,独立技术顾问、IFClub联合发起人萧少聪老师带来的主题分享《复刻云数据库的高端特性:秒级克隆、备份与恢复》,其中介绍了基于华瑞指数云高性能存储产品WDS的ROW无损快照方案实现,高性能分布式存储结合数据库场景的秒级快照克隆方案。分享之后,数据库备份恢复技术成为了讨论的焦点。与会专家深入剖析了传统备份恢复方案的痛点,并重点探讨了以“快照”技术为代表的新一代数据保护方案。本文将以研讨会内容为基础,结合对主流云数据库服务快照技术原理的分析,为读者呈现一场关于企业级数据保护的深度技术解析。

数据库备份恢复:一场与时间和资源的博弈

传统数据库备份恢复面临着严峻的挑战:

数据复制之困:传统备份方法通常需要对整个数据库进行完整拷贝,这不仅耗时漫长,而且会占用大量的存储空间,甚至可能导致存储成本翻倍. 更糟糕的是,备份过程会严重消耗源数据库的 I/O 性能,影响业务的正常运行。

恢复时间之殇:恢复数据库同样是一项耗时的任务。虽然在理想情况下,恢复操作本身可能只需几秒钟,但实际场景中,数据传输、日志重放等环节都会增加恢复时间,使得企业面临更长的业务中断风险。

资源消耗之痛:传统备份方式对存储空间、计算资源和网络带宽都有着巨大的需求,这无疑给企业带来了沉重的运营成本和资源负担。

技术深潜:从COW到ROW,快照技术的进化论

“快照”技术作为一种先进的数据备份与恢复手段,通过创建数据在特定时间点的逻辑副本,实现了快速备份和恢复,“快照”技术作为一种先进的数据备份与恢复手段,通过创建数据在特定时间点的逻辑副本,实现了快速备份和恢复。

1.快照的本质:

    快照,顾名思义,就是对数据在某一时刻的状态进行“拍照”,生成一个逻辑副本. 这个副本并非完整的数据拷贝,而是指向原始数据或其变化部分的指针。  

2.  快照的优势:

瞬时生成:由于无需进行物理数据拷贝,快照的创建速度极快,通常只需几秒钟。

节省空间:快照只记录数据的变化,因此占用空间远小于全量备份。 研讨会上,有专家举例指出,对于一个 500GB+ 的企业数据库,使用传统备份方式可能需要额外500GB+ 甚至更多的存储空间来存储备份数据,而采用快照机制,首 次快照可能只占用几十 GB 的空间,后续的增量快照占用空间更少。

降低 I/O:快照的创建和恢复过程对源数据库的 I/O 影响较小。

3.  快照的关键技术:

    实现快照的关键在于“写时复制”(Copy-on-Write,COW)和“写时重定向”(Redirect-on-Write,ROW)这两种技术。

COW 快照: COW 快照的核心思想是,在修改数据之前,先将原始数据复制到快照区域,然后再进行修改。

优点:实现简单

缺点:写入性能会受到较大影响,因为每次写入都需要先复制数据

ROW 快照: ROW 快照则是在修改数据时,将修改操作重定向到新的存储区域,保持原始数据不变。

优点:写入性能更高,因为无需复制原始数据

缺点:读取数据时可能需要查询多个指针,导致读取性能略有下降

“不可能完成的任务” —— 数据库秒级备份恢复

当前主流的开源数据库产品以PostgreSQL还是MySQL为主,大多数是私有化部署,如果需要实现数据库基于快照的备份恢复方案,大多数场景需要对接第三方存储或者本地盘来实现。

本地盘(HDD或者SSD)方案一般会选用操作系统自带的LVM来实现快照,而对接第三方存储多数会架构在ceph等分布式存储的基础上,使用ceph的快照。而无论是LVM还是Ceph,都是使用COW实现的快照,带来的快照和克隆都是有大幅的性能下降风险。别说秒级,就算小时级都达不到。

所以当前私有化部署的数据库大多数没有基于快照克隆的太好的存储解决方案,大多数第三方存储方案由于快照实现的方案的各种局限性,也不能完全满足数据库秒级数据备份的需求,至此实现数据库“秒级备份恢复”成为了一个“不可能完成的任务”。

主流云数据库的技术实践 —— “秒级备份恢复”

在公有云产品中数据库的功能实现相较于私有部署场景具备更加完整的能力实现,很多公有云数据库都已经具备或者接近“秒级备份恢复”的数据库数据保护能力,我们基于行业的一些主流资料对于几个主流的头部云数据库产品的数据备份恢复能力做了分析:

AWS:RDS 和 Aurora(基于COW优化接近秒级备份恢复体验)

RDS:AWS RDS 主要依赖于 EBS实现的快照来实现备份和恢复。

克隆:AWS RDS 的实例克隆主要通过“从快照还原”(Restore Snapshot)操作实现,本质上是数据的完全复制。

快照:EBS 快照是增量式的,仅存储自上一个快照以来发生变化的数据块。

PITR:RDS 的 PITR 结合了快照和事务日志,可以恢复到指定的某个时间点。

Aurora:AWS Aurora 采用了一种计算和存储分离的架构,并在此基础上实现了更有效的快照和克隆。  

克隆:Aurora 的克隆利用了“写时复制”(Copy-on-Write,CoW)机制,只需创建指向共享存储的元数据指针,无需拷贝数据,因此速度极快。

快照:Aurora 快照实际上是在这个连续备份流中的元数据指针或标记,是一个 O(1) 操作。

 PITR:Aurora 的 PITR 基于连续备份流,可以实现秒级恢复。

阿里云:RDS 和 PolarDB(基于高性能快照实现了秒级备份恢复)

RDS:阿里云 RDS 与 AWS RDS 类似,也主要依赖于云盘的快照功能来实现备份和恢复。

克隆:阿里云 RDS 的克隆是通过将源实例的数据恢复到一个新实例来实现的,本质上是一个还原操作,创建数据的完整副本。

快照:阿里云 RDS 的快照也是增量式的。

PITR:阿里云 RDS 的 PITR 同样结合了快照和日志备份。

PolarDB:阿里云 PolarDB 的架构与 AWS Aurora 类似,也采用了计算存储分离的设计,并实现了快速克隆和恢复。

克隆:PolarDB 利用其底层存储的快照技术来实现快速克隆。

通过对比分析 AWS 和阿里云两家基于自己不同的存储快照能力实现的备份恢复效果,我们可以看到,主流云数据库服务在利用快照技术提升数据备份恢复的效率和性能的方向已经取得了一定的成绩。

但是如何提升企业私有化部署场景的数据库数据备份恢复能力呢?

数据库秒级备份恢复的破局者:华瑞指数云的“ROW无损快照克隆”

在前文COW与ROW的实现原理中,可以看到,虽然 ROW 快照在写入性能方面优于 COW 快照,但通用的 ROW 实现方案通常会牺牲一定的读取性能。而一些前沿的分布式数据库厂商(比如:华瑞指数云),已经实现了更先进的“无损 ROW 快照”技术,即在保证写入性能的同时,也实现了读取性能的零损耗。在私有化部署场景让客户能够拥有近乎美好的快照体验。

当前华瑞指数云 WDS 基于自己的快照能力真正实现了“无损 ROW 快照克隆”技术,克服了通用 ROW 快照的局限性,实现了真正的秒级快照和读写性能零损耗 。  

读写零损耗: 传统快照技术可能会对数据库的读写性能产生一定的影响,而华瑞指数云WDS的“ROW无损快照”技术,通过针对读场景的针对性优化,解决了ROW快照读流程实现中的缺陷,真正能够确保在快照创建和使用过程中,数据库的读写性能始终如一,不会出现任何下降。

秒级快照: 通过快照实现流程的精细化实现,华瑞指数云WDS实现的ROW快照真正支持以秒级的粒度创建快照,这意味着可以更加频繁地备份数据,实现更精细的数据恢复,将数据丢失的风险降到最 低。甚至单卷的快照个数可以达到数万个级别。

灵活的备份策略: 由于华瑞指数云ROW快照技术的出色实现,WDS高性能块存储产品也可以通过快照实现并支持多种数据备份策略,用户可以根据自身的业务需求,灵活地设置备份频率、保留时间和备份方式,实现定制化的数据保护。

秒级克隆:基于“无损快照”技术,华瑞指数云WDS实现了数据库的秒级克隆能力. 传统数据库克隆为了解决克隆卷读写性能折损的问题,需要进行大量的数据拷贝来用Flatten功能与原快照解耦,耗时漫长,而华瑞指数云WDS只需秒级即可完成一个数据库的克隆,由于读写性能真正做到了无损,无需再使用Flatten克隆来做大量的全量拷贝,极大地提升了数据库的敏捷性。  

通过以上的“无损 ROW 快照克隆”技术,可以真正帮助私有化部署场景的数据库对接华瑞指数云WDS存储实现“秒级备份恢复”能力,可以让企业用户在私有化部署场景真正能够体验公有云数据库一样的流畅的备份恢复效果。

实践案例:PostgreSQL 数据库的备份与恢复

IF Club 技术研讨会上,萧少聪老师带来的主题分享《复刻云数据库的高端特性:秒级克隆、备份与恢复》PPT 中还提供了 PostgreSQL 数据库在使用 Ceph 和华瑞指数云 WDS 进行备份和恢复的详细操作步骤:  

备份过程: 通过 pg_backup_start 和 pg_backup_stop 命令配合存储系统的快照功能,实现数据库的备份 。

恢复过程: 通过克隆快照并挂载到目标服务器,实现数据库的快速恢复 。

性能恢复: Ceph 需要进行 flatten 操作才能恢复性能,而华瑞指数云 WDS 无此步骤,恢复速度更快 。

秒级克隆:基于快照创建完整数据库副本,无需全量拷贝。

PITR准确恢复:结合WAL日志,实现任意时间点数据回溯,误差华瑞指数云WDS:定义新一代企业级数据库存储

华瑞指数云所有的产品能力无论是ROW无损快照,还是极 致的低时延都得益于华瑞指数云先进的存储架构能力,为数据库应用带来了比较罕见的灵活性和性能提升。在数字化转型的浪潮中,企业对于数据库的依赖日益加深。数据库使用的传统存储架构的种种局限性,如扩展性瓶颈、性能瓶颈、资源浪费等,已经成为制约企业发展的桎梏。华瑞指数云WDS,作为一款创新的分布式存储解决方案,旨在打破这些束缚,为企业级数据库应用带来比较罕见的自由度和效率提升。

高性能、无限扩展的分布式存储:数据库的“超强引擎”

华瑞指数云WDS不仅在快照和克隆方面表现出色,更具备卓越的存储性能和扩展能力,为数据库应用提供强大的支撑。

极 致性能: 华瑞指数云WDS的性能经过机构 SPC-1 的验证,IOPS 达到数千万,延迟低至微秒级别,超越了众多高端全闪存阵列,为数据库应用提供极 致的性能体验。

线性扩展: 华瑞指数云WDS的分布式架构支持无限的线性扩展,可以轻松应对数据库数据量的增长和业务规模的扩大,满足业务持续发展的需求。

全信创、纯软件定义: 华瑞指数云WDS实现了全栈的信创支持,满足了对信息安全有较高要求的行业和场景的需求。同时,纯软件定义的架构,可以灵活地部署在各种硬件平台之上,降低用户的采购成本和运维复杂度。

数据库与分布式存储的深度融合:释放数据潜能,定义新的能力边界

华瑞指数云WDS与数据库的结合,打破了传统架构的束缚,释放了数据的巨大潜能,并能够实现一些过去只能在公有云数据库产品上才能实现的高 级能力,在私有云环境中为数据库赋予了新的生命力。

高 级能力普惠化: 华瑞指数云WDS将公有云上的数据库高 级能力,如弹性伸缩、多活容灾等,带到私有云环境,让更多的企业能够享受到这些技术红利,加速数字化转型。

定义新的能力边界: 通过分布式存储带来的高性能、无限扩展能力,数据库可以处理更大规模的数据,支撑更复杂的业务场景,突破传统数据库的能力边界,为企业带来更大的创新空间。

结论

通过华瑞指数云WDS以其“无损快照克隆”技术,真正可以实现数据库的”秒级备份恢复“的能力,让客户在私有化部署场景一样可以体验到云数据库的备份恢复能力。结合华瑞指数云的各种高性能存储能力,为企业级数据库应用带来了革命性的变革。它不仅能够满足客户对高性能、高扩展性、高安全性的需求,更能够赋能数据库应用,实现更多高 级功能,助力企业在数字经济时代获得更大的竞争优势。

另外感谢IF Club 技术研讨会为我们提供了一个深入了解数据库备份恢复技术的平台。通过对“快照”技术的剖析,以及对主流云数据库服务实践的探讨,我们看到了数据保护领域正在发生的深刻变革。

推广

特别声明:以上内容(如有图片或视频亦包括在内)均为站长传媒平台用户上传并发布,本平台仅提供信息存储服务,对本页面内容所引致的错误、不确或遗漏,概不负任何法律责任,相关信息仅供参考。站长之家将尽力确保所提供信息的准确性及可靠性,但不保证有关资料的准确性及可靠性,读者在使用前请进一步核实,并对任何自主决定的行为负责。任何单位或个人认为本页面内容可能涉嫌侵犯其知识产权或存在不实内容时,可及时向站长之家提出书面权利通知或不实情况说明,并提供身份证明、权属证明及详细侵权或不实情况证明(点击查看反馈联系地址)。本网站在收到上述法律文件后,将会依法依规核实信息,沟通删除相关内容或断开相关链接。

  • 相关推荐
  • ​金仓数据库异构多活架构,护航浙江省人民医院信创实践

    浙江省人民医院作为省内规模最大、实力最强的三甲医院,承担信创试点使命。面对多院区、高负载及业务连续性等挑战,医院选择电科金仓数据库,以“异构多活容灾架构”为核心,打造国内首个LIS系统国产化改造案例。该方案实现多中心互备、秒级切换,业务连续性达99.99%,效率提升60%,为集团化医院信创提供了可复制的全链路解决方案。

  • 云数据安全态势感知全新上线,筑牢内外网数据安全防线

    本文系统分析了云上数据安全的核心问题与解决方案。主要挑战包括:数据资产分散难管理、访问溯源成本高、风险定位困难、权限滞留易泄露。解决路径需构建统一安全运营视图,通过资产自动发现、AI敏感数据识别、访问关系可视化实现全面监测,结合多维动态分析提供精准管控建议。最终达成“看得见、管得住、防得准”的安全目标,并满足合规审计要求。

  • 国产化率达100%!温州港TOS成功“换芯”金仓数据库

    浙江省首个信创版港口集装箱码头生产操作系统n-TOS及配套中心业务处理系统CTOS在温州港乐清湾港区上线运行。系统采用海光CPU、银河麒麟操作系统等全栈国产软硬件,国产化率达100%,安全性和稳定性通过全面验证。金仓数据库助力实现Oracle数据库的平滑迁移,确保业务零改造上线。该系统作为港口"智慧大脑",管理集装箱装卸、堆存等全流程业务,标志着浙江海港在码头核心系统自主可控方面迈出关键一步,为后续推广提供样板。

  • TabTab 登顶模力工场 AI 应用榜榜首, 把 AI 数据分析师装进口袋,关键结论更快抵达!

    TabTab是一款全链路AI数据分析助手,核心功能包括多源数据连接(支持文档、数据库、电商平台等)、自动化采集清洗、内置分析模型及可视化呈现。其优势在于通过多智能体系统实现自然语言交互,降低分析门槛,让非技术人员也能快速完成客户洞察、销售业绩等分析,显著提升效率。产品定位中立,致力于构建多元化AI效率提升生态。

  • 趣链科技牵头两项IEEE国际标准正式发布,全球技术标准再添“中国方案”

    近日,IEEE标准协会正式发布由趣链科技牵头制定的两项区块链国际标准,标志着我国在数字技术国际标准化工作中取得重要突破。两项标准分别为《区块链即服务参考架构标准》和《区块链一体机参考架构标准》,由浙江大学等机构主导制定,多家产学研机构专家共同参与。标准规范了区块链服务化平台与软硬件融合系统的技术框架,将提升我国在全球区块链领域的标准制定能力与国际话语权,为产业协同创新提供支撑。

  • 凭借革新技术突破 三星电子荣获消费者技术协会赞誉

    三星电子在2026年国际消费电子展(CES)斩获多项创新奖项,覆盖移动设备、家庭娱乐、家电及半导体等领域。其最新产品与服务凭借集成性能、设计与智能化的优势,荣获消费者技术协会颁发的CES创新奖。获奖产品包括Galaxy XR头显、Galaxy Z Fold7折叠手机及Galaxy Watch8智能手表等,彰显了三星在AI技术融合、沉浸式显示和智能家居解决方案方面的领先成果。这些创新致力于为用户打造无缝互联、高度个性化的体验,推动消费电子技术边界的发展。

  • 玄武云通过DCMM三级认证 数据管理能力获国家级权威认可

    玄武云科技(02392.HK)近日通过国家数据管理能力成熟度(DCMM)稳健级(三级)认证。该认证依据国家标准GB/T36073-2018,标志着公司在数据战略、治理、安全、质量等八大能力域达到国家权威标准。公司建立了覆盖数据标准管理、安全管理、质量管理的完整体系,将数据管理融入产品研发与业务流程,为云通信与AI业务发展奠定坚实基础。未来将持续深化数据能力建设,探索数据要素创新应用,助力行业数字化转型。

  • 苹果回应iPhone放电饭煲内胆传数据更快:属实没必要

    日前,演员陈伟霆因用着iPhone 16 Pro却套了个iPhone 17 Pro的手机壳引发热议。 面对粉丝提问,他解释称,新机数据转移需要一天多时间。 有网友支招,可以把两部手机放进电饭煲内胆里传数据更快。 据媒体报道,苹果客服对此表示,用电饭煲内胆(传输数据)属实没必要。” 客服称,对于iPhone来说,两部手机之间传输数据用的是虚拟网络,并不涉及Wi-Fi和蓝牙传输。

  • GEO品牌监控平台横评:哪家工具的数据最准?

    本文测试多款GEO监控工具,发现同一关键词在不同工具中曝光率差异高达40%,直接影响AI推荐排名。通过对比测试,国际工具覆盖ChatGPT等平台但缺失国产AI,国内工具AIBase专注豆包、DeepSeek等平台,准确率达90%且提供竞品对比、场景还原等深度分析。建议国内企业首选AIBase,全球化业务可组合使用国际工具,并强调工具核心价值在于通过数据持续优化内容策略。

  • 寒武纪发展之道:人才为核 技术筑基

    寒武纪作为人工智能芯片领域的领军企业,通过掌握智能处理器微架构、SoC芯片设计等核心技术,以及编程框架适配、芯片编译器等基础软件技术,构建了全面的技术体系。公司重视人才建设,研发人员占比近八成,其中硕士以上学历超80%,并拥有完善的专利布局(已获授权专利1599项)。未来将持续加大研发投入,优化人才结构,巩固行业竞争优势,推动AI芯片技术创新与产品迭代。

今日大家都在搜的词: