混合云存储优势、场景、案例全面剖析

2019-04-12 10:32:26 文/今日头条 作者/ 云技术

各行各业都在不断的产生数据,将数据分层,利用混合云存储方式,存储数据到云端,是应对海量数据增长比较经济的方式。混合云存储意味着利用公有云存储和本地存储来创建更高的整体价值。

Netscape创始人、硅谷着名投资人Marc Andreessen说:“软件正在吞噬整个世界”,所有的软件一边在消费数据,一边在产生数据,可以说现代文明正是由数据构建的。IDC预测全世界数据总量从2016年的16ZB将增至2025年163ZB(1ZB约为1万亿GB)),2018年中国产生了大约7.6ZB的数据,美国是6.9ZB。

随着数据越来越快的增长,如何更经济的存储数据成为一项世界难题。Gartner预测,到2020年,90%的组织将利用混合云管理IT基础设施。随着混合云的普及,充分利用混合云存储,让冷热数据根据需要在云和本地数据中心之间流动,是经济的解决数据存储的必然方案。同时混合云治理也面临三个问题:统一资源管理、统一应用平台、统一存储管理。

一、混合云治理的三大问题

1)统一资源管理

通常,混合云环境下,用户希望能够实现公有云和私有云这两个环境中的资源的统一管理,这就意味着用户可以跨多个环境下计算资源动态管理/优化、系统镜像、计量计费、监控、告警等,而不是分别管理带来的管理复杂度和成本的增加。

2)统一应用管理

企业通常在研发测试过程中可通过私有云容器平台提供的Dev-Ops特性进行敏捷开发,帮助产品和应用的快速迭代与测试验证;在实际投入生产时,由于公私有云镜像仓库的统一管理,用户无需再将镜像推至公有云,从而实现一键部署应用;在一些特定场合,用户甚至可以进行公、私有云的灰度发布,进行QoS控制,实现个性化的应用服务对外发布。所以基于容器的应用统一管理也是混合云项目落地中用户关注的问题之一。

3)统一存储管理

混合云存储作为混合云战略的重要组成部分,用户可以将一些数据存储在私有云环境中(本地数据中心),保障数据的安全以及合规;将另外一些数据存储在公有云上,用于归档、备份、灾难恢复和分发等。二者结合以创建一个更具整体价值的混搭,让用户以更合理的价格去获得与其要求相匹配的存储资源,帮助企业更为充分的利用云存储的可扩展性和成本效益,确保资源和成本的最优化。如何制定一个合适的混合云存储策略、并能实现统一存储管理是很多混合云用户面临的主要问题之一。

本文,重点谈一谈混合云模式下的统一存储管理话题。

二、混合云存储的典型业务场景和挑战

1)混合云存储典型业务场景

我们了解到,混合云存储主要用于以下场景:

备份与灾备,数据同时在本地和云上存储,并且归档,当本地数据损坏,甚至本地数据中心彻底故障的时候,可以利用云上的数据恢复业务。

文件加速,如果有多个分支几个机构,可以利用公有云在全球分布的特点,通过混合云存储的方式来达到文件加速的目的。

分层存储,通过混合云存储的方式,在本地使用热数据,将温数据和冷数据存储到云端,可以达到节省成本的目标。

海量存储,物联网、视频监控、边缘计算、医疗数据等行业数据都在持续增加,解决之道是将数据分层并存储到云端。

总之,各行各业都在不断的产生数据,将数据分层,利用混合云存储方式,存储数据到云端,是应对海量数据增长比较经济的方式。混合云存储意味着利用公有云存储和本地存储来创建更高的整体价值。

2)混合云存储面临的挑战

混合云项目落地时,通常会遭遇以下挑战:

应对现状影响最小,选择的混合云存储,尽量不要改变现有的内部部署基础设施或应用程序。

地理位置,公有云服务商是否在自己需要的地理位置上有可用区域。

安全和合规,不是所有数据都可以存储到云端,敏感数据要符合合规要求,符合企业的内部安全标准。

成本优化,根据不同数据重要性和使用频率,合理的将数据分层,不同数据使用不同成本的云存储,以达到优化成本的目标

业务可扩展性设计,业务设计符合可扩展性,随着业务需求和应用程序数据要求的变化而扩展云存储。

灾难恢复和业务连续性保障,正确使用混合云存储,可以让用户在发生故障时访问关键系统和应用程序。

了解了混合云存储的应用场景和使用挑战,让我们再来看看UCloud旗下UMCloud的UMStor统一分布式存储平台是如何解决这些挑战,UMCloud认为混合云存储主要是要解决混合云统一管理的问题。

三、存储无边界,UMStor存储平台解析

UMStor统一分布式存储平台提供了Cloud Sync、Cloud Archive和Cloud Import三个针对混合云场景定制的特性,分别解决了用户多中心数据同步、关键数据容灾备份、历史数据归档、归档数据抽取等数据存储管理问题,帮助突破私有云容量上限的瓶颈、充分利用公有云无限扩展的存储资源,实现真正意义上的存储无边界。

a)UMStor的三大工具

1、Cloud Sync,实现公有云和私有云的无缝数据同步

在高安全级、监管要求的业务场景下,客户需要在本地和云端同时保留业务生产数据,此时需要数据的实时同步。Cloud Sync可以帮助用户在私有云和公有云之间完成实时的异步数据存储,解决多数据中心的数据无缝同步问题,实现异地云数据中心容灾备份和异地双活。

例如,电子商务系统、Web网站等业务,为了应对业务规模爆发增长的需求,此前的做法是自己搭建服务器,但扩展性和并发性都存在问题,利用混合云架构,将部分业务部署至公有云上, Cloud Sync能很好的帮助此类用户做好数据在公有云和私有云两个环境中的无缝数据同步。

2、Cloud Archive,通过冷热分层技术实现数据的生命周期管理

对象存储可以很好的满足大规模非结构化存储问题,面对快速增长的数据存储需求,成本是首要问题。通过对数据的访问频度进行区分,引入更低成本的归档存储系统,对数据进行分层是控制成本的重要技术手段。而如今的归档存储系统作为孤岛,无法与对象存储系统进行统一管理。

CloudArchive 归档存储实现了与对象存储的深度融合,在节省存储成本的同时保障企业级存储资源的多级完整纳管,真正在私有化环境实现存储的统一分级管理。

同时,Cloud Archive通过数据冷热分层技术,可实现数据的生命周期管理。结合UMCloud UMStor统一分布式存储平台和UCloud公有云存储,可帮助企业实现生产数据、档案数据的统一管理。

如双录场景下的流媒体数据、大数据分析场景下的样本数据等,可通过CloudArchive云归档方式将历史数据进行定期归档,保证历史数据的安全性的同时,也可以借助Cloud Archive归档存储的低成本优势将灾备集群的建设成本进行大量削减。在使用归档存储的情况下,成本仅为独立建设灾备集群的成本的五分之一,在无需数据实时高可用(双活)的情况下,这样的归档备份方式减少了大量的成本支持。

3、Cloud Import——实现云端存储数据反向导入,避免锁定问题

Cloud Import云导入功能则是UMStor统一分布式存储平台数据存储管理平台在实际客户存储使用过程中发现的一个新的业务场景。UMStor统一分布式存储平台针对公有云存储和私有云存储的数据迁移都是自动的,也不会影响用户在公有云和私有云的使用之间做存储选择。

将公有云与私有云存储一起混合使用是最佳的成本优化组合,毕竟扩展成本可能也是企业想要考虑私有云存储的最重要原因。

b)UMStor的三大特点

数据完整性保证,针对数据完整性,UMStor不仅要做端到端完整性的保证,另外,还要在做读写操作上做数据完整性的检查。

基于场景的可视化,UMStor可视化保持信息高度相关联,保持上下文,能够直接帮助运维人员指导操作。UMStor按照用户的关注做切分,管理平面有两个平台的,一个是LCM只负责管理单个集群,还有一个是MCV是用来管理多个集群的。

安全保障,防止窃取有三点,一是传输过程中通过TLS加密的方式保证数据的完整,不被篡改,不备窃取。二是通过服务端加密,来保证存储过程中不被窃取。三是对密钥提供单独的密钥管理服务来保证密钥的安全。

通过UMStor的三大工具和三大特点可以看出,UMStor可以有效满足前面提到的备份与灾备,文件加速,分层存储,物联网、视频监控数据,边缘计算,医疗数据等大容量数据存储场景。

可以说,在应对混合云存储挑战方面:UCloud公有云存储和其私有云UMCloud UMStor存储形成了完美的搭档:

●UCloud在全球有30个数据中心,可以满足用户跨越地理位置的需求;

●UCloud公有云存储的可扩展性和成本效益,可确保资源和成本的最优化;

●UMCloud UMStor统一分布式存储平台有多重保证,实现数据传输和存储的安全;

●UMCloud UMStor统一分布式存储平台有多层的数据存储方案,可以优化成本;

●UMCloud UMStor统一分布式存储平台有多重容灾机制,可以保障业务连续性,平滑的实现故障转移。

四、案例解析

1)30 PB级大规模的数据双活

某大型国营企业,在北京、广州多地拥有大量的业务应用服务,原先的一些应用使用了统一的NAS存储,并采用两地使用统一存储集群的方式,在非结构化数据爆发性增长后出现了存储性能的瓶颈。

出于多地数据访问实时性和安全性考虑,通过Cloud Sync实现两组主备数据中心的单向数据同步,结合通过元数据同步实现四中心的统一命名空间管理,完成了北京、广州两地的30PB规模的数据双活同步,以对象形式存储和管理海量非结构化数据的存储系统,最终实现了低成本的PB级存储规模,具备高可靠、高安全性和高扩展性的混合云存储。

2)金融行业的日志数据分层存储

某金融行业客户,出于数据安全和合规需求,希望能够将业务系统产生的日志数据进行统一存储管理。在使用UMStor统一分布式存储平台进行了分层处理:

a)30天内的审计日志数据,出于较高安全级别考量,会存放在三副本冗余策略的存储池中;

b)三副本存储池中保存超过30天的数据自动迁移至纠删码存储池中,从而获得了更高的资源利用率;

c)在纠删码存储池中超过1年的历史数据,UMStor统一分布式存储平台提供了独立的外部归档存储。

五、总结

混合云存储是解决数据日益增长的有力武器,UCloud(优刻得)的混合云解决方案能够做到统一资源、统一存储、统一容器的管理,而UMCloud UMStor统一分布式存储平台更是将用户混合云存储场景需求归纳总结输出了Cloud Sync、Cloud Archive和Cloud Import三个产品,可以说从用户中来,服务于用户,在混合云存储解决方案中独树一帜,做到数据无边界,真正奔着解决混合云统一存储管理问题而去!

免责声明:凡注明为其它来源的信息均转自其它平台,由网友自主投稿和发布、编辑整理上传,对此类作品本站仅提供交流平台,不为其版权负责。本网站对有关资料所引致的错误、不确或遗漏,概不负任何法律责任。如果您发现网站上有侵犯您的知识产权的作品,请与我们取得联系,我们会及时修改或删除。联系邮箱:leixiao@infoobs.com