关于云存储系统的六大技术分析

2017-04-27 20:15:01编辑:鲁迪 关键字:云存储

随着监控领域的飞速发展,新技术的诞生也是接踵而至,云存储是人们最为乐道的高新技术产品。它具有如下几大主要的技术。

云存储系统具有如下特点:数据安全,超强的可扩展性,按照使用收费,可跨不同应用,自动切换故障,易于管理等。云存储主要应用于备份、归档、分配和共享协作等四大领域。

云存储是在云计算概念上延伸和发展出来的一个新概念,是指通过集群应用、网格技术或分布式文件系统等功能,将网络中大量各种不同类型的存储设备通过应用软件集合起来协同工作,共同对外提供数据存储和业务访问功能的一个系统。当云计算系统运算和处理的核心是大量数据的存储和管理时,云计算系统中就需要配置大量的存储设备,那么云计算系统就转变成为一个云存储系统,所以云存储是一个以数据存储和管理为核心的云计算系统。

与云计算系统相比,云存储可以认为是配置了大容量存储空间的一个云计算系统。云存储系统具有如下特点:数据安全,超强的可扩展性,按照使用收费,可跨不同应用,自动切换故障,易于管理等。云存储主要应用于备份、归档、分配和共享协作等四大领域。

云存储系统是一个多设备、多应用、多服务协同工作的集合体,它的实现要以多种技术的发展为前提。根据云存储的特点及其应用领域,主要的云存储技术涉及到存储虚拟化,分布式文件系统,集群存储,存储集中管理,异质平台协同,自动分级存储等方面,当然还有重复数据删除、数据压缩等技术。

存储虚拟化

存储虚拟化(StorageVirtualization)最通俗的理解就是对存储硬件资源进行抽象化表现。通过将一个(或多个)目标服务或功能与其它附加的功能集成,统一提供有用的全面功能服务。典型的虚拟化包括如下一些情况:屏蔽系统的复杂性,增加或集成新的功能,仿真、整合或分解现有的服务功能等。虚拟化是作用在一个或者多个实体上的,而这些实体则是用来提供存储资源或服务的。

存储虚拟化是一种贯穿于整个IT环境、用于简化本来可能会相对复杂的底层基础架构的技术。存储虚拟化的思想是将资源的逻辑映像与物理存储分开,从而为系统和管理员提供一幅简化、无缝的资源虚拟视图。

对于用户来说,虚拟化的存储资源就像是一个巨大的“存储池”,用户不会看到具体的磁盘、磁带,也不必关心自己的数据经过哪一条路径通往哪一个具体的存储设备。

分布式文件系统

Hadoop分布式文件系统(HDFS)是一个设计为用在普通硬件设备上的分布式文件系统。它与现有的分布式文件系统有很多近似的地方,但又和这些文件系统有很明显的不同。HDFS是高容错的,设计为部署在廉价硬件上的。HDFS对应用程序的数据提供高吞吐量,而且适用于那些大数据集应用程序。HDFS开放了一些POSIX的必须接口,容许流式访问文件系统的数据。

HDFS是主/从结构的。一个集群有一个名字结点,也就是主控制服务器,负责管理文件系统的名字空间并协调客户对文件的访问。还有一堆数据结点,一般一个物理结点上部署一个,负责它们所在的物理结点上的存储管理。HDFS开放文件系统的名字空间以便让用户数据存储在文件中。内部,一个文件被分割为一个或者多个数据块,这些数据块存储在一组数据结点中。名字结点执行文件系统的名字空间操作,比如打开、关闭、重命名文件或目录,还决定数据块从数据结点的映射。数据结点负责提供客户的读写请求。数据结点还依照名字结点的指令执行数据块的创建、删除和复制工作。

集群存储

集群存储是将多台存储设备中的存储空间聚合成一个能够给应用服务器提供统一访问接口和管理界面的存储池,应用可以通过该访问接口透明地访问和利用所有存储设备上的磁盘,可以充分发挥存储设备的性能和磁盘利用率。数据将会按照一定的规则从多台存储设备上存储和读取,以获得更高的并发访问性能。

集群存储的优势主要体现在提高并行或分区I/O的整体性能,特别是工作流、读密集型以及大型文件的访问,通过采用更低成本的服务器来降低整体成本。集群存储有两种实现方式:一种是硬件基础架构加上软件;另一种是专用集群存储,是构建在NAS基础架构之上的,但是通过操作系统实现集群存储。

存储集中管理

云存储管理平台要求支持跨数据中心的部署和管理,并支持跨数据中心的用户访问调度、数据迁移、数据异地存储备份等功能。

支持集中管理,云存储管理平台部署在云计算的中心机房,存储节点可以部署在各地的机房中,管理平台对各分点机房的存储设备可以统一管理调度。

通过云存储管理平台,用户可以方便的了解云存储系统的各个节点的服务情况,包括各节点的容量和性能(读IOPS、写IOPS、读流量、写流量)等信息,让用户实时了解域内资源信息,运行状态,从而可以操控这些资源;同时及时了解资源的异常,有必要时可以采取适当的措施保证其正常运行。

异质平台协同

当前各种存储方案与技术十分繁杂而多样,光从一家企业内部可能同时存在各种不同类型存储装置的状况便知一二,更何况不同存储设备供货商间的存储环境一直存在兼容性问题,所以喊了多年的存储整合,仍旧难以如企业需求所愿,这也是存储虚拟化与云存储推展上的最大阻力。

虽然存储云端在某方面很容易跨入(例如在线存储与备份),但另一方面想要透过私有云存储来达成全面性之存储整合,似乎不是那么容易的事情。对此,想要成功完成存储虚拟化目标必须改善企业既有IT存储环境,其改善重点不外共通分享的存储架构、亲和的使用环境、简洁单一的操作界面,以及效能卓著的存储方案等。其中,不论是单一操作接口或统一标准的API,更是解决不同存储装置间协同问题的关键之一。

CDMI是云存储全新标准接口,由国际存储网络产业协会SNIA制定。对于云运算来说,CDMI提供了通用云运算管理基础架构,同时原本信息管理的重点已逐渐从存储管理转移围绕在数据管理上。CDMI标准则可以协助用户将特殊诠释数据(Metadata)标记在数据上,该诠释数据会告诉端点存储供应商,什么样的数据服务提供该数据(例如备份、归档、加密等)。透过CDMI标准接口的执行,用户可在不同云端供应商间任意移动数据,不再需要忍受不同接口中重新编码的痛苦。

自动分级存储

提高存储管理效率已经成为许多企业首要解决问题,自动分级存储成为最有效的基础技术,它指的是在不同磁盘类型和RAID级别之间迁移数据块的功能,这可满足性能和空间使用之间的适当平衡,快速将数据放到合适的地方并避免所谓的热点。

作为这项技术受到广泛关注,在不同层级的存储介质之间,比如FC磁盘和SATA磁盘之间,移动数据需要实现全自动化的迁移流程。

在分级数据存储结构中,存储设备一般有磁带库、磁盘或磁盘阵列等,而磁盘又可以根据其性能分为FC磁盘、SCSI磁盘、SATA磁盘等多种,而闪存存储介质(非易失随机访问存储器(NVRAM))也因为较高的性能可以作为分级数据存储结构中较高的一级。一般,磁盘或磁盘阵列等成本高、速度快的设备,用来存储经常访问的重要信息,而磁带库等成本较低的存储资源用来存放访问频率较低的信息。


关键字:云存储

来源: 安全自动化 引用地址:http://www.eeworld.com.cn/afdz/article_2017042710539.html
本网站转载的所有的文章、图片、音频视频文件等资料的版权归版权所有人所有,本站采用的非本站原创文章及图片等内容无法一一联系确认版权者。如果本网所选内容的文章作者及编辑认为其作品不宜公开自由传播,或不应无偿使用,请及时通过电子邮件或电话通知我们,以迅速采取适当措施,避免给双方造成不必要的经济损失。

上一篇:AI鉴黄是一场 “轻量级”的智能视频分析应用
下一篇:英特尔Movidius已把人工智能纳入视频监控摄像头

关注eeworld公众号 快捷获取更多信息
关注eeworld公众号
快捷获取更多信息
关注eeworld服务号 享受更多官方福利
关注eeworld服务号
享受更多官方福利

推荐阅读

苹果宣布开源FoundationDB,让苹果产品更安全可靠

。 苹果公司在2015年收购了FoundationDB,并可能早已将此数据库用于iCloud云存储服务。在一份CloudKit的使用说明中,苹果工程师提到了对于NoSQL数据库的使用,使得应用开发者们可以以一种通用的且易操作的方式在不同设备间同步用户数据。CloudKit为许多iCloud服务提供数据存储服务,包括iOS备份、照片同步、iWork办公、和iCloud网盘。 开源此数据库意味着该产品现在可以被任何公司或个人免费使用。苹果公司的目标是建立一个围绕此数据库产品的社区,使得FoundationDB成为下一代分布式数据库的基础。开源此数据库也将允许外部开发者为此项目做贡献,间接的使得苹果的产品更安全也更可靠。
发表于 2018-04-22 14:02:26

SaaS、混合云、云存储以及IoT的市场前景分析

过私人连接和灵活的国际网络作为节点。该技术使企业能够利用AWS、Azure和GoogleCloud等云服务提供商,同时减少延迟并提高安全性。 早在2016年,思科就进行了一项调查,预测云服务的全球分布将在2018年获得提升。SaaS即将要增长60%,同时PaaS估计会增长5%、IaaS也预计会显着增加。 考虑到所有这些模式在2017年的卓越表现,思科的预测看来将成为现实。 数据存储的总量将会与实施云技术的企业数量同步增长。为了满足这一需求,更多的在线数据中心将采用能够承担更大存储容量的设备来处理这个问题。回顾思科调查显示,目前总计6亿TB的全球存储容量将在2018年几乎翻倍,达到11亿TB。考虑到这一需求
发表于 2018-01-16 19:56:35
SaaS、混合云、云存储以及IoT的市场前景分析

SaaS、混合云、云存储以及IoT

企业,而BMIT则通过私人连接和灵活的国际网络作为节点。该技术使企业能够利用AWS、Azure和GoogleCloud等云服务提供商,同时减少延迟并提高安全性。  早在2016年,思科就进行了一项调查,预测云服务的全球分布将在2018年获得提升。SaaS即将要增长60%,同时PaaS估计会增长5%、IaaS也预计会显着增加。  考虑到所有这些模式在2017年的卓越表现,思科的预测看来将成为现实。  数据存储的总量将会与实施云技术的企业数量同步增长。为了满足这一需求,更多的在线数据中心将采用能够承担更大存储容量的设备来处理这个问题。回顾思科调查显示,目前总计6亿TB的全球存储容量将在2018年几乎翻倍,达到11亿TB。考虑到这一需求
发表于 2018-01-16 17:54:30

云存储导致的重大安全问题 谁需要对云计算安全负责

随着科技的发展和进步,数据的安全成为最重要的关注点。近日卡巴斯基实验室出示了一份新报告,报告显示42%的云采用企业缺乏对数据存储位置的清晰认识,这使得网络安全问题显得更为突出和紧迫。日前,国际信息安全软件提供商卡巴斯基实验室表示,将近一半的使用云计算的企业不知道他们的数据是在本地部署的数据中心还是在云端存储和处理,这使得网络安全问题显得更为突出和紧迫。42%的云采用企业缺乏对数据存储位置的清晰认识,这就意味着他们不知道数据是否安全。近一半的企业和中小企业遭遇过第三方云主机的数据盗用,大多数人并没有意识到这些提供商并不会对数据盗窃负责卡巴斯基实验室的一份新报告呼吁人们关注一个日益严重的问题,称之为“cloudzoo”:企业根本
发表于 2018-01-06 20:23:29

巨头积极“向云看齐”,存储市场仍是主题

云计算已经深入了我们的生活中,各大企业也是不谋而合的向“向云看齐”,如今,在云计算进入下半场已经成为业界共识,据市场统计可知,存储市场人就会是焦点。云计算作为互联网社会不可或缺的基础设施,成为未来五年最为确定的市场机会。随着万物互联时代的加速到来,云的价值还有待继续挖掘。越来越多的企业将更多数据迁移到云中,而存储仍然是目前的主流焦点。日前,微软、亚马逊、谷歌等国外科技巨头在同一天发布三季度财报。亚马逊云业务AWS第三季度运营利润11.71亿美元,高于去年同期的8.61亿美元;净销售额为45.84亿美元,同比增速为42%,净销售额为45.84亿美元。另一方面,微软的2018财年第一财季财报显示,微软智能云业务营收为69.2
发表于 2017-11-19 18:12:42

安防行业中云存储的运用与发展

随着政府以及企业的积极推动,我国云计算产业生态链的构建正在加速,吸引了大量资金和资源投入,一大批云计算中心和云计算项目如雨后春笋般涌现,仿佛一切都已笼罩在云的世界。一、云存储在安防行业的发展与变革近年来随着云存储技术的发展,以及产品方案的不断推陈出新,云存储应用在安防行业早已不再是新鲜话题。云存储技术的应用促使了原有DVR/NVR靠近前端的就近、分散存储模式向视频数据中心集中存储模式的转变。大量视频数据集中存储促进了视频数据中心建设的蓬勃发展,因此在大型安防监控项目中可以看到,越来越多的区、县、市视频数据中心建设被提上议题。云存储、云计算、大数据也被越来越多的安防监控建设者所关注。于此同时,随着数据的高度聚集,降低了视频数据分析时
发表于 2017-11-07 19:36:58
安防行业中云存储的运用与发展

小广播

About Us 关于我们 客户服务 联系方式 器件索引 网站地图 最新更新 手机版

站点相关: 视频监控 智能卡 防盗报警 智能管理 处理器 传感器 其他技术 综合资讯 安防论坛

北京市海淀区知春路23号集成电路设计园量子银座1305 电话:(010)82350740 邮编:100191

电子工程世界版权所有 京ICP证060456号 京ICP备10001474号 电信业务审批[2006]字第258号函 京公海网安备110108001534 Copyright © 2005-2018 EEWORLD.com.cn, Inc. All rights reserved