① 集中式存储和分布式存储有什么区别
区别:
1、物理介质分布不同。
集中存储:物理介质集中布放。
分布存储:物理介质分布到不同的地理位置。
2、视频流上传不同:
集中存储:视频流上传到中心。
分布存储:视频流就近上传,对骨干网带宽没有什么要求;可采用多套低端的小容量的存储设备分布部署,设备价格和维护成本较低;小容量设备分布部署,对机房环境要求低。
3、对机房有要求不同:
集中存储:对机房环境要求高,要求机房空间大,承重、空调等都是需要考虑的问题。
分布存储:对骨干网带宽没有什么要求,可采用多套低端的小容量的存储设备分布部署,设备价格和维护成本较低;。小容量设备分布部署,对机房环境要求低。
(1)集中存储方式物理集中扩展阅读:
集中存储:
指建立一个庞大的数据库,把各种信息存入其中,各种功能模块围绕信息库的周围并对信息库进行录入、修改、查询、删除等操作的组织方式。
分布式存储系统:
是将数据分散存储在多台独立的设备上。传统的网络存储系统采用集中的存储服务器存放所有数据,存储服务器成为系统性能的瓶颈,也是可靠性和安全性的焦点,不能满足大规模存储应用的需要。
分布式网络存储系统采用可扩展的系统结构,利用多台存储服务器分担存储负荷,利用位置服务器定位存储信息,它不但提高了系统的可靠性、可用性和存取效率,还易于扩展。
网络-集中存储
网络-分布式存储系统
② 四大存储方式技术解析其优劣势
四大存储方式技术解析其优劣势
数据存放问题非常重要,然而在实际应用中却是错事连连。经常会出现掉盘、卷锁死等诸多问题,严重影响了整体系统的正常使用,所以数据专用存储已经成为市场上最关注的安防产品之一。
数据传统存储方式
在目前的数字领域中,最常用的无非是如下四种存储方式:硬盘、DAS、nas、san。
1. 硬盘
无论是dvr、dvs后挂硬盘还是服务器后面直接连接扩展柜的方式,都是采用硬盘进行存储方式。应该说采用硬盘方式进行的存储,并不能算作严格意义上的存储系统。其原因有以下几点:
第一,其一般不具备raid系统,对于硬盘上的数据没有进行冗余保护,即使有也是通过主机端的raid卡或者软raid实现。严重的影响整体性能;
第二,其扩展能力极为有限,当录像时间超过60天时,往往不能满足录像时间的存储需求;
第三,无法实现数据集中存储,后期维护成本较高,特别是在dvs后挂硬盘的方式,其维护成本往往在一年之内就超过了购置成本。
应该说硬盘存储方式不适合大型数字视频监控系统的应用。特别是需要长时间录像的数字视频监控系统。一般这种方式都是与其它存储方式并存于同一系统中,作为其他存储方式的缓冲或应急替代。
2. DAS(直接附加存储)
DAS(direct attached storage),全称为直接连接附加存储,采用DAS的方式可以很简单的实现平台的容量扩容,同时对数据可以提供多种rald级别的保护。
采用DAS方式时。在视频存储单元上部署相关的.hba卡。用于跟后端的存储设备建立数据通道。前端的视频存储单元可以是dvr,也可以是视频存储服务器。其通道可以采用光纤、ip网线、sas线缆甚至于usb、1394线等。
采用DAS方式并不能同时支持很多视频存储服务单元同时接入,而且其扩容能力严重依赖所选择的存储设备自身的扩容能力。所以在大型数字视频监控系统中,应用DAS存储方式将造成系统维护难度的极大提升。
正是由于DAS存储的这些特点,所以这种存储方式一般应用于对于dvr的扩容或者小型数字视频监控项目中。
3. NAS(网络附加存储)
NAS(network attached storage)。全称为网络附加存储,是一种专业的网络文件存储及文件备份设备,或称为网络直联存储设备、网络磁盘阵列。同时NAS对数据可以提供多种raid级别的保护。
NAS设备和多台视频存储服务单元均通过ip网络进行连接,按照tcp/ip协议进行通信,以文件的i/o(输入/输出)方式进行数据传输。一个NAS单元包括核心处理器,文件服务管理工具,一个或者多个的硬盘驱动器用于数据的存储。
采用NAS方式可以同时支持多个主机端同时进行读写,具备非常优秀的共享性能和扩展能力;同时NAS可以应用在复杂的网络环境中。部署也非常灵活。
但是由于NAS采用cif/nfs协议进行数据的文件级传输,所以网络开销非常大,特别是在写入数据时带宽的利用率一般只有20%-40%之间。所以目前NAS一般应用于小型的网络数字视频监控系统中或者只是用于部分数据的共享存储。
4. SAN(存储区域网络)
SAN(storage area network),全称为存储区域网络,通过交换机等连接设备将磁盘阵列与相关服务器连接起来的高速专用子网。同时SAN对数据可以提供多种raid级别的保护。
SAN提供了一个专用的、高可靠性的存储网络。允许独立地增加它们的存储容量,也使得管理及集中控制(特别是对于全部存储设备都集中在一起的时候) 更加简化。正是由于这些特点,SAN架构特别适合于大型网络数字视频监控系统的存储应用,可以应对上千、上万个前端监控点的存储。
目前 SAN主要分为FC―SAN(光纤存储区域网络)和ip―SAN(以太网存储区域网络)。它们之间的区别是连接线路以及使用数据传输协议的不同。虽然 FC―SAN由于采用专用协议可以保证传输时更加稳定、高效,但其部署方式、构建成本均较之ip―SAN高出很多,所以目前在大型网络数字视频监控系统中更多采用的是ip―SAN架构。
;③ 集中式存储和分布式存储的区别在哪里如何选择
如今全球数据存储量呈现爆炸式增长,企业及互联网数据以每年50%的速率在增长,据Gartner预测,到2020年,全球数据量将达到35ZB,等于80亿块4TB硬盘。数据结构变化给存储系统带来新的挑战。非结构化数据在存储系统中所占据比例已接近80%。
互联网的发展使得数据创造的主体由企业逐渐转向个人用户,而个人所产生的绝大部分数据均为图片、文档、视频等非结构化数据;企业办公流程更多通过网络实现,表单、票据等都实现了以非结构化为主的数字化存档;同时,基于数据库应用的结构化数据仍然在企业中占据重要地位,存储大量的核心信息。
数据业务的急剧增加,传统单一的SAN存储或NAS存储方式已经不适应业务发展需要。SAN存储:成本高,不适合PB级大规模存储系统。数据共享性不好,无法支持多用户文件共享。NAS存储:共享网络带宽,并发性能差。随系统扩展,性能会进一步下降。因此,集中式存储再次活跃。
那么集中式存储和分布式存储的有缺点分别有哪些呢?在面对二者时我们该如何选择呢?下面我将为大家介绍和分析集中式存储和分布式存储的不同之处以及在应用中我们应做的选择。
分布式和集中式存储的选择
集中存储的优缺点是,物理介质集中布放;视频流上传到中心对机房环境要求高,要求机房空间大,承重、空调等都是需要考虑的问题。
分布存储,集中管理的优缺点是,物理介质分布到不同的地理位置;视频流就近上传,对骨干网带宽没有什么要求;可采用多套低端的小容量的存储设备分布部署,设备价格和维护成本较低;小容量设备分布部署,对机房环境要求低。
④ 什么是银行的数据大集中,为什么要数据大集中呢
简单地讲,大集中就是将分布在各个分支机构和营业网点的业务数据及其他一些相关的数据实现集中。事实上,大集中是依靠科技手段,实现数据的集中和数据的整合,并通过对数据深层次的挖掘,对银行的客户数据、业务数据进行系统分析和评价,推动商业银行向决策科学化方向迈进,提高银行的管理水平和工作效率。
60年代,自IBM发明了第一台商业计算机系统后,IT开始从无到有,以一种置于玻璃房的主机挂终端的形式起步发展。从80年末期到90年代初期,由于较低的附加开销、较低的劳工费用,使整个工业界的趋势走向分布式及部门式管理。为了加快对市场的响应时间,对IT应用系统开发的速度提出了更快的要求,因此IT的体系结构从原来单一集中式模式,走向分布式模式。并且逐步演变成难以控制的分散式架构。经过几年实践证明,在这种分散式模式下,带来许多负面效果:
1)降低了IT的效率
*分散的数据
*分散的技术力量
*机器,软件系统资源不可共享
*管理水平的不平衡
2)支持及管理人员的增加
*艰难的整体规划
*艰难的整体管理
3)缺乏标准化
4)增加数据安全性、完整性的风险
5)软件需要分散的重复投资,软件及维护费用急剧上升
6)计算机硬件资源利用率低,众多的计算中心均需自备备份主机及相应设备,无法公用机器的“白色空间”(及空置的CPU资源)
7)更困难的财政及固定资产管理
8)企业内部无法形成数据集中及应用集中,因此无法快速有效地为企业整体的经营管理者提供管理辅助信息。
9)无法承受灾难备份的投资,在众多的分散中心的条件下,实施相互灾难备份的费用非常庞大,其管理及运作是及其艰难的。
面对这些挑战,IT的管理者自然要问:
*怎样更好地支持、管理网络、软件及服务器?
*怎样更好地控制投资回报?
*怎样有效快速地分析业务数据?
*怎样集成分布式应用及数据?
*怎样将传统的应用面向电子商务的同时,又能保证关键应用的高可用性及安全性?
大集中就是在这种背景下产生的。总结国外IT业的集中方式,无非可以分为以下四种形式的集中:
1)管理运作的集中:即将分散式的IT体系结构,用集中式管理模式进行运作。
2)物理集中:即不改变任何应用体系结构,仅仅将运作在多个服务器上的应用集中在一台或多台集群式系统内,从而减少了服务器的数量及种类,可共享系统资源,但客户数据可能依然是分散的。
3)数据集中:可以使用存储技术,实施数据的集中存储及管理;或通过一定的共享软件机制,实施数据的集中共享。
4)应用的集中:真正可以做到与业务集中相匹配的应用集中,及客户关键业务信息的数据集中。
不同程度的集中,会产生不同的效果,投入及工程的复杂程度也不尽相同。在大集中项目中要考虑许多技术因素,但最最关键的是高层领导的重视及支持,及业务部门的介入。
大集中可能会引进对当前IT体系结构的重组(reengineering),因此需从以下几个方面考量其系统的设计:
首先集中决不是单纯IT的技术问题,为IT集中而集中是无效之举。集中必源于业务的改革,必带来业务流程的改变。其最终目的是提高企业整体的运作及管理效率并带来最大利润。
次之,集中必带来对应用体系结构的重新评估,可能带来应用的调整甚至结构重组。
在设计大中心系统时,要有端到端的全局体系结构设计观念。即从客户端经由底层网络到前端机,经由骨干网络到大中心服务器,其整体结构要具有端到端的高可用性及可管理性。
大中心的整体设计考量因素为以下几个方面:
1)应用的考量:
在多层次的系统架构中,各类应用在何层服务器上运行,应用的功能如何分布。要不断评估何种应用要进行集中,何种应用具有地区的特性,需要分布式运作。
2)企业核心信息数据库的考量:
核心企业信息如何存放。只有形成了一个逻辑的统一的企业信息数据库,才可以充分享受到集中的优势。
3)整体系统性能考量:
由于集中将所有的核心业务运行在一个集中的系统上,客户的服务业务量呈爆炸式增长,虽着电子商务的发展,BTB、BTC系统的建立,将每天都需要面对大量来自外界的数据访问和交互式操作,所有这些需要大中心系统具有持续且稳定的响应性能。
4)系统的可扩展性的考量:
大中心系统必须具有很好的可扩展性及成长的能力。中国是一个人口众多的国家,因此大型企业的客户数量是惊人的。中国许多大型企业所服务的客户数大于任何一个北美或欧洲的大型企业。以银行为例,中国四大商业银行的客户帐号数均达上亿,因此其企业客户核心信息数据量将达到几十个GB甚至为几十个TB的数据量。因此数据库、中间件、服务器及存储系统均需要具有优秀的可扩展性。除了应付爆发式的数据存储需求,基础设施还需要应付短时间内访问高峰的冲击,并提供足够的灵活性对信息有效的管理。
5)高可靠性及高可恢复性的考量:
企业需要考虑为客户提供每周7天、每天24小时的不间断服务。同时,基础设施必须为以不同方式接入的用户提供同样的易用性,以及在异构系统之间进行快速的信息查找和交换的应用灵活性,并保持系统能够以很快的速度得到扩展。
6)冗灾备份及恢复能力考量:
灾难备份方案绝不是一个单纯的技术方案,并且灾难备份也决不是一个数据远程拷贝的方案。它必须基于应用的考量,并外加业务备份规划。从技术角度考虑,级别越高则备份的能力越高。方案的选择必须立足于业务的需求,级别越高的备份方案,其项目实施总成本则越高,因此必须基于商务的承受能力进行方案的选择。
7)端到端的系统管理:
集中后的系统管理将比分布式小中心的运作显得尤其重要。在小型中心中,通常靠个体的手工管理,当实施大集中后,手工的、无系统化的管理将无法提供所需要的服务水准。因此必须建立可以集中观测、集中管理的系统,但同时又可以分级进行控制、维护的体系结构。由于应用的集中运作,因此建立帮助平台及严格的变更管理体系尤为重要。
8)系统安全性考量:
企业需要保证系统和数据的安全性。需要考虑安全性的不仅是系统设备,还有设备提供商的实际能力。企业需要选择可信赖的合作伙伴和供应商,在基础设施系统的管理能力和数据安全方面都要有出色表现。安全可靠的系统不仅能保证前端与后端的系统安全,还需要确保服务器与应用程序的防攻击能力。
9)投资保护及降低业务风险:
大集中体系结构是在现有的IT体系结构之上进行再造的过程。体系结构方案必须考虑对现有的IT技术、设备的投资加以保护。甚至包括对应用投资及技术人员投资的保护。在设计和构建基础设施的过程中,大中心方案不仅仅要着眼于当前的需求,更要放眼于未来的业务发展需求,本着节约成本、保护投资的原则,优化、整合和利用旧系统的资源,使大中心体系结构具有前瞻性。
大集中项目是一个逐步演变的过程,我们不可能在一日之间废弃旧的体系结构,建立新的体系结构。在建设过程中需要保证与原有系统的成功整合,保证公司和顾客数据的安全性,降低整体风险。在由多种平台和技术组成的异构环境中,大集中项目必须实现新系统结构与原有系统的平滑转换,这要求有严格的项目规划和项目管理。
10)总体成本考量:
成本效益永远是要考量的因素之一。与分布式环境相比,数据中心集中可以节省总体IT成本。但是要注意的是,在向集中过渡的过程中,必须重视新型应用的投资。所有IT的投资都不应偏离未来集中的大方向,以避免投资浪费。
分布式的信息技术结构是历史的原因造成的,它在当时是最佳的选择,并且也是中国IT发展必经之路。面对未来WTO的挑战,许多企业开始重视规模化经营。为了在竞争中生存并超越对手,IT也必然需要采用高度的集中和可管理的结构。它也是内部业务集中管理的必然要求,大集中不只是一个技术上的项目,除了它的高科技含量外,它是一个强有力的、策略性的业务项目,它是中国银行业发展所面临的一个挑战。
⑤ 集中式存储:HBA卡
物理层面为大家讲解一下以太网网卡,FC-HBA卡(光纤网卡),iSCSi-HBA卡的区别。
存储使用的统一称为HBA卡,它又分为FC-HBA卡跟iSCSI-HBA卡
FC-HBA卡(光纤网卡):全称为Fibre Channel HBA,它传输的是FC协议,这是专门用于存储网络的中的一种协议,通过光纤线缆与FC交换机(光线存储交换机)相连,然后接入到后端存储矩阵中。它的传输速率最大可以达到2Gb/s--4Gb/s.
iSCSI-HBA卡:全称叫做iSCSI HBA卡,它传输的是iSCSI协议,因为iSCSI-HBA卡在传输数据的过程中是将iSCSI协议封装成TCP/IP协议来进行数据传输的,所以iSCSi网卡的接口跟千兆的以太网卡接口相同,都使用双绞线(网线)跟传统的以太网交换机相连,然后接后端接存储矩阵。有时我们也是用iSCSI-HBA卡当做以太网网卡使用让它直接传输以太网的TCP/IP报文。
我们知道SCSI总线上可挂载的设备数量是有限的,一般为8个或者16个,可以用target ID(SCSI ID)来描述这些设备,设备只要加入系统,就会有一个代号,我们在区分设备的时候,只需要说几号即可。而实际上我们需要用来表示的对象,是远远超过该数字的,于是我们引入了LUN的概念,也就是说LUN ID的作用就是扩充了Target ID。每个Target下都可以有多个LUN Device,我们通常简称为LUN.每个SCSI ID上最多有32个LUN,一个LUN对应一个逻辑设备,一个逻辑设备可能是一个分区,也有可能是一个独立的磁盘.
https://blog.csdn.net/weixin_33979363/article/details/92710221
⑥ 分布存储和集中存储有什么本质区别
分布式 存储就是DAS ,就是服务器里面放着硬盘,多台服务器的话就是分布式存储,数据分散,不易于管理。
集中存储就是 NAS,SAN,将服务器和硬盘分开,数据都存放NAS设备中,NAS设备再级联磁盘阵列,然后多个服务器对这个NAS设备进行访问,操作,集中数据管理,提高利用率,解放服务器!