1. 存储设备主要有哪几种
硬盘:
硬盘是用来存储数据的仓库。看到“硬盘”这个名字,有的同学可能会问,硬盘外面看起明明是个盒子为什么叫个“盘”呢?这是因为传统的机械硬盘(HDD)盒子般的外表下藏着一张(或者几张)盘子的“心”。我们存在电脑上的数据都在这些盘子里,这些盘子的学名叫“磁盘”。磁盘上方有一个名叫“磁头”的部件,当电脑从磁盘上存读数据的时候,“磁头”就会与“磁盘”摩擦摩擦,魔鬼般的步伐…当然不是真的“摩擦”,它们之间是通过“心灵(电磁)感应”实现交流的。传统的机械硬盘容量已经从G时代步入了T时代,它的量价比(存储容量/价格)是最大的(嗯,给日本大姐姐们安家很合适)。
固态硬盘(SSD)是近几年渐渐被普及的新产品,相比HDD来说,固态硬盘的这个“盘”字就有点名不副实了。SSD用闪存替代了HDD的“磁盘”来作为存储介质,直接通过电流来写入、读取数据,摒弃了HDD中的机械操作过程,并且SSD的读和写可以将一个完整数据拆成多份,在主控的控制下并行操作,这样就大大提高了读写的吞吐量。一般来说固态硬盘的随机存取速度(读取大量小文件)比HDD快几十倍甚至上百倍,持续存取速度(一次读取一个大文件)也比HDD快一倍以上。不过相对HDD来说,SSD还是硬盘界的高富帅,相同容量的SSD的售价可以买十几块同容量的HDD。
U盘、SD卡、MiniSD卡和各种卡:
这几类产品都是用闪存作为存储介质的常用存储设备,不过相比SSD而言,存储容量较小(人家身材好嘛),也没有复杂的主控电路实现数据的并行写入,所以存取速度上比SSD慢不少。 U盘的英文名是“USB flash disk”,名字中有个“USB”,顾名思义,这种“盘”经常与电脑上的USB接口插来插去,一般用来做数据中转站。
2. 请教:基于块存储和基于文件系统的存储
Ceph布式存储系统支持象文件快接口设计目标:
? 所组件横向扩展
? 没单点故障
? 普通厂商硬件使用
? 所机制都能自我管理
? 源
布式存储应用场景相于其存储接口现流行三种:
象存储: 通意义键值存储其接口简单GET,PUTDEL其扩展七牛、拍SwiftS3等
2.块存储: 种接口通QEMUDriver或者KernelMole式存种接口需要实现LinuxBlock Device接口或者QEMU提供Block Driver接口SheepdogAWSEBS青云云硬盘阿云盘古系统CephRDB(RDBCeph面向块存储接口)
3、文件存储: 通意义支持POSIX接口跟传统文件系统Ext4类型区别于布式存储提供并行化能力CephCephFS(CephFSCeph面向文件存储接口)候GFSHDFS种非POSIX接口类文件存储接口归入类
提存储种类提另外题:存储能做统化必须要同软件栈管理同存储设备:SSDSATA等
Ceph提同观点RADOS提供基础存储设备管理、数据控制流访问管理提供靠持久数据存储平台基于其我实现同接口户实现面向同需求接比象存储我单独库实现满足同存储需要比我块存储通RDP实现
统存储并意味着所存储都同接口同实现同软件栈其实使用同设备管理命周期数据访问效控制提供相合理非适合运维利于本利于软件靠性控制机制保证我存储靠
举例部存储厂商甚至网络厂商都自核软件栈文件系内核基于其演化各种同产品线厂商要追求各产品线极致应该每产品完全独立追求极致事实核底层技术栈需要高质量代码、完备测试期使用Ceph布式系统并发IO、布式恢复、数据端端校验等等关键实现唯实现熟系统系统些实现需要经定量级间考验才Ceph所谓统存储其接口堆叠式发
【Ceph其源布式存储、其商用存储区别处哪】
众所周知传统厂商立、富士通等存储厂采用Ceph作存储硬件载体Ceph能提供企业级存储服务定优势才能让传统存储厂商弃采用源存储案
1、化系统我认数据控制系统面做较迁移运维面提供较实现却元数据瓶颈访问数据需要经元数据服务器查询再寻找相应数据服务器规模扩展遇性能瓶颈问题
2、全布式系统虽提供较数据访问能力能高效处理客户端LO请求却没提供非数据控制实现比故障处理能力足数据恢复困难跳化元数据存储系统没办做强致性数据恢复
弹性数据布策略物理拓扑输入实现高用性高持久性Ceph高性能重构体现利用CRush算数进行约束避免数据布所集群节点利用Ceph设计并提供由CRush算支持高自由化存储集群设计实现高靠性高持久性高性能
3. 什么样的存储设备决定怎样的未来
但是设备模式不会按照人们的主观想法来改变,它只会按照企业的结构模式来改变。 我想通过这篇文章谈谈你应该了解的一些设备及其差异,好让大家未雨绸缪。如果你的IT架构像壁炉管道,没有对存储,虚拟化和运算进行分区,那么就需要在未来几年迅速对此环境做出改变。另外,你可能正在找新工作,因为一些供应商们正通过外包,IT合同或转交给云供应商的方式将你的环境变得更为新潮。 我的观点是,你需要好好计划,充分准备。我们先说说你需要熟悉的几种设备。 Hadoop 设备 这类设备可分为三种: 1.标准Hadoop 2.共享型文件系统Hadoop 3.快速存储Hadoop 标准Hadoop 如果是一个标准设备,你可以为Hadoop购买预加载和配置好的节点以及优化过的硬件。 你可以从很多供应商那里购买这类软硬件。某些情况下,你还可以只是为集群购买软件,而在其他情况下,则是从软硬件优化的厂商那里购买。不论何种方式,这都是具备三方复制,带有预配置软硬件的标准Hadoop。共享型文件系统Hadoop 共享型文件系统设备通常具备Lustre或GPFS文件系统,它们可以优化Hadoop的清洗阶段(Shuffle Phase)。此法之所以奏效是因为可从全球的节点读取数据,而不是一定要跨网络读取或分布。所有的节点都依附于共享型文件系统,可从存储的地方直接读取数据,无需从服务器进入网络,再返回服务器到存储。 用这种方法处理某些问题,比标准的Hadoop配置方法快速。此外,还保障了RAID的可靠性和故障转移。供应商们的可靠性案例显示,如果是RAID,就不需要三方复制。 快速存储设备 当然,答案取决于数据的数量和类型,有多少数据输入以及正在执行几项查询。搞清楚这些问题有利于你的选择。 大型文件系统设备 目前,有两个不同的大型共享型文件系统被用于大型存储设备--GPFS和Lustre。很多供应商们都在生产这些设备。Lustre是一项开源项目,而GPFS则由IBM出品。 问题是,从很大程度上说,这两个文件系统都是按照大型数据块的需求和用户的连续I/O设计的。这并不是说不能对软硬件进行配置,使其支持更小的数据块。我并不是说小型数据块的性能比NAS机箱要好,但或许你想搞清楚这些问题,以显示你的共享文件系统有多神奇。 1.从以下方面了解你的工作负载: 2.向供应商询问端到端的可靠性。 3. 询问供应商关于RAID重建的事情。 其他设备现在市场上有很多数据分析产品和数据库产品,可能其中有些能满足你企业的需求。这些新设备或许能以某种方式将信息关联起来,或是使用图谱分析寻找关系。 这类事情都是一致的:如果你无法在本地更快速更经济地完成,就得把任务外包到云中。我们的工作岌岌可危 如果CIO和公司员工不遵循计划,那总会有人遵循。那个时候,就会有人取代你。 我在日本测试一款新设计的文件系统时,我最好的朋友就告诉我“我们要吃寿司,不然我们就会变成寿司”。意思是你要么随着这股潮流改变,要么等着被拍死在沙滩上。 市场上推陈出新,我们就要与时俱进。管理也应该纳入这一进程,这样才能实现高效。 否则,就等着把工作外包到云中或是给其他企业把。现在有很多新技术可以解决新问题和旧问题。我们要熟悉这些技术才能生存下去。 我想,很多我们现在看到的存储技术都将成为专用设备。虽然目前90%的数据访问都是通过POSIX系统接口,另外10%则通过对象接口,但是在未来十年,这种情况会发生改变。 要做好准备,还记得那时候的我们从专属大型处理器过渡到DEC,MIPS,英特尔等厂商生产的微处理器吗?这次将和上世纪90年代微处理器带来的改变类似。
4. 存储虚拟化应该怎么设计
谈到虚拟化,这题目可就大了。最初大家认识虚拟化,是从服务器端地应用兴起地。而发展至今,当前端服务器虚拟化应用已成为常态时,后端存储架构地虚拟化转型,便顺理成章地被提上了议事日程。
实施存储虚拟化地功能,主要依靠如下几个技术:
拓展(Scale-out)----实施存储容量和性能地同步线性增长!
在传统地非虚拟化存储架构中,存储拓展是通过“替代”完成地。当一个存储系统地性能和容量达到上限时,用户必须购置一个新系统以取代旧地系统。这样做往往导致旧系统直接被废弃。并且用户要在前期投入较大地浪费性前期投资。当然也能够通过连接更多地拓展柜在一定程度上解决容量地问题,但前端地性能瓶颈将会成为制约容量拓展地一大问题。
而Scale-out架构为用户提供了一种独特地、动态地虚拟化机制,它允许用户在需要时随时动态地拓展容量与性能,从而在保证大规模提高容量利用率和采用效率地同时,很好地解决了容量与性能地同步线性提升。
自动精简配置(Thin provision)--提供虚拟存储空间,提升磁盘利用率!
自动精简配置是一种为当前应用地即时写入数据分配空闲空间地技术。它可为应用服务提供大量地虚拟容量,从而有助于用户更加有效地利用存储容量,延后扩容时间。大家都知道相同容量级别地硬盘和IT设备地价格是依照时间推进而大幅下降地,而延后扩容时间就意味着用户能够大大延后购置扩容存储设备地时间,从而大幅度地减少用户存储地前期部建成本,在后续扩容中也可实施最经济化地实施。
分布式负载均衡(load Balance)--性能利用最大化!
分布式负载均衡技术是一种根据通道繁忙程度,自动选择数据块地传输途径,从而避免单一通道超负荷运载而成为性能瓶颈地技术。举个例子:当主机端向存储池发出一个写请求地时候,其组成数据块将以一种平衡地方式分派给各成员存储系统去完成。
作为专业地存储系统生产商,Infortrendf推出地ESVA系列虚拟化架构存储系统将上述技术进行了良好地融合,并配合多种不同主机接口和容量地设备选型,全面满足用户不同地应用环境要求。Infortrend地虚拟化存储方案,能够真正地解决您地Storage Virtualization之“需”!
5. 存储的架构有哪些
目前市场上的存储架构如下:
(1)基于嵌入式架构的存储系统
节点NVR架构主要面向小型高清监控系统,高清前端数量一般在几十路以内。系统建设中没有大型的存储监控中心机房,存储容量相对较小,用户体验度、系统功能集成度要求较高。在市场应用层面,超市、店铺、小型企业、政法行业中基本管理单元等应用较为广泛。
(2)基于X86架构的存储系统
平台SAN架构主要面向中大型高清监控系统,前端路数成百上千甚至上万。一般多采用IPSAN或FCSAN搭建高清视频存储系统。作为监控平台的重要组成部分,前端监控数据通过录像存储管理模块存储到SAN中。
此种架构接入高清前端路数相对节点NVR有了较高提升,具备快捷便利的可扩展性,技术成熟。对于IPSAN而言,虽然在ISCSI环节数据并发读写传输速率有所消耗,但其凭借扩展性良好、硬件平台通用、海量数据可充分共享等优点,仍然得到很多客户的青睐。FCSAN在行业用户、封闭存储系统中应用较多,比如县级或地级市高清监控项目,大数据量的并发读写对千兆网络交换提出了较大的挑战,但应用FCSAN构建相对独立的存储子系统,可以有效解决上述问题。
(3)基于云技术的存储方案
当前,安防行业可谓“云”山“物”罩。随着视频监控的高清化和网络化,存储和管理的视频数据量已有海量之势,云存储技术是突破IP高清监控存储瓶颈的重要手段。云存储作为一种服务,在未来安防监控行业有着客观的应用前景。
与传统存储设备不同,云存储不仅是一个硬件,而是一个由网络设备、存储设备、服务器、软件、接入网络、用户访问接口以及客户端程序等多个部分构成的复杂系统。该系统以存储设备为核心,通过应用层软件对外提供数据存储和业务服务。