『壹』 雲存儲的核心技術:虛擬化存儲,究竟虛擬是怎樣實現的
虛擬化改變了計算機使用存儲的方式。就像物理機器抽象成虛擬機(VM:Virtual Machine)一樣,物理存儲設備也被抽象成虛擬磁碟(Virtual Disk)。今天我們就來聊聊虛擬化存儲(Storage Virtualization)技術,究竟虛擬磁碟是怎樣實現的?
虛擬磁碟的實現
我們知道,伺服器擴展存儲的手段主要有直連存儲(DAS)、存儲區域網路(SAN)和網路附加存儲(NAS)這三種類型。那麼哪種存儲類型可以用來實現虛擬磁碟呢?
在虛擬化環境中,類似VMWare這樣的虛擬機管理程序hypervisor,要同時給很多VM分配存儲空間。這個過程中,我們需要先把物理存儲資源重新劃分成虛擬磁碟,然後再分配給VM。
顯然我們不能用DAS方式把物理磁碟直連到VM上,如果這樣,需要的物理磁碟就太多了。SAN是以邏輯單元(LUN:Logic Unit)的形式提供存儲資源,但是虛擬環境中VM的數量是很大的,而且倫的數量不足以支持這么多虛擬磁碟。
更重要的是,虛擬磁碟是為大量VM共享的,由於VM需要隨時創建、刪除或遷移,所以需要在遷移VM時共享存儲空間,只有原始數據不會丟失。DAS還是SAN,都不適合共享存儲。
考慮到資源分配以及共享的問題,虛擬機管理程序以NAS的方式實現虛擬磁碟。VMware通常使用VMFS(虛擬機文件系統)或NFS協議實現虛擬磁碟,VMFS文件系統是專門針對虛擬機環境協議。
每一個虛擬機的數據實際上是一堆文件,及最重要的文件的虛擬磁碟文件(VMDK文件),也有交換分區文件(VSWP文件,等價交換),非易失性存儲器(NVRAM的文件相當於BIOS),等等。每個VM對虛擬磁碟的IO操作實際上是對虛擬磁碟文件的讀寫操作。
設計、施工、和虛擬伺服器環境和優化,允許多個虛擬機訪問集成的集群存儲池,從而大大提高了資源的利用率。使用和實現資源共享,管理員可以直接從更高的效率和存儲利用率中獲益。
那麼我們如何在雲計算中使用虛擬磁碟呢?
實例存儲
最主要的一種使用虛擬磁碟的方式就是實例存儲,每個VM都是虛擬機的一個實例,虛擬機管理程序在每個實例中提供一個模擬硬體環境,它包括CPU、內存和磁碟。這樣,虛擬磁碟就是虛擬機實例的一部分,就像物質世界。刪除VM後,虛擬磁碟也將被刪除。
在這個實例存儲模型中,虛擬磁碟與虛擬機之間的存儲關系,事實上,它是DAS存儲。但是虛擬磁碟的底層實現,我們說,它是以NAS的方式實現的。虛擬機管理程序的作用是存儲VM層的存儲模型,這是從實施協議分離(VMFS或NFS)的虛擬機的低層。
VMFS協議實現了存儲資源的虛擬化,再分配各VMs
卷存儲
實例存儲有它的限制,開發人員通常希望分離實例數據,例如OS和安裝的一些伺服器應用程序和用戶數據,這樣重建VM的時候可以保留用戶的數據。
這個需求衍生出另外一種存儲模型:卷存儲。卷是存儲的主要單元,相當於虛擬磁碟分區。它不是虛擬機實例的一部分,它可以被認為是虛擬機的外部存儲設備。
該卷可以從一個VM卸載,然後附加到另一個VM。通過這種方式,我們實現了實例數據與用戶數據的分離。OpenStack的煤渣是一個體積存儲的實現。
除了實例存儲和卷存儲之外,最後我們還提到另一種特殊的虛擬存儲:對象存儲。
對象存儲
很多雲應用需要在不同的VM之間共享數據,它常常需要跨越多個數據中心,而對象存儲可以解決這個問題。在前一篇文章中的雲計算IaaS管理平台的基本功能是什麼?》中曾經提到過對象存儲。
在對象存儲模型中,數據存儲在存儲段(bucket)中,桶也可以被稱為「水桶」,因為它字面意思。我們可以用硬碟來類推,對象像一個文件,而存儲段就像一個文件夾(或目錄)。可以通過統一資源標識符(URI:統一資源標識符)找到對象和存儲段。
對象存儲的核心設計思想實際上是虛擬化,它是文件的物理存儲位置,如卷、目錄、磁碟等,虛擬化是木桶,它將文件虛擬化為對象。對於應用層,簡化了對數據訪問的訪問,屏蔽了底層存儲技術的異構性和復雜性。
對象存儲模型
NAS與對象存儲各有所長
當然你也許會問,NAS存儲技術也是一個可以解決數據共享的問題嗎?由於對象存儲的大小和成本優勢,許多雲環境使用對象存儲而不是NAS。
因為對象存儲將跨多個節點傳播,最新數據並不總是可用的 因此,對象存儲的數據一致性不強。如果有強一致性的要求,然後你可以使用NAS。目前,在雲計算環境中,NAS和對象存儲是共存的。
和NAS一樣,對象存儲也是軟體體系結構,而不是硬體體系結構。應用程序通過REST API直接訪問對象存儲。公共對象存儲包括:Amazon S3和OpenStack的Swift。
結語
在實際的雲平台應用中,我們需要根據自己的實際情況來合理運用不同的虛擬化存儲技術。
對於非結構化的靜態數據文件,如音視頻、圖片等,我們一般使用對象存儲。
對於系統鏡像以及應用程序,我們需要使用雲主機實例存儲或者卷存儲。
對於應用產生的動態數據,我們一般還需要利用雲資料庫來對數據進行管理。
『貳』 華為 fusion cube 存儲虛擬化用的是什麼技術
OpenStack峰會在法國巴黎如期舉行,各界共商雲軟體的未來。OpenStack會執行總監Jonathan Bryce提到「被動的技術應用已經成為歷史,取而代之的是由軟體定義的存儲、網路及數據中心」。這一簡短有力的發言引起了強烈的共鳴和反響。
Jonathan Bryce的主題發言的指出了一個不可否認的事實,即:越來越多的企業使用了按需分配資源的雲系統。軟體帶來了經濟的不斷發展,創新不再是掌握所有權的大型機構的專利了,而真正的創新是來自不同國家的數百家公司成千上萬的人一起合作的成果。
Openstack提供開源軟體的框架,簡化了基於雲系統的管理模式。雖然只有短短四年,但無論是從齊聚巴黎分享優秀實踐的峰會創下與會人數的歷史記錄——4,600開發者及用戶,還是將首個Superuser大獎授予了CERN——World Wide Web的創始者,用3000個伺服器7萬核組成了全球最大的OpenStack集群,這些無一不證明了OpenStack的成功。顯然,企業用戶已經認識到了這一點,並利用OpenStack來實現企業規則的改革。
基於OpenStack的FusionSphere
華為是應用OpenStack架構的公司之一,而且OpenStack已經被深度融合進華為的一系列IT產品。 OpenStack滿足了雲時代這類公司針對日益靈活的IT系統的管理需求。在步入雲計算領域時面對系統日益靈活的管理需求。
華為雲計算產品線營銷總監張建華提到「隨著計算能力、存儲及網路對硬體的依賴性下降,我們正在創建我們自己的軟體來滿足基於軟體定義資源的需求。」
他指出,Openstack雖然可以像膠水一樣將整個系統粘合在一起,但它只是個基礎。華為FusionSphere雲操作系統產品在OpenStack框架的基礎上還增加了不同的安全級別,並且使用戶能充分利用OpenStack提供的互通特性最新的FusionSphere 5.0還允許私有雲用戶連接像亞馬遜這樣的公共雲。
通過使用OpenStack,華為FusionSphere能夠管理來自不同廠家的虛擬伺服器、存儲、網路資源以及虛擬安全與負載均衡等設備。FusionSphere可以兼容作為雲計算基礎的異構虛擬化層,且物理伺服器虛擬化使FusionSphere能夠根據企業當前的需求完成不同的任務。如hypervisor,一個虛擬化多個物理系統的虛擬化層軟體,可以由不同供應商提供,使FusionSphere能夠很好地與已有設備或軟體配合完成相應任務。
軟體定義的基礎設施
和傳統的基於硬體的系統相比,軟體定義的數據中心具有很多優勢。軟體定義數據中心可以分解為軟體定義計算、軟體定義存儲和軟體定義網路。例如,軟體定義網路將網路的管理和只能路由功能抽取到軟體實體中,並且提供API供用戶按照應用的需要對網路進行編程,從而實現業務驅動網路;而實際數據交換功能則交付給專用的數據交換硬體設備,交換設備只專注於數據交換,這樣大大提高了數據交換的效率。軟體定義的數據中心具備很強的系統自愈能力。
那些對上述雲計算的保障機制需求強烈的企業,軟體定義的數據中心無疑具有強烈的吸引力。張建華還提到了電信運營商,「通常,這些公司很依賴硬線技術,但是目前的大量流量都不是通過傳統的電信網路傳輸。運營商需要改變來提供更多的IP服務」。Openstack與FusionSphere提供了像互聯網一樣的架構,從而能夠解決這些問題。他還補充到「運營商需要一個既懂得傳統架構又懂得新模式的合作夥伴才能邁進新紀元。他們還需要開放架構的解決方案,以避免受限於某一單一模式。」
OpenStack實現電信NFV變革
Telefonica意識到華為正是這樣的合作夥伴。因為這個原因,電信巨頭Telefonica決定採用華為FusionSphere集中管理其軟體、硬體以及數據中心。鑒於FusionSphere的統一調度與管理優勢,Telefonica在英國的運營商O2,在部署FusionSphere後的TCO大幅降低了約30%。FusionSphere通過三個方面實現客戶價值:運營維護(O&M)、業務管理、以及業務控制。另外,FusionSphere架構也將支持Telefonica的後續升級。
另外一個電信巨頭,沃達豐,也部署了FusionSphere來管理其基於PLEX系統的數據中心,以便管理不同廠商的資源和未被充分利用的資源,降低操作維護費用。公有雲和私有雲都在以這種模式進行管理,資源按需求動態分配,必要時業務也可以跨雲遷移。
除了電信領域外,OpenStack也為其他領域帶來了好處。匯港資訊有限公司採用華為OpenStack連通了香港經紀人與上海證券交易所。中國的一些政府部門的業務系統也通過部署華為雲產品,體驗到了這種IT架構的優勢,華為的雲產品可以為其消減成本、提高效率。
在OpenStack 峰會最後,華為的雲計算產品線首席技術官,王海鷹,上台分享了華為成為OpenStack會金牌會員的前景。他講到「從長遠看,華為將會繼續促進OpenStack與NFV的融合。我們也希望與所有領域夥伴合作構建一個健康的OpenStack系統」。我們正在進步。OpenStack已經有17,141個個人會員,432個支撐公司,以及兩千萬行代碼,這也證明了企業已經准備好迎接更敏捷的IT方案。這個方案將不僅能夠滿足當前需求,而且能夠靈活地控制未來的方案。華為FusionSphere,FusionCube(軟硬體雲管理一體機)以及其他的雲產品正是這樣一套既適應今天又能管理未來的強大的工具。
評論
請先登錄,再發表評論
敬請讀者發表評論,本站保留刪除與本文無關和不雅評論的權力。
OpenStack開發雲計算
OpenStack目標:解決實施中的瓶頸問題
OpenStack Neutron:雲服務中的開放網路
Salesforce或「登陸」OpenStack
Gartner分析師再次抨擊OpenStack「太嫩」
紅帽:Havana增強OpenStack的開發動力
雲計算疆場烽煙:OpenStack叫板Amazon
OpenStack你了解生態系統的價值嗎?
企業對OpenStack Havana熱情高漲 期待Icehouse
OpenStack是否已為IPv6做好准備?
OpenStack Havana新增雲網路功能
企業部署OpenStack:該做與不該做的事
DIY雲計算:OpenStack當積木
OpenStack私有雲滿足高IO需求
OpenStack互操作駕到:開源雲平台選擇更自由
失敗案例!OpenStack沒你想的那麼簡單!
SUSE OpenStack Cloud 5簡化私有雲管理
如何構建OpenStack存儲雲
企業用戶為何選擇OpenStack
使用OpenStack能開發企業私有雲嗎?
OpenStack在混合雲戰略中位置在哪?
OpenStack雲功能激發廠商支持
雲計算開源運動:廠商爭先公開源代碼
OpenStack私有雲DR的益處比其TCO更顯而易見
OpenStack企業~~進程舉步維艱
EMC收購Cloudscaling對OpenStack應用意義何在?
紅帽1.75億美元收購Inktank
紅帽 9,500萬美元收購eNovance
思科收購Metacloud
惠普1億美元收購Eucalytpus
EMC 5,000萬美元收購Cloudscaling
2014 OpenStack收購案盤點
華為持續重磅投入OpenStack 巴黎峰會全面展示開放雲
誰還敢於挑戰OpenStack的權威?出列!
預測到2018年OpenStack市場規模將達到33億美元
網易OpenStack部署運維實戰
紅帽公司發布 OpenStack Platform 5
開源雲平台:頂級OpenStack廠商一覽
OpenStack為技術宅提供了「拯救世界」的平台
OpenStack之小企業使用技巧
OpenStack現狀:四年後仍「不溫不火」
小型企業如何成功牽手OpenStack?
OpenStack:叫好不叫座
IBM Cloud Manager將OpenStack與伺服器關聯
OpenStack現在可配置NoSQL
雲計算戰爭OpenStack vs VMware:設計與功能
雲操作系統OpenStack:優勢與問題並存
Riverbed加入OpenStack社區:協作開發基於開源標准雲解決方案的優化先鋒
Rackspace將拆分開源雲計算軟體OpenStack
如何使用Puppet安裝OpenStack Nova雲?
Cloud.com將要合並OpenStack代碼庫
如何建立高可用OpenStack雲?
OpenStack里的三種存儲
OpenStack Grizzly發布 推進可擴展性和高可用性
OpenStack最新版本Grizzly新增部分功能一覽
面對雲鎖定的抉擇:OpenStack還是專有雲平台?
四種方案將OpenStack部署到Hadoop
如何成功實施OpenStack和CloudStack項目
Mark Collier:OpenStack API兼容AWS
三載風雨鑄就Openstack今日輝煌
『叄』 華為軟體定義存儲產品是
軟體定義存儲產品是將硬體抽象化的解決方案其核心為存儲虛擬化技術,
通過將存儲資源抽象化、池化和自動化利用服務管理介面的虛擬存儲,虛擬化存儲設備與伺服器間的連接,將數據從底層硬體架構中剝離,
並將標准伺服器內置存儲、直接存儲、外置存儲等存儲資源整合,實現應用感知,基於策略驅動的部署、變更和管理,達到存儲及服務的目標。
『肆』 華為gpu虛擬化解決方案
華為GPU虛擬化解決方案是華為提供的一種用於虛擬化GPU資源的解決方案,旨在解決GPU虛擬化場景中的性能、安全和可管理性等問題。
該解決方案採用華為的軟體定義GPU(SDG)技術,將GPU資源虛擬化,支持靈活部署、高可靠性和高性能。它支持物理機器上的GPU資源池化,允許虛擬機實例從資源池中獲取GPU資源,實現虛擬GPU的調度,從而避免虛擬機間的GPU資源沖突。
此外,華為GPU虛擬化解決方案還支持虛擬機實例對GPU資源的靈活悔族分配,允許實例動態調整GPU配置,實現動態伸縮帆螞,滿足不同負載的GPU資源需求。
此外,華為GPU虛態前埋擬化解決方案能夠提供高級的安全機制,確保虛擬機實例安全地訪問GPU資源;能夠提供管理和監控介面,支持管理員對GPU資源進行統一管理和監控。
『伍』 華為虛擬化fusionphere 有ft功能嗎
隨著VMware前發布VSAN 6.2及EMC聯邦推首台超融合機VxRailVMware再發力超融合架構市場
VMware搭建超融合架構HCI自家用OEM廠家及集商放選擇更加重要VMware創新超融合架構進步豐富並優化軟體定義數據用戶合作夥伴態我疑慮:能讓VMware找咸魚翻身機
VSAN 6.2哪些買點
VMware超融合架構集vSphere虛擬化管理軟體、vCenter Server虛擬化環境管理平台及新版軟體定義存儲VSAN 6.2體本發布看點VSAN 6.2
VSAN 6.2能讓VMware找咸魚翻身機
VSAN 6.2VMware軟體定義存儲VSAN第四代發布具備企業級高性能存儲且原於VMware旗艦產品vSphere向企業用戶提供所要求優質超融合架構及架構內超級簡單統站式管理且數據管理者所期望更視管理能力包括參數使用量監測
VSAN 6.2性能重升級包括新近線重復數據刪除壓縮壓縮至七倍數據量減少CPU內存負擔更加高效利用數據降設備投入本外增加磁碟組級別糾刪碼功能維持高水平數據修復能力變相於增加至兩倍存儲量
自身融合架構低本VMware特別強調優勢並指目前VMware超融合架構基於全快閃記憶體優化系統本低至$1/GB比混合類超融合架構本低近50%比其全快閃記憶體類超融合架構本低60%外數據存儲效率高提高十倍
據各調研數據顯示超融合架構市場目前增快IT市場IDC預測今超融合架構市場達15億美元Gartner說融合架構市場201950億美元IDC全球融合系統廠家評估2014市場先鋒新創公司NutanixSimpliVity等
VMware銷售數據展示自該市場強勁勢VMware指VSAN 銷售非功市21月已經銷往3000 用戶
同Nutanix比較截止2015第四季度VMware超融合架構HCI客戶數量、系統CPU單位部署數量收入增已經超Nutanix全球超融合架構市場龍
要超融合架構
VMware全球高級副總裁兼存儲用性業務總經理李嚴冰指作新型架構超融合基礎設施解決緊迫數據問題降低虛擬化環境存儲本復雜性使客戶能夠獲伺服器虛擬化全部處根本立足點
VMware全球高級副總裁兼存儲用性業務總經理李嚴冰
VMware先河vSphere重構伺服器架構基礎x86計算資源抽象化、虛擬化池化顯著提高計算資源利用率減少物理伺服器數量同極簡化虛擬機運行工作負載初始配置續遷移
超融合架構代數據架構其優勢於擴展模型並跨存儲層受益超融合架構存儲功能合並虛擬機管理程序並使用直連存儲部署商品化價格x86硬體打造集體簡單強存儲虛擬化平台簡化操作降低本提高靈性
融合模式搭建系統其系統設計、集測試都由供應商進行需顧客操理想超融合架構交付式由於需系統集商介入其客戶通非簡捷知流程充獲超融合架構優勢
三種入市路線何機
據解VMware超融合架構採用三種式進入市場
第硬體緒Virtual SAN Ready Nodes模式即由經測試認證硬體按核證解決案搭建超融合架構計劃目前已經存現其擴展伺服器OEM廠商授權預裝軟體綁定所必要許提供自服務支持
客戶需求伺服器OEM廠商必須同模式進行部署VMware提供超100種緒Virtual SAN Ready Nodes選擇
目前批伺服器OEM廠家先行已經獲Virtual SAN Ready Nodes緒認證基於x86工業標准伺服器廠家HPE、戴爾、聯想、華、富士通、思科、立超微其戴爾、富士通超微第批進入市場
模式VMware給予合作夥伴放業務機用戶直接伺服器OEM廠家購買服務並獲支持管硬體問題軟體問題用戶直接找伺服器OEM廠家獲支持服務
第二交鑰匙項目產品由VMware 所屬EMC聯盟交付由EMC II旗融合平台業務部VCE品
EMC聯邦2月16量躍遷揭幕超融合架構VxRailX神力本吧VMware超融合系統VMworld 2014發布EVO:RAIL概念先進系統呼聲極高雜音少EVO:RAIL產品擴展及配置限制質疑提產品夥伴能夠進行銷售式或用戶樂意購買式進行封裝等
現估計隨VxRail誕EVO:RAIL頁翻即使EVO:RAIL繼續存半VMware專注轉移新VCE嫡系Virtual SAN Ready Nodes緒模式
第三面向EVO SDDC(軟體定義數據)集系統VMware超融合架構雲管理vRealize軟體定義網路NSXEVO SDDC管理者等打包組集系統種市場模式選擇限
VMware VSAN6.2預期今季度市標價起價每CPU 美元2,495 VMware VSAN桌面標價起價每用戶美元50合作夥伴望今半內獲VMware Virtual SAN Ready Nodes緒模式
『陸』 華為天才少年主攻存儲領域研究
自古英雄出少年。
本年度的華為天才少年項目再次引爆眼球。一位是從普通本科一路「逆襲」到華中科大博士,並成為唯一拿到本年度最高檔年薪的青年才俊;另一位則是在多種A類期刊發表論文,集智慧與美麗於一身的美女博士。這兩位成功入圍項目的華中科大博士迅速成為街頭巷議的熱門話題。
值得關注的是,本年度入圍的兩位華為天才少年在校研究方向均跟數據存儲有著緊密聯系。因此,這二位不約而同地選擇華為做存儲相關的研究,讓人不得不感嘆華為存儲對於基礎研究與人才的重視。
事實上,從十八年前正式起步開始,華為存儲一路發展始終與各大高校科研機構保持著緊密聯系,高校科研機構不僅是華為存儲人才重要的來源地,也是華為在存儲基礎領域聯合創新的重要合作對象。如今,華為存儲已經成長為全球Top 5、中國Top1級別的重要廠商, 在存儲技術的產、學、研、用上逐步 探索 出一條價值閉環,真正讓基礎研究的創新成果加速走向落地,並利用市場成果不斷反哺基礎研究的創新 。
以本次入圍天才少年項目的美女博士為例,其研究方向之一的非易失性存儲器(NVM)、NVMe協議是當今存儲產品中最為重要的技術趨勢,而華為存儲正是端到端NVMe全快閃記憶體當之無愧的領導者。華為存儲的產、學、研、用價值閉環在端到端NVMe全快閃記憶體這個存儲細分領域體現得淋漓盡致。
天下武功,唯快不破。
同樣,在存儲產品中,性能是衡量存儲是否優秀的重要指標之一。在單位時間內IO越高、延遲越低,存儲的性能就會越好,也意味著可以承載更多應用和更加及時響應業務請求,讓用戶體驗更好。
NVMe正是存儲領域一門關於快的武功。如果將為機械硬碟設計的SAS協議比喻為紅綠燈多、卡口多的省市級公路;那麼專為快閃記憶體而生的NMVe協議則是不限速的高速公路。初看NVMe可以讓數據真正放飛自我,但是如何讓NVMe這條數據高速公路修的更加合理、智能,讓數據在高速公路上「不翻車」,則絕對需要常年修煉、不斷打磨才能實現。
這是因為在數據中心這張數據網路中,IO路徑涉及到伺服器、存儲、網路等多種設備,還有FC、IP、IB、PCIe、SAS等多種網路協議,經常面臨數據傳輸路徑過長、協議互相轉化等挑戰。因此,NVMe的落地往往「牽一發而動全身」,需要對整個數據中心數據傳輸網路進行規劃和設計,僅僅是一兩款NVMe SSD或者NVMe快閃記憶體控制器是遠遠不夠的。
華為正是NVMe全快閃記憶體領域的頂尖高手,用「老司機」形容不為過。 作為存儲行業SSD碟片級專利最多的廠商之一,華為對於NVMe協議進行了長期深入研究,在業界唯一端到端開發了NVMe SSD盤,NVMe 快閃記憶體控制器和NVMe全快閃記憶體操作系統,並且在業內率先實現了全系列端到端NVMe全快閃記憶體。
華為是如何做到這些的?讓我們一探究竟。
華為之所以對於NVMe十分重視,是因為NVMe與快閃記憶體有著緊密聯系,可謂是快閃記憶體性能潛能釋放的關鍵所在。而華為早在2005年就開始對快閃記憶體進行研究,對於NVMe如何走向落地和價值如何實現有著深刻的洞察與實踐。
2010年,NVMe最初作為一種硬碟介面協議誕生,充分釋放出快閃記憶體性能。但要想真正釋放數據中心包括計算、存儲和網路的性能,NVMe作為硬碟介面協議是遠遠不夠的。因此,NVMe經過多年發展,逐漸發展到存儲網路領域,NVMe over RoCE技術孕育而生。
NVMe over RoCE(Non-Volatile Memory Express over Remote Direct Access Memory over Converged Ethernet)作為新一代高性能存儲技術,將NVMe協議和網路領域中RDMA技術結合,它的出現真正讓數據中心的數據高速公路成為一種統一的網路,擁有性能、組網便利性和方案成本等多種優勢。但是它也存在著鏈路故障感知時長、網路實驗穩定性、部署易用性等方面的挑戰。
為此,華為集合全公司重量級產品線力量,從存儲和網路兩個方面對標准NVMe over RoCE方案進行增強,推出了NOF+增強方案。
具體到產品方面,華為是業內唯一端到端開發了NVMe SSD盤、NVMe快閃記憶體控制器和NVMe全快閃記憶體操作系統,率先實現全系列端到端NVMe全閃的廠商。
比如,華為去年推出的全新OceanStor存儲Dorado系列,其性能高達2000萬IOPS、極致時延達到0.05ms,各項指標遠超市場上同類競品。
在華為OceanStor存儲Dorado系列全快閃記憶體中,同時提供32G FC-NVMe和NVMe Over 100G RDMA全IP組網設計,實現前端網路連接、後端硬碟框連接、scale-out的控制器互聯均採用同一種網路協議;OceanStor存儲Dorado系列全快閃記憶體還針對NVMe設計了一套IO調度機制,徹底取消原來IO路徑上的盤級互斥鎖,避免了IO下發時隊列鎖沖突,降低軟體開銷,實現最佳性能。
此外,華為OceanStor存儲Dorado系列全快閃記憶體在操作系統層面針對NVMe進行了優化,智能晶元、FlashLink智能演算法,充分發揮了多核優勢,並且通過智能學習統計IO規律,提升讀緩存命中率和縮短批處理時間,大幅提升了性能與效率。
為了讓數據的高速公路更加穩定與可靠,華為OceanStor存儲Dorado系列全快閃記憶體在組件層提供了充足的保障。
例如,為增加埠可靠性,華為自研SSD支持原生雙埠技術,而不是採用內部Switch實現雙埠的方式,埠獨立、互不影響,為整個全快閃記憶體提供了牢固的硬體基礎和可靠性;此外,華為通過PCI-E多年的技術積累,具備完善的PCI-E鏈路管理、異常處理、熱插拔技術,支持SSD盤在任何時間、任何方式拔出,並提供端到端PCI-E系統可靠性,保障單盤更換或發生故障時不擴散。
針對大容量SSD使用容易造成數據丟失的情況,華為OceanStor存儲Dorado系列全快閃記憶體採用創新的RAID-TP軟體技術,基於Erasure Code演算法,在3塊盤同時失效的情況下能夠容忍數據不丟失、業務不中斷。華為成為業界唯三可以同時容忍3塊盤失效的廠商,並且是三家廠商中唯一可以實現15分鍾/TB 高效重構,重構速度領先其他兩家廠商20倍。華為OceanStor存儲Dorado系列全快閃記憶體還擁有諸如快照、克隆、遠程復制等完備的數據保護技術。
當前, 華為通過十多年的技術積累,華為已經擁有1000多個NVMe全快閃記憶體成功案例,用戶涵蓋到金融、政府、製造、能源等多個領域。
例如,成立於1996年的南華期貨,是全國期貨公司Top 10,主要從事期貨經紀、資產管理、證券投資等業務。南華期貨在大交所、鄭商所、深交所、嘉興聯通、香港PCCW等行業數據中心和電信運營商處租用VIP機房和機櫃,就近部署交易系統。
這樣做的目的只有一個:「快人一步」。南華期貨的業務是典型的「時間就是金錢」,一點點時間差往往可能帶來利潤的大幅變動,這種交易型的業務決定了其對時延要求極低,通常需要小於1ms。南華期貨通過部署華為OceanStor存儲Dorado全快閃記憶體來承載綜合交易平台,不僅穩定可靠,性能還提升3倍,為投資者提供了極佳的用戶體驗。
可以說,華為存儲的「快人一步」讓用戶在業務中也「快人一步」。
十八年風雨兼程,華為存儲如今已經成長為全球Top 5、中國Top 1級別的廠商,在全球布局了12個研發中心,擁有超過4000名研發工程師、800多項存儲專利,服務了全球超過12000家涵蓋各個行業的用戶並且連續十九個季度位列中國市場第一,更是在全快閃記憶體領域連續多個季度實現全球增速第一。
在這十八年中,技術創新是華為存儲的信仰,技術創新的腳步永不停止讓華為在高端存儲架構、NVMe、智能存儲等多個領域不斷實現突破,逐漸從市場的跟隨者成長為業界當之無愧的技術領先者。去年,華為存儲更是首次針對數據基礎設施技術難題設置了「奧林帕斯獎」,鼓勵和獎勵全球在數據基礎設施領域取得突破性貢獻的科研工作者。
未來,隨著更多華為天才少年以及其他人才的不斷加入,華為存儲有望在舞台中央施展更多精彩。
『柒』 華為虛擬化(kvm)平台,如何在宿主機上底層查看到虛擬機在共享存儲上存放位置和模板文件格式謝謝!
在linux上玩過kvm的朋友基本都曉得,在宿主機上運行了虛擬主機以後,我們無法直接看到某一個虛擬主機IP地址。比如:
[root@21yunwei /]$virsh list --all
Id 名稱 狀態
----------------------------------------------------
3 geoip running
4 tomcat running
5 jenkins running
18 gitlab running
19 win7 running
如果我們想知道gitlab這個虛擬機的IP地址,那麼是無法直接看到的。這里就需要一個小方法做排查,很簡單的,就兩步驟:
1,編輯虛擬主機配置文件。
[root@21yunwei /]$virsh edit gitlab
進去以後直接查找mac 可以定位到如下地址信息,記錄下mac後退出:
<mac address='52:54:00:FA:61:75'/>
2,通過arp -a判定虛擬機器IP地址。
[root@21yunwei /]$arp -a | grep -i 52:54:00:FA:61:75
? (192.168.1.101) at 52:54:00:fa:61:75 [ether] on br1
注意這里一定要加上-i 忽略大小寫。不然因為大小寫問題有可能查不到。
說明:這里只根據通信緩存記錄的mac 、IP地址手段做排查。也有可能找不到。最好的辦法是自己寫一個腳本跟網段內的所有伺服器都ping一次,記錄下mac、ip地址以後再查找就沒問題。
『捌』 華為發布新一代數據中心級融合分布式存儲FusionStorage 8.0
【西班牙,巴塞羅那,2019年2月25日】在2019年世界移動大會(MWC)上,華為發布新一代數據中心級融合分布式存儲FusionStorage 8.0,基於成熟的企業級存儲能力及公有雲基因,幫助運營商、金融等行業客戶應對數據大爆炸時代業務雲化挑戰。
華為IT產品線智能存儲與數據管理領域總裁孟廣斌發布FusionStorage 8.0
5G、IoT、雲、人工智慧等新興技術快速發展,傳統集中式存儲煙囪式部署的擴展性和管理難題日益凸顯,越來越多的用戶期望有一種新的形式,可以打破不同類型存儲間的數據孤島,讓各類業務以統一的方式進行存儲和管理,同時降低TCO、提升數字化平台服務效率。
面向紛繁復雜的雲環境,華為FusionStorage 8.0創新的實現一套存儲系統同時支持塊、文件、對象、HDFS、資料庫協議,適用於全業務場景混合負載,以一套設備支持數據的生產、災備、分析、歸檔等全生命周期場景,滿足雲上雲下數據流動並保障一致性體驗。
業界首個支持關鍵業務的分布式存儲
華為FusionStorage 8.0是業界首個支持企業關鍵業務的分布式存儲系統。單集群橫向擴展最大可達4096個節點,支持千萬級IOPS,並且憑借華為企業級存儲成熟的晶元和FlashLink®加速技術,使得節點與SSD盤之間協同更高效,時延響應低至0.5毫秒,具備分布式存儲領域最優性能,滿足運營商核心資料庫、金融聯機生產等場景快速IO響應訴求,保障企業關鍵業務高速穩定運行。
此外,基於華為企業存儲產品久經驗證的HyperMetro雙活方案,華為FusionStorage 8.0可提供99.9999%的方案級可靠性,適用於虛擬化及資料庫等多應用場景,保障關鍵業務不中斷,提供業界唯一支持秒級RPO(恢復點目標)的非同步復制技術,為跨數據中心業務提供連續性保障。憑借獨有的自適應重復數據刪除與數據壓縮能力,即使在VDI(桌面虛擬化)應用場景中也能達到5:1的數據縮減比,進一步幫助用戶節省存儲空間。
率先實現五大融合
作為業界唯一同時提供公有雲、傳統存儲和晶元的廠商,華為整合具有強擴展性的分布式存儲底座、傳統存儲豐富的企業特性,並融入晶元的優化能力,從而實現數據中心級的融合。
華為FusionStorage 8.0通過協議融合實現一站式部署,替代原有不同協議時煙囪式部署,提升資源使用率,使TCO降低30%;通過關鍵業務融合實現一套存儲同時支持企業核心應用和新興應用;通過場景融合實現一套存儲對數據的采、用、管、備、存全生命周期管理;通過多雲融合實現一個平台,融合邊緣雲、私有雲和公有雲,為用戶提供一致的業務體驗;通過管理融合實現一套統一的智能管理平台,融合運維和運營兩大能力,實現數據智能化,充分釋放數據價值。
通過創新的五大融合特徵,華為FusionStorage 8.0可幫助用戶實現「一個數據中心一套存儲」的終極目標,有效消除存儲設備多樣性及管理復雜性,降低數據使用成本,並讓雲上雲下數據自由流動和充分共享成為可能;通過存儲永新服務幫助用戶數據終身免遷移,減少數據遷移給業務帶來的中斷風險。
作為華為FusionStorage的用戶,中國移動通信集團遼寧有限公司累計部署容量超過10PB,到目前已穩定運行超過4年,資料庫系統性能大幅提升,100TB經營分析數據處理時長由之前的超過10小時縮短至2小時,保障業務7x24小時在線。
華為IT產品線智能存儲與數據管理領域總裁孟廣斌表示:「在數據中心從傳統孤島向雲架構演進的趨勢下,華為全新一代分布式存儲FusionStorage 8.0通過創新的五大融合,打通企業數據壁壘,在業界首個支持關鍵業務,真正實現一個數據中心一套存儲,助力行業客戶數字化轉型。華為FusionStorage已經為全球數千家企業用戶持續提供數據存儲服務。」
『玖』 華為FusionSphere的FusionCompute虛擬化引擎
FusionCompute是雲操作系統基礎軟體,主要由虛擬化基礎平台和雲基礎服務平台組成,主要負責硬體資源的虛擬化,以及對虛擬資源、業務資源、用戶資源的集中管理。它採用虛擬計算、虛擬存儲、虛擬網路等技術,完成計算資源、存儲資源、網路資源的虛擬化;同時通過統一的介面,對這些虛擬資源進行集中調度和管理,從而降低業務的運行成本,保證系統的安全性和可靠性,協助運營商和企業客戶構建安全、綠色、節能的雲數據中心。
FusionCompute採用虛擬化管理軟體,將計算、存儲和網路資源劃分為多個虛擬機資源,為用戶提供高性能、可運營、可管理的虛擬機: 支持虛擬機資源按需分配 支持QoS策略保障虛擬機資源分配 FusionManager提供開放的北向API介面,上層網管通過開放API從FusionManager中獲取資源信息,方便上層網管管理員對系統進行管理和維護。FusionManager系統支持管理華為虛擬化系統FusionCompute,統一管理不同地域的虛擬化系統;也可以對第三方的虛擬化系統進行集中管理。