华为大数据存储实现统一管理40PB文件系统--华夏物联网

亚洲男人的天堂在线播放,久久99精品久久久久久清纯,日本乱人伦片中文三区,亚洲精品中文字幕乱码三区,777亚洲熟妇自拍无码区

華為大數據存儲實現統一管理40PB文件系統

專家觀點
比特網
2014-05-13
[ 導讀 ] 華為近日宣布旗下大數據存儲OceanStor 9000經過全面的驗證可實現目前業界最大40PB文件系統,相當于4萬塊1TB硬盤的超大容量空間可同時被一個文件系統進行目錄管理,這是OceanStor 9000大數據存儲繼獲得500萬OPS性能冠軍之后又一次領先業界的創舉。

   華為近日宣布旗下大數據存儲OceanStor 9000經過全面的驗證可實現目前業界最大40PB文件系統,相當于4萬塊1TB硬盤的超大容量空間可同時被一個文件系統進行目錄管理,這是OceanStor 9000大數據存儲繼獲得500萬OPS性能冠軍之后又一次領先業界的創舉。此次驗證同時得到了英特爾、希捷以及AgigA Tech等業內一流合作伙伴的大力支持。

   隨著企業的發展以及大數據時代的到來,許多行業為了在多個獨立的應用和數據孤島中挖掘出更大的數據價值,希望將數據融合起來共享使用,因此對單一文件系統的容量提出了非常高的要求。比如,中國的智慧城市建設已經大步邁進8Mbps碼流的高清時代, 視頻存儲已經達到10~20PB存儲容量;互聯網新媒體的數據量,也從TB級進入幾十PB級集中存儲時代;目前我國正在推動建設的國家級基因庫將建設一個能夠容納50PB容量基因數據存儲和分析倉庫。由此可見,在大數據時代背景下,行業客戶對于PB級統一命名空間的高性能存儲已經呈現出旺盛的需求態勢。華為OceanStor 9000大數據存儲系統40PB單一命名空間的實證正是在這樣的背景下,以客戶實際需求為導向的又一次扛鼎之作。

   40PB超大容量的實現得益于多項創新技術的支撐:首先,華為自主研發的分布式文件系統WushanFS,采用創新的元數據管理方式,使得系統的性能、可靠性以及擴展能力三個方面可以并駕齊驅,真正實現性能、容量線性增長,數據可靠存儲。其次,動態哈希表技術、目錄動態子樹分裂技術、全局一致性緩存、RDMA over TCP等互聯網技術的引入,為OceanStor 9000大規模橫向擴展后性能線性增長提供了技術保證。另外,數據隔離技術將一個大規模的集群規劃為多個中等規模存儲空間,有效的解決了大數據存儲設備大規模擴展后故障域過大,故障概率高的可靠性問題。集群任務拆分、并發、合并的MapReduce設計思想的引入,也最大限度的降低了大規模集群管理的系統壓力。

   在40PB大規模集群的驗證過程中,OceanStor 9000展現了其優越的易管理性和擴展性,288節點集群部署在60分鐘內完成,單節點擴容在1分鐘內完成,全過程圖形化界面操作,容量和性能線性擴展,最大可提供40PB容量,200GB/s帶寬。

   華為存儲產品線總裁范瑞琦表示:“OceanStor 9000大數據存儲系統的40PB超大容量的實現,能夠真正應對大數據時代的數據量沖擊,可以更好的幫助行業客戶實現業務增長,例如可以支持媒體行業數千高清碼流的電視節目同時在線制作,滿足以央視為代表的全球性電視臺的所有節目制作需求;能夠支持上萬路1080p攝像頭實時錄像和并行分析,滿足像上海、廣州、成都等大中型智慧城市全網視頻監控需求。”

   英特爾通訊和存儲基礎設施事業部存儲部門總經理Bev Clair對此次合作評價到:“大數據時代的到來為我們提供了變革性的機遇,提供幫助我們解決歷史性商業問題的機遇。英特爾和華為強強聯合,通過研發大數據項目的技術和工具,不斷滿足客戶的需求。英特爾和華為已經成功地完成對40PB的大數據存儲工作負載的分析,為應用方面的存儲解決方案的商業部署提供了參考。我們現在已經具備了打破當今容量瓶頸且滿足客戶需求的能力。我們會加快產品上市的時間,提供靈活性強、性價比高的解決方案,滿足日益增長的存儲需求。”

   希捷科技全球副總裁暨中國區總裁孫丹女士表示:“大數據時代數據的快速增長,給客戶的存儲需求帶來極大的挑戰。從單點來看,客戶需要更大容量更穩定的存儲介質;從存儲系統整體來看,超大容量的單一文件系統對客戶將具有更實際的應用價值,和更廣泛的應用場景。此次華為與多家合作伙伴聯合驗證40PB單一文件系統正是在這樣的背景下開展的。希捷愿意與華為共同聯手,推動大數據存儲技術的研發創新和方案推廣。”

   AgigA Tech首席執行官Ron Sartore先生如此評價:“在與華為將近三年的合作中,AgigA Tech與華為在引入NVDIMM技術到華為服務器以及存儲產品的過程中保持了緊密的合作。在AgigA Tech成都研發中心對華為進行本地化技術支持的過程中,我們有幸第一時間看到華為海量存儲OceanStor 9000系列作為劃時代的產品所能提供的前所未有的I/O性能,這足以應對未來繁重的工作負荷。我們將繼續與華為保持緊密的合作伙伴關系,并對有機會將基于DDR4以及未來內存技術的NVDIMM產品更加廣泛應用于華為產品而感到興奮。”

【聲明】物流產品網轉載本文目的在于傳遞信息,并不代表贊同其觀點或對真實性負責,物流產品網倡導尊重與保護知識產權。如發現文章存在版權問題,煩請聯系小編電話:010-82387008,我們將及時進行處理。

相關文章

快速成功地連接物聯網產品的5個技巧

對于物聯網設備制造商來說,蜂窩物聯網是實現互聯網連接的最可靠和最容易獲得的方式之一。根據ABIResearch的數據,到2026年,全球蜂窩物聯網設備總數將達到57億。蜂窩物聯網的采用正在增長,因為它易于部署和擴展。您只需要一...

08月30日 11:32千家網

江西:到2023年底物聯網產業規模突破2000億元

5月19日,記者從江西省工信廳獲悉,為深入實施數字經濟做優做強“一號發展工程”,加快江西物聯網新型基礎設施建設,江西省工信廳、省委網信辦、省科技廳等9部門聯合出臺《江西省加快推進物聯網新型基礎設施建設實施方案》(以下簡稱《方案...

05月19日 15:55大江快報

我國大數據發展的三大趨勢和三大挑戰

近年來,伴隨著數字經濟席卷全球,大數據產業愈發“炙手可熱”。近年來,伴隨著數字經濟席卷全球,大數據產業愈發“炙手可熱”。大數據自身產業技術的發展,能夠助推數字經濟走向高質量和高水平,與此同時,大數據與金融、醫療、教育、工業等領...

06月08日 20:15智能制造網

物聯網加速融入生活場景,智能家居設備能做什么?

智能設備和物聯網已經進入現代家庭生活的幾乎所有方面。從您的安全系統到冰箱,“智能”電器已成為新常態。但它們真的能讓你的家變得更好嗎?或者所有這些智能家電只是另一種時尚,從長遠來看,您最終會后悔花額外的錢?讓我們來看看在家里裝滿...

06月01日 20:48千家網

京東方:物聯網創新業務打開更多增長空間

  從北京大興國際機場,到莫斯科城鐵列車,再到紐約商超門店,如今,物聯網創新解決方案已覆蓋全球眾多地區、涉及生活的方方面面,帶給人們全新的體驗。而這一改變的背后,正是京東方在物聯網領域取得的豐碩成果。夯實全球半導體顯示霸主地位...

05月28日 10:00人民政協報