互聯網IDC圈8月16日報道:隨著數據中心和云環境中的大型數據不斷增長,如何管理同時傳輸數百萬條記錄的網絡成為前所未有亟待解決的問題。
界首ssl適用于網站、小程序/APP、API接口等需要進行數據傳輸應用場景,ssl證書未來市場廣闊!成為創新互聯建站的ssl證書銷售渠道,可以享受市場價格4-6折優惠!如果有意向歡迎電話聯系或者加微信:13518219792(備注:SSL證書合作)期待與您的合作!這不僅僅是數據規模的問題——在涉及大型數據網絡解決方案時,不僅是數據規模確實不能小覷,而且工作量也是如此。大型數據環境不能簡單的按照過去的數據基礎架構來運作。鑒于運行大型數據應用軟件的復雜性和速度,大型數據需要適合自己的解決方案。
“傳統”的數據分析體系結構假設數據的來源有限,他們有大量的時間將數據存儲在正確數據庫的正確表格當中。當涉及到諸如推特,臉譜和谷歌所使用的網絡和應用軟件時,這種對待常規數據庫體系結構的方法就好比將單個燈泡插在核反應堆上一樣問題立顯。
為了克服在短時間內處理大容量數據的障礙,大型數據用戶設計了兩種不同的方法來解決這種問題。首先是部署大規模實時數據庫,比如BigTable, OpenDremel, MongoDB或者Cassandra.這些數據庫都共享非關聯的特性:他們不依賴標準化查詢語言(因此他們又被稱為"NoSQL"),他們也不能滿足關聯數據庫中所有數據都必須滿足的ACID需求。
另外一種解決方案是使用分析數據庫,諸如Hadoop,通過篩選大容量數據進行分類來達到目的。
這就意味著網絡和周圍基礎架構關注的中心將從優化存儲向優化搜索轉移。也必須這么做,因為存儲在典型的大型數據環境中已經被大大的簡化了,所有的重點是將數據分類來滿足有用的數據集,然后用于深層結論的分析。
但不幸的是,這種基礎方法只能應用于普通的大型數據網絡。在占地20000平方英尺的數據中心里,用來匹配這些數據解決方案的方法是多種多樣的。每種方法都有其必須被解決的固有問題。舉例來說,Hadoop使用代表單點故障大型數據管理器的NameNode體系結構來應對非常敏感的數據。如果NameNode設備對網絡不起作用了,整個Hadoop系統也就癱瘓了,這就給網絡管理員來保障特殊服務器的正常運行造成了很大的壓力。
當然還有非網絡的解決方案。舉例來說,來自DataStax公司的產品Brisk就是要在Apache Cassandra的實時性能與Hadoop的分析能力之間搭建一座橋梁。Brisk將Hadoop的文件系統與Cassandra合并在一起,這就意味著不再會出現單點故障的問題。
大型數據和網絡體系結構
這兩種選擇只是來自潛在大型數據體系結構的冰山一角。單就這些解決方案的網絡體系結構來說差異就已經非常之大了。那么網絡管理者如何應對每天越來越多的大型數據呢?
諸如OpenFlow這樣的解決方案能有所幫助。OpenFlow是Open Networking Foundation產品的網絡基礎架構協議。Open Networking Foundation存在的原因就是要執行這種圍繞軟件定義網絡概念的協議OpenFlow.
軟件定義網絡的設計是為了解決諸如下面描述的這類問題:與構建一招吃遍天下的網絡解決方案并迫使應用軟件使用這種解決方案來解決問題的方法不同,應用軟件本身就能定義網絡拓撲。OpenFlow通過簡化硬件和網絡管理,能幫助網絡管理員更加輕松的根據軟件定義網絡的規則來配置他們的網絡,從而降低大型數據網絡的網絡管理成本。
OpenFlow是一種低級別標準,不過廠商已經開始尋找將他們自己的軟件設于OpenFlow之上的可能性。舉例來說,是否能設計出一種網絡管理工具能感知網絡流量和信息包工作負載的突然性大規模遷移,自動轉換配置來做出補償,當工作量完成后又返回“正常”模式呢?其實如果這種方法能得到廣泛的普及,OpenFlow將對“云網絡”——隨需效用網絡配置有所幫助。
這種方式非常重要。標準拓撲結構下的交換機和路由器無法實現我們在此探討的帶寬。網絡本身逐漸成為大型數據解決方案的組成部分,諸如思科系統公司IOS產品線極力推廣的此類網絡即平臺解決方案應用正在變得越來越普遍。面對如此的復雜程度和數據規模,靈活的光纖連接方式正在快速成為網絡體系結構的新寵。
OpenFlow解決方案將幫助網絡管理員按照需求自動控制網絡光纖的規模和形態,就像幾年前讓流量按照意想不到的方式實現一樣。
這是一種網絡管理者必須適應的方式。云計算的大規模應用(公有云,私有云或者混合云)和大型數據應用軟件將在不久的將來滲入到每一家企業的應用環境當中。
文章名稱:大數據難題帶來按需支配的云網絡解決方案
本文鏈接:http://m.newbst.com/article32/sdjopc.html
成都網站建設公司_創新互聯,為您提供動態網站、App設計、網站維護、服務器托管、網站內鏈、網站改版
聲明:本網站發布的內容(圖片、視頻和文字)以用戶投稿、用戶轉載內容為主,如果涉及侵權請盡快告知,我們將會在第一時間刪除。文章觀點不代表本網站立場,如需處理請聯系客服。電話:028-86922220;郵箱:631063699@qq.com。內容未經允許不得轉載,或轉載時需注明來源: 創新互聯