国产一级一区二区_segui88久久综合9999_97久久夜色精品国产_欧美色网一区二区

掃一掃
關注微信公眾號

從集中到分布,解讀網絡視頻IT架構變遷(下)
2007-11-01   IT168

從集中到分布,化解存儲瓶頸
接上篇:從集中到分布,解讀網絡視頻IT架構變遷(下)。集中式存儲已經擁有了諸多優勢,那么為何這家視頻網站最終卻選擇了其他的存儲架構呢?該視頻網站究竟在運營過程中遭遇到了什么樣的阻礙呢?經過我們對整個網站存儲結構的分析,原來,NAS頭成為整個存儲環境的瓶頸……

""

NAS成為系統瓶頸

""

傳統集中式存儲的瓶頸

從以上兩幅圖中,我們可以看到傳統的集中存儲方案中,存在如下問題:

 I/O瓶頸
 容量擴展性差
 性能不可擴展
 專業高端NAS成本高昂
 單點故障

隨著數據量的增加,存儲壓力也變得越來越集中,NAS已不足以支撐現有的應用,無法更好的應對未來的挑戰。既而,該網站從集中式的存儲方式轉向了采用分布式的存儲方式。

""

分布式存儲系統架構

圖中,每臺服務器上都提供文件共享服務,由應用層來實現媒體資源數據在各個服務器集群之間的遷移,從而比較好的解決了集中存儲的IO瓶頸問題,但是問題也隨之而來。

分布式的存儲沒有負載均衡,例如:發生熱點的時候、部分流媒體服務器忙或部分閑置

分布式存儲利用相對較低率,重復數據大量存在,且份數多

無法實現集中的高Raid 級別保護

快照、備份、恢復、遠程容災比集中存儲實現成本高

需要在應用層對存儲層過多關注。管理復雜度程幾何級增長,整體系統維護工作越來越復雜、繁重。以管理Mount點為例:同樣的服務器數,需管理Mount點的數量為48 [M*(N+F)+W*N]個,即上圖中的48根紅線,遠大于集中存儲結構。這僅僅是Mount點一項,還不包括各個點存儲數據的維護,在實際應用中相關的工作量是相當驚人,管理員疲于奔命。

1

集中VS.分布?還是分布式的集中?

既然傳統的集中和分布都存在不同的問題,怎么樣去解決?在給出答案之前,我們重新歸納前面分析的視頻網站對存儲的需求:

1. 各種服務器集群之間有視頻傳遞的需求,需要上傳服務器、流媒體服務器、在線錄制服務器和轉換服務器之間的視頻文件是互相可見的,翻譯成存儲的語言則需要文件級共享的存儲。

2. 各種應用服務器可能使用著不同的操作系統平臺,都需要無差異的訪問到存儲空間,而翻譯成存儲的語言則需要跨平臺共享的存儲。

3. 多臺流媒體服務器之間的存儲容量需要共享,從而提高存儲空間的利用率。如采用傳統SAN上面劃分獨立的存儲空間,給每臺服務器的類似做法顯然是不可接受的,并且需要視頻內容合理的分布在各個存儲設備上,翻譯成存儲的語言則需要存儲容量的負載均衡。

4. 單臺存儲設備的存儲速度始終是有限的,需要多個存儲設備的聚合才能滿足視頻內容訪問量的爆炸式的增長,翻譯成存儲的語言則需要多臺存儲設備間的存儲速度的聚合,從而實現存儲速度的負載均衡。

5. 新增視頻內容的不斷添加會導致存儲容量的不斷擴大,在添加設備擴展容量的時,能夠不影響原有系統,且平滑擴展,能夠實現在線的擴展業務系統不停機,翻譯成存儲的語言則需要容量線性可擴展,能夠實現在線擴容。

6. 隨著用戶訪問量增長和視頻清晰度提高帶來的帶寬增長等諸多增長因素的影響,對存儲帶寬的增長需求,要求存儲系統實現帶寬隨容量呈線性增長。

7. 合理的成本控制是一個恒久的話題,需要存儲系統的總體擁有成本隨容量的擴展而合理的擴展,不能出現突變式的增長。

8. 穩定性自然不用說,需要存儲系統采用冗余結構以提高系統的穩定性。

為了滿足上述需求,當我們面對“集中VS.分布”這個艱難抉擇的時候,技術的不斷進步,涌現出:分布式的集中存儲結構——集群存儲技術,其核心技術是集群文件系統。

1

集群存儲系統滿足視頻行業服務需求
目前,廣為流行的集群文件系統的典型代表主要有:

 Google 的GFS (Google File System)
 國內中科院研發的BWFS(Blue Whale File System)
 Panasas 的PanFS (PanFS File System)
 IBM 的 GPFS (General Parallel File System)
 CFS 的 Lustre (Lustre File System)

這五種集群文件系統各有特點和優勢,一般而言,分布式集中存儲相對于傳統存儲系統來說擁有如下優點:采用統一的全局命名空間,支持文件級共享,且采用分布式存儲結構,能實現高聚合I/O帶寬,并且跨Linux平臺和Windows平臺的文件共享,還能夠線性擴展I/O帶寬,擁有良好的系統負載平穩性,并能夠動態擴展存儲容量,實現成本可控。

""

基于分布式結構的集中存儲

如上圖所示:該架構能較好的滿足網絡視頻對存儲系統的需求。

1. 文件共享、統一的全局命名空間——上傳服務器和流媒體服務器之間的文件可見性;多臺流媒體服務器間的存儲容量共享

2. 多臺存儲設備間的存儲速度的聚合——流媒體服務器可用的存儲速度負載均衡

3. 跨平臺共享(Windows/Linux)——支持不同平臺的流媒體服務器、上傳和其他服務器

4. 容量線性可擴展——使流媒體服務能應對不斷擴大的存儲容量需求

5. 帶寬隨著容量線性增長——使流媒體服務能應對不斷擴大的用戶訪問量; 可以按需擴大流媒體服務器的數量而不用擔心存儲

6. 成本需隨著容量的擴展而擴展——良好的成本控制

7. 全冗余結構——穩定的強壯的存儲系統

該視頻網站最終選擇基于BWFS集群文件系統的BWStor藍鯨集群存儲系統。BWFS是由我國中科院計算所工程中心自主研發的文件系統,并經由中科院中科儲天公司產品化。中科院中科儲天藍鯨集群存儲系統(BWStor)即采用BWFS文件系統為核心技術,是中國自主知識產權存儲產品的代表之一。

熱詞搜索:

上一篇:從集中到分布,解讀網絡視頻IT架構變遷(上)
下一篇:HDS與HP擴大OEM協議,強化軟件合作

分享到: 收藏
国产一级一区二区_segui88久久综合9999_97久久夜色精品国产_欧美色网一区二区
久久这里只精品最新地址| 久久综合伊人77777| 欧美另类综合| 一区在线观看视频| 国产日韩欧美亚洲| 欧美日韩视频免费播放| 欧美h视频在线| 久久午夜精品一区二区| 亚洲欧美日韩电影| 一本大道久久a久久精品综合| 亚洲国产精品va在线观看黑人| 国产日韩在线视频| 欧美午夜一区二区三区免费大片| 久久综合九色综合欧美狠狠| 欧美专区在线观看| 欧美专区中文字幕| 亚洲女人天堂成人av在线| 日韩午夜剧场| 亚洲视频电影在线| 一区二区三区精品视频| 亚洲麻豆av| 亚洲视频精品在线| 亚洲欧美在线免费| 久久se精品一区二区| 久久人人爽国产| 欧美黄色免费网站| 国产精品久久婷婷六月丁香| 国产精品日韩精品欧美精品| 国产亚洲制服色| 亚洲国产成人av在线| 亚洲乱码国产乱码精品精 | 亚洲女人av| 欧美一级片在线播放| 久久青草久久| 国产一区二区三区高清| 国产精品国产自产拍高清av王其| 久久全国免费视频| 久久先锋影音| 国产精品成人在线观看| 亚洲高清一区二| 久久久久在线观看| 国产一区二区0| 一区二区三区精品在线 | 久久精品青青大伊人av| 国产精品免费观看视频| 亚洲无线一线二线三线区别av| 欧美第十八页| 精品成人在线观看| 久久阴道视频| 亚洲精品视频二区| 欧美性生交xxxxx久久久| 一本一本久久a久久精品综合妖精| 欧美日韩在线播放| 午夜精品一区二区三区在线播放| 国产亚洲欧洲997久久综合| 欧美在线一级视频| 亚洲欧美日韩精品久久| 永久免费毛片在线播放不卡| 免费看的黄色欧美网站| 9人人澡人人爽人人精品| 国产日韩欧美一区二区三区四区| 久久精品一本| 性视频1819p久久| 亚洲精品欧美极品| 国产欧美一区二区三区在线老狼| 蜜臀久久久99精品久久久久久| 国产亚洲成av人在线观看导航| 理论片一区二区在线| 亚洲视频在线播放| 在线播放日韩| 国产精品伦子伦免费视频| 女生裸体视频一区二区三区| 一区二区动漫| 亚洲精品乱码久久久久久日本蜜臀 | 伊人婷婷欧美激情| 国产精品高潮视频| 欧美成人免费观看| 国产亚洲精品资源在线26u| 欧美视频一区二| 欧美国产一区二区在线观看| 美女网站在线免费欧美精品| 亚洲女同性videos| 亚洲无亚洲人成网站77777| 亚洲国产美女| 亚洲视屏一区| 亚洲精品乱码久久久久久| 狠狠色丁香久久婷婷综合_中| 国产视频在线一区二区| 国产精品成人va在线观看| 欧美日韩成人一区二区| 欧美午夜理伦三级在线观看| 国产精品成人免费精品自在线观看 | 麻豆精品在线视频| 免费试看一区| 欧美美女bb生活片| 国产精品久久久久久亚洲毛片| 欧美日韩国产色视频| 欧美日韩色婷婷| 国产精品入口尤物| 国产一区在线视频| 免费亚洲电影在线| 欧美日韩国产综合视频在线观看 | 久久久久亚洲综合| 欧美一区网站| 久久夜色精品国产| 欧美黄在线观看| 欧美国产日韩亚洲一区| 国产视频一区二区三区在线观看| 一区免费在线| 亚洲一区影音先锋| 欧美a级一区| 国产精品最新自拍| 亚洲精品一区二区在线| 亚洲日本欧美天堂| 噜噜噜噜噜久久久久久91| 欧美性一区二区| 国产一区在线播放| 在线亚洲精品| 欧美日本成人| 1204国产成人精品视频| 久久久国产精品亚洲一区| 国产精品日韩久久久| 日韩视频精品| 国产一区二区按摩在线观看| 欧美一区影院| 午夜欧美精品| 精品成人一区二区三区| 欧美破处大片在线视频| 久久99在线观看| 9色porny自拍视频一区二区| 国产精品av久久久久久麻豆网| 久久精品国产96久久久香蕉 | 韩国免费一区| 久久国产黑丝| 欧美成人首页| 欧美丝袜第一区| 日韩一级精品视频在线观看| 欧美日韩中文在线| 欧美日韩国产影片| 美女国内精品自产拍在线播放| 在线看一区二区| 在线看欧美视频| 在线免费观看日韩欧美| 亚洲激情av在线| 亚洲精品国产精品国产自| 国产一区二区日韩精品欧美精品| 国产亚洲aⅴaaaaaa毛片| 国产日韩亚洲欧美| 国产一区 二区 三区一级| 在线观看91精品国产入口| 在线免费观看欧美| 亚洲日本精品国产第一区| 亚洲尤物在线| 欧美一级在线视频| 久久国产欧美日韩精品| 免费短视频成人日韩| 欧美成人情趣视频| 国产精品一区免费在线观看| 国产日韩欧美综合一区| 欧美色偷偷大香| 亚洲国产专区校园欧美| 国产综合18久久久久久| 亚洲国产一区二区精品专区| 日韩一级成人av| 久久精品99国产精品酒店日本| 欧美99久久| 国产午夜精品一区二区三区欧美| 狠狠色综合色综合网络| 99在线|亚洲一区二区| 久久爱www久久做| 欧美日韩国产999| 亚洲精品久久| 久久人人97超碰国产公开结果 | 亚洲激情成人网| 亚洲国产日韩欧美在线动漫| 欧美亚洲在线| 欧美午夜在线| 亚洲一本视频| 国产精品成人一区| 亚洲精品一区二区三区不| 久久免费视频在线| 国产日韩精品视频一区| 亚洲网在线观看| 国产精品国产亚洲精品看不卡15| 伊人夜夜躁av伊人久久| 新片速递亚洲合集欧美合集| 欧美日韩日日骚| 亚洲精品视频在线观看免费| 久久精品日产第一区二区三区| 国产精品午夜春色av| 欧美日韩一区三区四区| 136国产福利精品导航网址| 日韩一区二区精品视频| 欧美激情一区二区三区在线视频观看 | 国产一区观看| 久久精品成人一区二区三区| 国产亚洲一区二区在线观看| 免费久久99精品国产自在现线| 在线激情影院一区| 欧美—级a级欧美特级ar全黄|