- 相關(guān)推薦
Hadoop并非完美：8個(gè)代替 HDFS 的絕佳方案
HDFS(Hadoop Distributed File System)是Hadoop項(xiàng)目的核心子項(xiàng)目，是分布式計(jì)算中數(shù)據(jù)存儲(chǔ)管理的基礎(chǔ)，坦白說HDFS是一個(gè)不錯(cuò)的分布式文件系統(tǒng)，它有很多的優(yōu)點(diǎn)，但也存在有一些缺點(diǎn)，包括：不適合低延遲數(shù)據(jù)訪問、無法高效存儲(chǔ)大量小文件、不支持多用戶寫入及任意修改文件。
Apache軟件基金會(huì)成立的時(shí)候，HDFS就一直在想辦法提高它的性能和可用性，坦白說，這也許對(duì)試點(diǎn)項(xiàng)目、非常規(guī)項(xiàng)目、要求不嚴(yán)格的大環(huán)境中比較適用，但是對(duì)于某些Hadoop用戶來說，他們對(duì)于性能、可用性、企業(yè)級(jí)特性有較高的要求，且注重直接附加存儲(chǔ)(DAS)架構(gòu)，特別是老版本的Hadoop沒有高性能的主節(jié)點(diǎn)，那么接下來8個(gè)產(chǎn)品就是代替HDFS的絕佳方案。
1.Cassandra(DataStax)
并非一個(gè)完全的文件系統(tǒng)，而是一個(gè)開源、NoSQL 鍵值(key-value)商店。這給依靠快速數(shù)據(jù)訪問的Web 應(yīng)用多了一個(gè)HDFS選擇。簡單來說它把Hadoop融合在Cassandra里面，支持Web應(yīng)用通過Hadoop快速訪問數(shù)據(jù), 而Hadoop可以快速訪問流入Cassandra的數(shù)據(jù)。
2.Ceph
Ceph 是一個(gè)開源、多管齊下的操作系統(tǒng)，因?yàn)槠涓咝阅懿⑿形募到y(tǒng)的特性，有人甚至認(rèn)為它是基于Hadoop環(huán)境下的HDFS的接班人，因?yàn)樽?010年就有研究者在尋找這個(gè)特性。
3.Cleversafe：分散存儲(chǔ)網(wǎng)絡(luò)
本周一Cleversafe宣布將融合Hadoop的并行編程技術(shù)和自己的分散存貯網(wǎng)絡(luò)。其原理是通過把整個(gè)元數(shù)據(jù)分布在集群中(不是依靠單個(gè)主節(jié)點(diǎn)、不是依靠復(fù)制)，Cleversafe表示這比HDFS更快、更穩(wěn)定、更具擴(kuò)展性。
4.GPFS(IBM)
IBM一直在向高性能要求的用戶銷售其并行文件系統(tǒng)，包括世界上最快的超級(jí)電腦，2010年它推出了基于Hadoop的GPFS, 并宣布GPFS不共享集群版本比Hadoop快多了，因?yàn)?/p>
它在內(nèi)核級(jí)別中運(yùn)行，而不是在操作系統(tǒng)中運(yùn)行例如HDFS。
5.Isilon(EMC)
EMC提供Hadoop發(fā)行版已經(jīng)一年了，但2012年1月轉(zhuǎn)型為HDFS企業(yè)級(jí)別的新方案Isilon 的 OneFS文件系統(tǒng)。因?yàn)镮silon可以讀取 NFS, CIFS以及 HDFS 協(xié)議, 一個(gè)單獨(dú)的 Isilon NAS系統(tǒng)可以攝入、處理、分析數(shù)據(jù)。
6.Lustre
HPC存儲(chǔ)提供商Xyratex 增在2011年的一份報(bào)道中寫到， 基于Lustre的集群會(huì)比基于HDFS的集群更快更便宜。
7. MapR文件系統(tǒng)
MapR 文件系統(tǒng)在業(yè)內(nèi)已經(jīng)具有一定知名度了，不僅MapR宣布它自己的文件系統(tǒng)比HDFS快2-5倍(實(shí)際上有20倍)，它還具有鏡像、快照、高性能這些企業(yè)用戶喜歡的特點(diǎn)。
8.NetAppHadoop開放方案
NetApp重新改版了物理Hadoop結(jié)構(gòu)：把HDFS放在磁盤陣列中，通過這樣來達(dá)到更快、更穩(wěn)定、更安全的Hadoop工作。
[Hadoop并非完美：8個(gè)代替 HDFS 的絕佳方案]相關(guān)文章：
1.Hadoop并非完美:8個(gè)代替 HDFS 的絕佳方案
【Hadoop并非完美：8個(gè)代替 HDFS 的絕佳方案】相關(guān)文章：
其實(shí)并非這樣作文06-04
其實(shí)并非這樣作文5篇06-04
cpu散熱硅膠可以用什么代替05-24
我的完美哲學(xué)作文07-03
演講如何完美收尾04-27
完美戚風(fēng)的做法步驟02-10
我不是完美小孩作文07-01
圣誕節(jié)會(huì)代替春節(jié)嗎英語作文07-03
澄粉是什么粉-澄粉可以用什么代替08-04
我的完美哲學(xué)作文3篇07-31