Hadoop并非完美:8个代替HDFS的绝佳方案 您所在的位置:网站首页 hdfs和hadoop Hadoop并非完美:8个代替HDFS的绝佳方案

Hadoop并非完美:8个代替HDFS的绝佳方案

#Hadoop并非完美:8个代替HDFS的绝佳方案| 来源: 网络整理| 查看: 265

Hadoop

并非完美:

8

个代替

HDFS

的绝佳方案

 

 

 

HDFS(HadoopDistributedFileSystem)

Hadoop

项目的核心子项

目,是分布式计算中数据存储管理的基础,坦白说

HDFS

是一个不错

的分布式文件系统,它有很多的优点,但也存在有一些缺点,包括:

不适合低延迟数据访问、无法高效存储大量小文件、不支持多用户

写入及任意修改文件。

 

Apache

软件基金会成立的时候,

HDFS

就一直在想办法提高它的

性能和可用性,坦白说,这也许对试点项目、非常规项目、要求不

严格的大环境中比较适用,但是对于某些

Hadoop

用户来说,他们对

于性能、可用性、企业级特性有较高的要求,且注重直接附加存储

(DAS)

架构,特别是老版本的

Hadoop

没有高性能的主节点,那么接

下来

8

个产品就是代替

HDFS

的绝佳方案。

 

1.Cassandra(DataStax)

 

并非一个完全的文件系统,而是一个开源、

NoSQL

键值

(key-

value)

商店。这给依靠快速数据访问的

Web

应用多了一个

HDFS

选择。

简单来说它把

Hadoop

融合在

Cassandra

里面,支持

Web

应用通过

Hadoop

快速访问数据

,

Hadoop

可以快速访问流入

Cassandra

的数

据。

 

2.Ceph

 

Ceph

是一个开源、多管齐下的操作系统,因为其高性能并行文

件系统的特性,有人甚至认为它是基于

Hadoop

环境下的

HDFS

的接

班人,因为自

2010

年就有研究者在寻找这个特性。

 

3.Cleversafe

:分散存储网络

 

本周一

Cleversafe

宣布将融合

Hadoop

的并行编程技术和自己的

分散存贮网络。其原理是通过把整个元数据分布在集群中

(

不是依靠

单个主节点、不是依靠复制

)

Cleversafe

表示这比

HDFS

更快、更

稳定、更具扩展性。

 



【本文地址】

公司简介

联系我们

今日新闻

    推荐新闻

    专题文章
      CopyRight 2018-2019 实验室设备网 版权所有