Hadoop并非完美:8个代替HDFS的绝佳方案 | 您所在的位置:网站首页 › hdfs和hadoop › Hadoop并非完美:8个代替HDFS的绝佳方案 |
Hadoop 并非完美: 8 个代替 HDFS 的绝佳方案
HDFS(HadoopDistributedFileSystem) 是 Hadoop 项目的核心子项 目,是分布式计算中数据存储管理的基础,坦白说 HDFS 是一个不错 的分布式文件系统,它有很多的优点,但也存在有一些缺点,包括: 不适合低延迟数据访问、无法高效存储大量小文件、不支持多用户 写入及任意修改文件。
Apache 软件基金会成立的时候, HDFS 就一直在想办法提高它的 性能和可用性,坦白说,这也许对试点项目、非常规项目、要求不 严格的大环境中比较适用,但是对于某些 Hadoop 用户来说,他们对 于性能、可用性、企业级特性有较高的要求,且注重直接附加存储 (DAS) 架构,特别是老版本的 Hadoop 没有高性能的主节点,那么接 下来 8 个产品就是代替 HDFS 的绝佳方案。
1.Cassandra(DataStax)
并非一个完全的文件系统,而是一个开源、 NoSQL 键值 (key- value) 商店。这给依靠快速数据访问的 Web 应用多了一个 HDFS 选择。 简单来说它把 Hadoop 融合在 Cassandra 里面,支持 Web 应用通过 Hadoop 快速访问数据 , 而 Hadoop 可以快速访问流入 Cassandra 的数 据。
2.Ceph
Ceph 是一个开源、多管齐下的操作系统,因为其高性能并行文 件系统的特性,有人甚至认为它是基于 Hadoop 环境下的 HDFS 的接 班人,因为自 2010 年就有研究者在寻找这个特性。
3.Cleversafe :分散存储网络
本周一 Cleversafe 宣布将融合 Hadoop 的并行编程技术和自己的 分散存贮网络。其原理是通过把整个元数据分布在集群中 ( 不是依靠 单个主节点、不是依靠复制 ) , Cleversafe 表示这比 HDFS 更快、更 稳定、更具扩展性。
|
CopyRight 2018-2019 实验室设备网 版权所有 |