偷偷摘套内射激情视频,久久精品99国产国产精,中文字幕无线乱码人妻,中文在线中文a,性爽19p

Hadoop危機(jī)?替代HDFS的8個(gè)絕佳方案

運(yùn)維 系統(tǒng)運(yùn)維 Hadoop
HDFS(Hadoop Distributed File System)是Hadoop項(xiàng)目的核心子項(xiàng)目,是分布式計(jì)算中數(shù)據(jù)存儲(chǔ)管理的基礎(chǔ),坦白說(shuō)HDFS是一個(gè)不錯(cuò)的分布式文件系統(tǒng),它有很多的優(yōu)點(diǎn),但也存在有一些缺點(diǎn),包括:不適合低延遲數(shù)據(jù)訪問(wèn)、無(wú)法高效存儲(chǔ)大量小文件、不支持多用戶寫(xiě)入及任意修改文件。

HDFS(Hadoop Distributed File System)是Hadoop項(xiàng)目的核心子項(xiàng)目,是分布式計(jì)算中數(shù)據(jù)存儲(chǔ)管理的基礎(chǔ),坦白說(shuō)HDFS是一個(gè)不錯(cuò)的分布式文件系統(tǒng),它有很多的優(yōu)點(diǎn),但也存在有一些缺點(diǎn),包括:不適合低延遲數(shù)據(jù)訪問(wèn)、無(wú)法高效存儲(chǔ)大量小文件、不支持多用戶寫(xiě)入及任意修改文件。

Apache軟件基金會(huì)成立的時(shí)候,HDFS就一直在想辦法提高它的性能和可用性,坦白說(shuō),這也許對(duì)試點(diǎn)項(xiàng)目、非常規(guī)項(xiàng)目、要求不嚴(yán)格的大環(huán)境中比較適用,但是對(duì)于某些Hadoop用戶來(lái)說(shuō),他們對(duì)于性能、可用性、企業(yè)級(jí)特性有較高的要求,且注重直接附加存儲(chǔ)(DAS)架構(gòu),特別是老版本的Hadoop沒(méi)有高性能的主節(jié)點(diǎn),那么接下來(lái)8個(gè)產(chǎn)品就是代替HDFS的絕佳方案。

1. Cassandra (DataStax)

并非一個(gè)完全的文件系統(tǒng),而是一個(gè)開(kāi)源、NoSQL 鍵值(key-value)商店。這給依靠快速數(shù)據(jù)訪問(wèn)的Web 應(yīng)用多了一個(gè)HDFS選擇。簡(jiǎn)單來(lái)說(shuō)它把Hadoop融合在Cassandra里面,支持Web應(yīng)用通過(guò)Hadoop快速訪問(wèn)數(shù)據(jù), 而Hadoop可以快速訪問(wèn)流入Cassandra的數(shù)據(jù)。

2. Ceph

Ceph 是一個(gè)開(kāi)源、多管齊下的操作系統(tǒng),因?yàn)槠涓咝阅懿⑿形募到y(tǒng)的特性,有人甚至認(rèn)為它是基于Hadoop環(huán)境下的HDFS的接班人,因?yàn)樽?010年就有研究者在尋找這個(gè)特性。

3. Cleversafe:分散存儲(chǔ)網(wǎng)絡(luò)

本周一Cleversafe宣布將融合Hadoop的并行編程技術(shù)和自己的分散存貯網(wǎng)絡(luò)。其原理是通過(guò)把整個(gè)元數(shù)據(jù)分布在集群中(不是依靠單個(gè)主節(jié)點(diǎn)、不是依靠復(fù)制),Cleversafe表示這比HDFS更快、更穩(wěn)定、更具擴(kuò)展性。

4. GPFS (IBM)

IBM一直在向高性能要求的用戶銷售其并行文件系統(tǒng),包括世界上最快的超級(jí)電腦,2010年它推出了基于Hadoop的GPFS, 并宣布GPFS不共享集群版本比Hadoop快多了,因?yàn)?/p>

它在內(nèi)核級(jí)別中運(yùn)行,而不是在操作系統(tǒng)中運(yùn)行例如HDFS。

5. Isilon (EMC)

EMC提供Hadoop發(fā)行版已經(jīng)一年了,但2012年1月轉(zhuǎn)型為HDFS企業(yè)級(jí)別的新方案——Isilon 的 OneFS文件系統(tǒng)。因?yàn)镮silon可以讀取 NFS, CIFS以及 HDFS 協(xié)議, 一個(gè)單獨(dú)的 Isilon NAS系統(tǒng)可以攝入、處理、分析數(shù)據(jù)。

6. Lustre

HPC存儲(chǔ)提供商Xyratex 增在2011年的一份報(bào)道中寫(xiě)到, 基于Lustre的集群會(huì)比基于HDFS的集群更快更便宜。

7. MapR 文件系統(tǒng)

MapR 文件系統(tǒng)在業(yè)內(nèi)已經(jīng)具有一定知名度了,不僅MapR宣布它自己的文件系統(tǒng)比HDFS快2-5倍(實(shí)際上有20倍),它還具有鏡像、快照、高性能這些企業(yè)用戶喜歡的特點(diǎn)。

8. NetApp Hadoop開(kāi)放方案

NetApp重新改版了物理Hadoop結(jié)構(gòu):把HDFS放在磁盤(pán)陣列中,通過(guò)這樣來(lái)達(dá)到更快、更穩(wěn)定、更安全的Hadoop工作。

責(zé)任編輯:黃丹 來(lái)源: 雷鋒網(wǎng)
相關(guān)推薦

2020-11-11 18:56:32

工具代碼開(kāi)發(fā)

2021-09-29 15:49:37

Exchange開(kāi)源用戶開(kāi)發(fā)者

2019-08-28 08:00:00

Splunk分析日志系統(tǒng)管理員

2022-03-13 10:48:52

容器Docker容器管理軟件

2024-10-16 08:36:03

2022-08-02 16:54:23

Kubernetes容器工具

2025-04-20 18:54:24

工具Tailwind開(kāi)發(fā)

2023-07-17 11:43:07

2013-04-23 11:17:47

Hadoop

2023-01-05 13:19:38

2022-05-27 08:31:24

Coolify開(kāi)源

2018-05-15 14:55:23

VMwarePKS方案

2009-03-24 19:01:00

存儲(chǔ)虛擬化經(jīng)濟(jì)危機(jī)

2010-06-07 13:35:16

Hadoop簡(jiǎn)介

2012-07-11 17:21:23

HadoopHDFS

2023-07-10 16:21:53

2010-06-03 15:13:34

Hadoop Hdfs

2010-06-17 22:16:48

2022-03-03 09:34:28

CentOS 8服務(wù)器替代

2022-09-07 08:47:50

NGINXLinuxWeb 服務(wù)器
點(diǎn)贊
收藏

51CTO技術(shù)棧公眾號(hào)