根據(jù)國(guó)外媒體報(bào)道，Yahoo公布了Hadoop的源代碼，Hadoop是一個(gè)開(kāi)源的Java并行編程框架，它是Map/Reduce的開(kāi)源版本，而Map/Reduce則是Google用在計(jì)算機(jī)簇上對(duì)大規(guī)模數(shù)據(jù)進(jìn)行分布式計(jì)算的架構(gòu)。

該源代碼可以再Yahoo的網(wǎng)站上下載（http://developer.yahoo.com/hadoop/distribution/），是0.20 alpha版，其中包括一個(gè)可以讓多個(gè)用戶通過(guò)不同的隊(duì)列共享一個(gè)簇的規(guī)劃器。源代碼中還包含了一段Yahoo添加的用于提高穩(wěn)定性和執(zhí)行性能的代碼段。這些代碼段已經(jīng)加入到了Apache中，不過(guò)在現(xiàn)有的Hadoop源代碼的Apache發(fā)行版中還沒(méi)有這些代碼。Yahoo目前在其產(chǎn)品中提供的是Hadoop 0.18.3版。

Hadoop源代碼是由Doug Cutting開(kāi)發(fā)，它實(shí)現(xiàn)了Map/Reduce的技術(shù)，該技術(shù)可以將應(yīng)用程序分解為多個(gè)工作片段，每一個(gè)片段都可以在簇中的任何一個(gè)節(jié)點(diǎn)中運(yùn)行。它還支持HDFS分布式文件系統(tǒng)，該文件系統(tǒng)將數(shù)據(jù)存儲(chǔ)在簇的節(jié)點(diǎn)中，以此來(lái)提高帶寬利用。

【編輯推薦】

1. Bing、Google、Yahoo三強(qiáng)***大比拼
2. 面向Java開(kāi)發(fā)者的Yahoo富UI組件庫(kù)
3. Yahoo推出新的陳列式廣告系統(tǒng)APT
4. Yahoo發(fā)表Search Assist 強(qiáng)化搜索服務(wù)
5. Yahoo!揭開(kāi)Ajax WebServices的面紗