Yahoo!在Hadoop高峰會推出Hadoop發行套件(Distribution of Hadoop),向社群承諾以開放策略加速Hadoop生態發展。

Hadoop為Yahoo!所採用的雲端運算技術,係由Doug Cutting在2005年以所開發,具有分散式運算、運算加速及運算節點備援的穩定特性,大力推展該技術。Yahoo!於2006年邀Doug Cutting加入。也在Apache軟體基金會底下與Google、Amazon等一同支持Hadoop專案發展。

為了表現對Hadoop的支持,Yahoo!宣佈推出的Hadoop發行套件已可在Yahoo!開發者社群網路(Yahoo! Developer Network)取得,該套件並已通過全球最大Hadoop叢集測試和佈建。

Yahoo亞洲區科技研發工程部總監許明彥表示,開發者經由使用Yahoo!自己測試通過推出的Hadoop發行套件,可以降低開發過程中可能面臨的bug,降低開發過程的困難度,Yahoo!秉持著開放的策略與社群分享自己的經驗。

事實上Yahoo!去年2月就宣佈全球最大的Hadoop應用實例,於2千台伺服器上安裝執行一萬個Hadoop虛擬機器,用以分散運算超過5PB的網頁內容,分析1兆個網路連結以建立索引資料,並壓縮索引資料庫至300TB。

目前Yahoo!已將Hadoop技術實際用於旗下Yahoo!搜尋工作上,例如比對同義字、熱門關鍵字分析等等,其他如電子郵件、內容、廣告等業務也運用Hadoop分散式運算技術,因應全球的龐大工作要求。

上個月Yahoo!產品及雲端運算首席科學家Raghu Ramakrishnan來台時指出,透過支持Hadoop,Yahoo!致力於開放策略與開發社群共享,同時透過分散運算減少資料中心用電、冷卻等浪費。

不只全球社群,Yahoo!也在台灣推廣Hadoop,與本地開發社群合作,例如去年在開發者聚會OSDC中安排專人講師介紹Hadoop相關技術。此外,Yahoo!也和國內交大、中央等學校合作,在Web 2.0等一學期的課程中介紹Hadoop,讓青年學子認識這項雲端運算技術。

熱門新聞

Advertisement