原生支援開源大數據平臺,Cloudera推出自助式分析服務

Cloudera今年發表Data Science Workbench的雲端服務,資料科學團隊可直接透過當中提供的網頁介面,運用R、Python、Scala等程式語言來進行分析

2017-07-17

臺灣資料工程協會即將成立,大數據平臺Hadoop之父也來站臺

大數據分析不只需要資料科學家或資料分析師,實務上,國外常見還需要資料工程師和資料架構師的角色,培養這兩類人才正是臺灣資料工程協會的成立目的。

2017-07-11

4千多臺Hadoop伺服器HDFS不設防,累計破5PB資料任意存取

在網路上曝光不設防的Hadoop主機,有1900個公開HDFS主機節點位於美國,另有1426個位於中國,且幾乎所有的HDFS主機都置放在雲端代管服務中,有1059個放置在Amazon,另有507個放置在阿里巴巴

2017-06-04

暌違2年,Hadoop終於再釋2.8新版,一次推出近3千項更新

從2015年6月釋出2.7版之後,隔了快兩年,Hadoop終於又有大改版,Apache基金會近日發布了Hadoop 2.8版,一次推出了2,919項更新功能或新特色。

2017-03-29

Teradata釋出開源資料湖管理軟體Kylo,只需9周就能造湖

Teradata於本周三(3/8)釋出開源資料湖管理軟體Kylo,並在GitHub上釋出開源碼供使用者下載。Kylo軟體採用了Apache Hadoop、Spark和NiFi的功能,且不需要編寫程式就能採集資料,加快了使用者的開發速度。

2017-03-10

2017年第一波全球性威脅,勒索攻擊攻陷4萬臺企業資料庫

2017年才剛開始,勒索攻擊威脅突然發難,數萬MongoDB遭駭;Elasticsearch和Hadoop叢集相繼淪陷,駭客還上網兜售勒索攻擊工具包和13萬肉票IP,連大型資安公司5百多TB的分析資料都全數被刪除

2017-02-12

資安周報第58期:勒索攻擊大舉鎖定後端系統,下個目標是Hadoop

今年剛過2周,超過3萬個企業MongoDB資料庫、4千多臺ElasticSearch伺服器遭破壞勒索,付贖金才能取回資料,資安專家警告:下一個遭駭客鎖定的目標是Hadoop,已有少數災情出現

2017-01-19

Hadoop專家剖析:Hadoop老兵不死,只是凋零,Spark將是新的運算核心

臺灣Hadoop社群共同創辦人王耀聰今日在Big Data Innovation Summit 2016高峰會上提出他對於Hadoop生態發展趨勢的最新觀察,他說,縱使技術不斷演進,Hadoop未來仍將會繼續存在,只是會慢慢萎縮,無庸置疑,Spark將取代MapReduce成為Hadoop新的運算核心。

2016-12-06

專訪Hadoop之父Doug Cutting

Hadoop今年十歲了,這項技術的問世開啟了大數據時代,也孕育了無數大數據開源技術。然而在Spark串流運算等新興大數據技術興起之際,Hadoop是否式微了,且看Hadoop之父怎麼說。

2016-09-18

涵蓋開源IaaS、容器與大數據應用,VCE超融合架構擴增新機型

看準快速建立IT基礎架構來支援DevOps的應用商機,VCE在旗下超融合基礎架構VxRack System系列,新增了Neutrino Node的整合設備來因應

2016-08-16

Apache頂級專案再添一套大資料串流和批次分析引擎Apex,連奇異公司都在用

Apache大資料串流和批次處理的通用平臺Apex晉升為頂級專案,連大廠商如奇異公司、美國智慧電網供應商銀泉電網公司等都採用,Apex具備管線化處理架構,可以進行即時和批次的資料處理,另外,Apex也簡化Hadoop應用程式的開發和產品化,降低大資料技術門檻,以及加速產品上市。

2016-04-29

Google大資料管理平臺Cloud Dataproc正式上市,執行資料叢集快10倍

Google雲端管理服務Cloud Dataproc推出GA版,支援Hadoop 2.7.2、Spark 1.6、Hive 1.2.1和Pig 0.15以下的版本,且支援客製化虛擬機器服務,以分鐘計價。同時,Google也宣布了Cloud Dataproc的技術和服務合作夥伴。

2016-02-25