| SMACK | Spark | 大資料 | 巨量資料 | Big Data | Fast Data | 快速資料

SMACK架構成為大資料技術迎戰Fast Data新關鍵

近幾年的API化、行動化和IoT化風潮,為大資料領域帶來了不一樣的新挑戰,資料分析的挑戰不只是大量,還要快速。以新一代大資料分析技術Spark為核心的大資料分析新架構SMACK也因應而生

2016-01-24

| Spark | 大資料 | 巨量資料 | Big Data | APT | 趨勢科技 | 串流分析

趨勢科技用Spark打造大資料分析架構,克服單日GB級APT資料分析挑戰

趨勢科技透過Spark平臺建立雙資料流的大資料分析架構,不只不需要儲存每天暴增的Log資料,還能將同一支程式運用在即時處理和批次處理兩種不同的資料處理模式上

2016-01-24

| Spark | 大資料 | 巨量資料 | Big Data | 批次 | 串流

大資料技術新秀Spark如何通吃批次和串流資料分析能力

比Hadoop晚4年誕生的Spark,採取了和Hadoop不一樣的架構,能讓擅長大資料分析的社群來協助開發各種大資料分析模組,又可以讓擅長叢集運算和底層架構的專家來優化底層資源管理,因此吸引了大批開發者參與

2016-01-24

| 回顧展望 | 2016趨勢 | Big Data | SMACK | Hadoop | Spark | Mesos | Akka | Cassandra | Kafka

【大資料2016趨勢分析】超夯Big Data新架構SMACK崛起

Hadoop退居幕後,Spark竄紅,由Spark、Mesos、Akka、Cassandra和Kafka構成的新興大資料技術組合SMACK成矽谷最夯必備基礎

2016-01-09

| Big Data | Mesos | Spark | Kafka | Hadoop

【BigData大會搶先看】 為何世界排序冠軍Spark和Siri後端關鍵技術Mesos都來自同一個團隊?

為何打敗Hadoop創下世界資料排序冠軍的Spark,和蘋果Siri撐住全球流量的關鍵技術Mesos,都出自柏克萊大學的一間實驗室AMPLab?Mesos技術的關鍵開發者即將在臺現身

2015-12-08

| 大資料 | Dataproc | Google雲端平台 | Hadoop | Spark

Google推出Cloud Dataproc雲端服務,要讓Hadoop及Spark叢集管理更容易

Google宣布推出Cloud Dataproc雲端服務,號稱可讓Hadoop及Spark叢集的建立更快、更省成本,管理也更容易。

2015-09-24

| 大資料 | Big Data | Hadoop | Spark | Graph | IBM | System G

IBM首席科學家林清詠:Hadoop熱潮不再,Spark爆紅,大資料未來關鍵基礎是圖學

IBM首席科學家林清詠認為,要在多樣化的資料中找出相關性,關鍵在於資料之間的網絡關係(Network)和圖學(Graph),圖學將是大資料未來的關鍵基礎,如何快速將多樣性的資料串連,找出關聯性,也是大資料要解決的關鍵問題。

2015-08-27

| IBM | 大資料 | Spark | 精選

IBM加入Apache Spark社群,打算培育百萬名資料科學家:可能是未來十年最重要的開放源碼計畫

IBM宣佈加入Apache Spark社群,以及多項與Spark專案相關的計畫,IBM把這次的宣布稱為「可能是未來10年最重要的開放源碼新計畫」,IBM並計畫培育超過一百萬名資料科學家。

2015-06-16

| Spark | 王建興 | 程式人

分散式計算的新角色Spark

這幾年以來,大資料應用風行,Hadoop 的MapReduce受到普遍採用,幾乎無人不知、無人不曉,然而,最近有個新興的Spark平臺,以更佳的處理能力,趁勢崛起,使得我們在相關技術上多了一種選擇

2015-02-26

| google | Cloudera | Spark | Dataflow

大資料雙強聯手,世界排序冠軍Spark擁抱Google新PB級資料分析技術Dataflow

Cloudera與Google攜手合作,加速雲端環境大資料分析,現在Google Dataflow可在Spark上執行,原始碼可在GitHub上取得,不過,Google的此項服務還在Alpha階段測試

2015-01-23

| Spark | Big Data | Hadoop | 精選

Spark擊敗Hadoop刷新資料排序世界記錄

近日在Sort Benchmark Competition(資料排序基準競賽)中,Spark不到30分鐘就完成排序多達100 TB的資料量,打破了由Hadoop保有72分鐘的世界記錄

2014-11-21