| 微軟 | Spark | 大資料

微軟開源自家Spark資料串流工作管線建置工具Data Accelerator

Data Accelerator能推斷輸入事件的結構,並以使用者設定的規則修改事件後,將資料寫出到輸出資料池

2019-04-22

| 大資料 | Databricks | RStudio

Databricks整合RStudio,讓R語言搭上Spark大資料運算平臺

RStudio整合到Databricks的統一分析平臺,除了提供資料科學家大規模分散式R運算外,還能使用原本Databricks平臺上梳理資料的ETL功能。

2018-06-28

| Hadoop | 大資料 | GPU | Yarn

Hadoop 3.0正式登場,擴充力增加十倍,單一叢集能管10萬臺

微軟貢獻了稱為YARN Federation的功能後,讓Hadoop的叢集節點數量,從原本約一萬臺,增加了十倍,單一叢集可以容納10萬個節點。

2017-12-15

| 資料科學 | 資料科學愛好者 | 大數據 | 大資料 | BigData

陳昇瑋:2016是臺灣資料科學啟動元年,不再只聽,今年真的動起來了

臺灣資料科學協會理事長陳昇瑋觀察,臺灣資料科學的發展,今年開始不一樣了。3年前大家只是聽,沒有人採取行動。但今年開始出現資料科學招募職缺、培訓人才、建立團隊的需求,尤其金融業最積極。

2016-07-16

| 大數據 | 大資料 | 行動App | Yahoo | 雅虎

Yahoo的行動App成長術

分析框架與數據佐證是帶動App成長的2大重點,但最重要的前提是開發者是否願意透過分析式、數據導向式的方式來優化App

2016-06-09

| Teradata | Big Data | 大資料

【2016 Teradata大數據峰會直擊】Teradata朝開源再邁進一步,要幫企業打造資料分析的生態系統

Teradata宣布進一步擁抱開源,目前旗下的開源服務已經拓展至美洲、歐洲及亞洲,現在也要進軍中國市場,將由2年前收購大資料技術整合與諮詢公司Think Big,來協助企業有效部署自己的資料湖、打造如Hadoop、Spark、Kafka、HBase等大資料平臺及採用各項開源套件應用,並建立一個資料分析的生態系統,也就是先前推出的統一資料架構平臺UDA

2016-05-06

| Teradata | 天睿 | Big Data | 大資料 | 物聯網 | IoT

Teradata成立全球IoT分析部門,瞄準物聯網應用的大資料即時分析需求

Teradata宣布設立新的全球IoT分析部門,隸屬於Teradata實驗室之下,將專注開發IoT應用領域的創新資料分析服務,並打造新雲端化的資料分析解決方案。

2016-04-26

| 大資料 | 史丹佛 | 哈佛 | 美國貧富差距 | 預期壽命 | JAMA

美國研究人員利用大資料分析預期壽命與收入的關係,並開放研究資料

美國史丹佛大學、哈佛大學、MIT、麥肯錫公司與財政部的研究人員利用大資料分析探討美國各地區收入和預期壽命之間的關係,並在《美國醫學會期刊》上發表相關論文,而研究資料也開放為公開可用的資料,提供給政策制定者和研究人員使用與參考。

2016-04-14

| google | Spotify | Cloud Platform | 大資料 | 音樂串流

Spotify採用Google雲端平臺服務,每秒可處理上萬筆訊息

Spoify決定採用Google雲端平臺來提供音樂串流服務,而遷移後端資料和技術服務的大工程將分為服務和資料2大部分,Google宣稱,Spotify資料查詢工作將可在1至2分鐘內完成,且可在每秒處理成千上萬筆訊息。

2016-02-25

| 大資料 | 科技部 | 犯罪防治

政府大資料應用初步成果揭露,靠大資料預防犯罪再往前邁進一步

中正大學犯罪防治中心利用新北市警察局刑案資料繪製報案斑點圖,再經由大資料技術分析犯罪成長曲線,下一階段將透過資料探勘和分析技術找出預測模型,協助警方更有效預防犯罪

2016-02-14

| Cloudera | Hadoop | 大資料

Cloudera推出新版大資料管理工具,簡化企業級Hadoop雲端部署工作

Hadoop企業版發行商Cloudera釋出大資料部署和管理工具Cloudera Director 2.0,簡化了在雲端執行Hadoop的工作,如ETL、Modeling、BI分析等,也與Aamzon AWS、Google雲端平臺、微軟Azure合作,提供混合的作業環境。目前已開放免費下載新版Cloudera Director。

2016-01-27

| SMACK | Spark | 大資料 | 巨量資料 | Big Data | Fast Data | 快速資料

SMACK架構成為大資料技術迎戰Fast Data新關鍵

近幾年的API化、行動化和IoT化風潮,為大資料領域帶來了不一樣的新挑戰,資料分析的挑戰不只是大量,還要快速。以新一代大資料分析技術Spark為核心的大資料分析新架構SMACK也因應而生

2016-01-24