| AWS , | Hudi , | Spark , | Hadoop

Amazon EMR現內建Hudi可簡單操作單筆記錄資料

Amazon EMR用戶現可使用Apache Hudi對單筆紀錄資料進行插入、更新和刪除。

 

2019-11-19

| 微軟 , | Spark , | 大資料

微軟開源自家Spark資料串流工作管線建置工具Data Accelerator

Data Accelerator能推斷輸入事件的結構,並以使用者設定的規則修改事件後,將資料寫出到輸出資料池

2019-04-22

| google , | Cloud Dataproc , | Hadoop , | Spark

Google添加Cloud Dataproc可選元件,更完善支援自動化與先占式運算資源

Cloud Dataproc會在節點不可用時,留存其有狀態資料,可減緩虛擬機器搶占,而導致應用程式執行失敗的問題

2019-04-18

| google , | GCP , | Spark , | Kubernetes

GCP推出Spark Operator,能在雲端以Kubernetes執行Apache Spark

Spark Operator支援Apache Spark 2.4,原生整合Kubernetes,能精細地管理Spark應用程式的生命周期。

2019-02-01

| Kubernetes , | Spark , | 效能優化 , | Container , | Hyperpilot , | Docker , | IT周報

Container周報第56期:大數據分析平臺Spark 2.3新版多了原生K8s支援

Spark在2.3新版中,開始原生支援Kubernetes,可以直接在一個現成Kubernetes 1.7以上版本部署的容器叢集中,執行Spark運算工作

2018-03-19

| Spark , | 資料科學 , | Data Science

結合眾多開放原碼軟體,IBM打造企業級資料科學協同分析平臺

IBM近期推出Data Science Experience的大數據應用解決方案,以Spark大數據運算處理框架為基礎,搭配多種開放原始碼的資料分析、儲存、運算叢集軟體,提供整合式工作平臺

2017-10-31

| 無人機 , | DJI , | Spark , | 資安更新

沒更新不能飛,DJI釋出強制性安全更新,否則就要禁飛

此次Spark的韌體更新主要改善了該無人機的電池管理系統,9月1日以前未更新,Spark將會無法起飛

2017-08-23

| 亞馬遜 , | 社交 , | 線上購物 , | Spark

亞馬遜推出購物社交平台Spark,對朋友分享的商品有興趣可直接買

Spark為一個行動購物社交平台,目前僅推出iOS版app,以Amazon Prime付費會員為對象,用戶可以分享照片及商品,其他人可以表情符號回應,若感興趣還可以進一步線上購買。

2017-07-20

| Hadoop , | Spark , | Cloudera , | Yarn , | Container

原生支援開源大數據平臺,Cloudera推出自助式分析服務

Cloudera今年發表Data Science Workbench的雲端服務,資料科學團隊可直接透過當中提供的網頁介面,運用R、Python、Scala等程式語言來進行分析

2017-07-17

| 大疆 , | 空拍機 , | Spark

大疆迷你空拍機Spark開賣,用手勢就能遙控飛行

Spark具備人臉辨識功能,可偵測辨識使用者臉部自動解鎖啟動空拍機,並可透過簡單的手勢動作,在3公尺內以手勢遙控前進後退、上升下降,降落於手掌中。

2017-06-23

| 大疆 , | 空拍機 , | Spark

大疆新空拍機Spark只有手掌大小,用手勢就能遙控飛行

Spark外型相當輕巧,大小只比可樂罐略小一些,重量300公克,除了遙控器之外,還可透過手勢控制飛行方向、召回空拍機,空拍機售價499美元,為大疆迄今最便宜的無人機產品。

2017-05-25

| Teradata , | Kylo , | 開源 , | GitHub , | 資料湖 , | 大數據 , | Hadoop , | Spark , | NiFi

Teradata釋出開源資料湖管理軟體Kylo,只需9周就能造湖

Teradata於本周三(3/8)釋出開源資料湖管理軟體Kylo,並在GitHub上釋出開源碼供使用者下載。Kylo軟體採用了Apache Hadoop、Spark和NiFi的功能,且不需要編寫程式就能採集資料,加快了使用者的開發速度。

2017-03-10