因應Big Data的巨量資料處理需求,富士通先預覽一項預計明年推出的巨量資料處理技術。

這項技術的目標瞄準Petabyte等級的資料處理量,他們提出一個線上購物網站的顧客分析情境,針對有300萬個顧客,及300萬件商品的購物網站,每天累積的顧客採購記錄多達1GB,因而每天要處理的資料量可達數個TB。面對這樣的資料量挑戰,富士通這項資料處理技術要挑戰的是,達到幾近即時的資料分析,讓過去只能依賴在夜間執行資料批次處理的情況,改善成可在幾分鐘內就完成。

富士通目前透露的技術關鍵,是透過資料分析軟體與資料管理軟體的共同運作,捨棄過去隨機動態讀取資料的機制,改變為成批資料一次性讀寫。在資料分析軟體端,就會先針對資料存取統一管理,動態分配每一批次存取資料的最佳量,讓資料管理軟體可以一次取用好幾個相鄰的資料區塊,以降低隨機存取的次數,提高存取效率,藉此大幅改善資料處理效能。

2013 Fujitsu Forum大會現場影片  www.youtube.com/user/ithomevideo

熱門新聞

Advertisement