| 通用AI | Transformer | Geoffrey Hinton | 電腦視覺 | NLP | IT周報

AI趨勢周報第159期:通用AI另一嘗試!臉書用Transformer打造熟練7種任務的AI

臉書用Transformer架構,打造出熟練7種任務的AI模型,且都用同一套參數;如何讓AI更懂一張圖中的千言萬語?Google AI大神Hinton:試試融合5種AI的GLOM;ML模型錯在哪秀給你看!微軟推出ML可視化錯誤分析工具包;HPE邊緣運算系統首次進駐太空站;30張圖片就能訓練模型!AWS推出工業瑕疵檢測服務。

2021-03-04

| 推薦模型 | 模型壓縮 | 數位病理 | 全玻片 | Transformer | 聯合學習 | AI | IT周報

AI趨勢周報第158期:推薦模型太大跑不動?臉書最新壓縮術讓模型縮小成百分之一

臉書發表推薦模型壓縮技術TT-Rec,可將模型壓縮至原本的112分之一,且表現不受太大影響;數位病理AI新創雲象科技費時3年研究,找出新方法突破算力障礙,讓電腦秒懂上億畫素的病理全玻片影像;Transformer不只突破NLP天花板,還完勝蛋白質預測權威方法;找模型好麻煩?Google開源模型自動搜尋工具幫你挑最好的。

2021-02-24

| AI人才 | 資料科學 | 3D物件資料集 | YOLOv4 | Transformer | Benchmark | IT周報

AI趨勢周報第150期:如何成為AI專家?德國AI新創超詳細AI人才養成藍圖3周就獲得GitHub 5,300顆星大推

德國軟體新創AMAI將自家技術訓練指南:AI專家藍圖(AI Expert Roadmap)釋出在GitHub上,三周來就獲得5,300顆星星。AI專家藍圖涵蓋五大類專家養成途徑,如資料科學、機器學習、深度學習、資料工程、大數據工程,在每個類別中,還提供關鍵技能和學習資源,像是附程式碼的論文、版本控制、更新日誌、經典類神經網路等。

2020-11-20

| AI | 卷積網路 | Transformer | 影像辨識 | Performer

AI趨勢周報第146期:再見了卷積網路?一篇Transformer匿名論文引起ML社群圍觀

卷積網路CNN一直是影像辨識的首選,但近日一篇匿名論文(An Image Is Worth 16×16 Words)引起ML社群關注,指出直接用Transformer來處理影像Patch序列,其影像分類能力遠比CNN出色,連DeepMind、Tesla AI總監和發明AlexNet的OpenAI首席科學家都表示期待。該論文正接受AI頂級盛會ICLR 2021的評審,因此無法透露作者姓名。

 
 
 
 

2020-10-15

| google | 預訓練 | Transformer

Google發布與人類摘要能力相當的抽象文本摘要模型PEGASUS

研究人員挖空文件中的部分句子,要模型恢復遭移除的句子,藉以訓練模型摘要文本的能力,只要再經監督範例資料集微調,效能表現就與人類相去不遠

2020-06-12

| AI | IT周報 | Transformer | 電腦視覺 | OpenAI | GPT-3 | 百度 | 量子機器學習 | google | 聯合分析

AI趨勢周報第134期:Transformer也能用來解電腦視覺任務!臉書發表DETR模型

臉書日前發表影像辨識模型DETR,將常用於自然語言任務的Transformer架構,也用來應付電腦視覺問題。OpenAI最近發布超大自然語言模型GPT-3,用了1,750億個參數,在一系列測試中精準度都達高階(SOTA)表現。DeepMind最新研究發現,句法偏差可改善BERT表現。百度發布量子機器學習平臺Paddle Quantum.

2020-06-04

| 微軟 | 語音轉文字 | Transformer | 三星 | 對抗生成網路 | 臉書 | Pythia | 倫敦國王學院 | Nvidia | 智慧醫療 | JINS | MIT | 對話機器人 | 耐能 | AI晶片 | AI | IT周報

AI趨勢周報第86期:微軟發表文字轉語音新成果,只要少數樣本就能訓練出準確度99.84%的模型

微軟發表一款文字轉語音AI,只用共20分鐘長的200個音頻樣本及其文字檔,就開發出準確度達99.84%的模型。另一方面,三星近日發表一項AI研究,只需幾張臉部表情的影像,就能讓靜態的人物肖像開口說話。此外,日本平價眼鏡連鎖品牌JINS宣布引進JINS Brain AI智慧判讀服務至臺灣分店,來幫臺灣消費者「挑眼鏡」。

2019-05-29