| MLCommons | AI | 語言模型

MLCommons制定基準測試評估AI模型的安全性

MLCommons AI安全工作小組發布AI Safety v0.5基準測試,可評估語言模型對特定危害類別的反應,預計在今年稍晚推出更全面的v1.0版本

2024-04-18

| Nvidia | MLCommons | 基準測試 | MLPerf Inference

Nvidia在Llama 2 70B與Stable Diffusion XL模型基準測試皆拔得頭籌

MLCommons人工智慧模型推理基準測試套件MLPerf Inference v4加入兩個新模型測試,分別是文生圖模型Stable Diffusion XL和開源語言模型Llama 2 70B,而在資料中心分類皆由Nvidia奪冠

2024-03-29

| MLCommons | AI | 基準測試

MLCommons成立MLPerf個人端工作組,替個人電腦建立機器學習基準測試

考量個人端裝置執行人工智慧模型需求增加,MLCommons成立MLPerf個人端工作組,創建個人端裝置機器學習基準,衡量系統上人工智慧加速解決方案的效能與效率

2024-01-26

| MLCommons | 基準測試 | 模型訓練 | HPC

開放工程聯盟公開新基準測試結果,AI模型訓練效能5年大幅提升49倍

開放工程聯盟(MLCommons)公布最新的MLPerf Training v3.1與MLPerf HPC v3.0基準測試結果,官方表示,訓練效能基準較5年前提升達49倍,顯示人工智慧技術的大幅進步

2023-11-10

| MLCommons | AI | 基準測試

MLCommons成立AIS工作組,推動AI安全基準測試發展

MLCommons成立人工智慧安全工作組,建立一個由多方貢獻的測試平臺,並建立人工智慧安全基準,該平臺將先使用史丹佛大學的HELM框架,針對大型語言模型設立安全基準,對安全性進行評分

2023-10-30

| MLCommons | AI | 模型 | 基準測試

MLCommons發布AI基準測試新套件,強化模型推論和儲存評估

MLCommons推出MLPerf Inference v3.1和MLPerf Storage v0.5基準測試,用於評估人工智慧模型推論和儲存效能,促進技術公平比較

2023-09-12

| MLPerf Training 2.0 | MLCommons | Nvidia | google

Google、Nvidia並列MLPerf機器學習效能標竿測試之冠

在MLPerf Training 2.0測試成果上,Google宣布其TPU v4在自然語言處理、圖片分類及2項物件辨識任務拿下第一,Nvidia則以A100 GPU及新的Jetson AGX Orin SoC系統,在圖像分類、醫療影像、圖像分割、語言辨識等6項測試拿下第一

2022-07-01

| MLCommons | 關鍵字 | 資料集 | 語音辨識 | Multilingual Spoken Words Corpus | 開源 | 語音助理

MLCommons釋出多語言口語大型語音辨識資料集

這個以CC-BY 4.0授權釋出的MSWC資料庫,包含50種語言的音訊資料,而MSWC是其中46種語言第一個開源口語資料集。

2021-12-17