新聞

AI模型評測平臺Arena周一(6/29)宣布,旗下企業版AI模型評測服務AI Evaluations推出8個月,年化收入(Annualized Run-Rate Revenue)已達1億美元。

Arena源自加州大學柏克萊分校2023年的AI模型評測研究專案,最初名為LMArena,以免費AI模型評測平臺打開知名度,使用者只要輸入同一個Prompt,系統便會將其分別交由兩個匿名AI模型回答,再由使用者投票選出較佳答案,藉此蒐集大量真人偏好資料,建立AI模型排行榜,之後於2025年4月正式成立公司。該平臺目前已累積逾7億筆對話、8,200萬次投票及每月超過1,000萬名訪客,成為AI業界觀察模型表現的重要指標之一。

2025年9月,Arena推出企業版AI模型評測服務AI Evaluations,向企業、AI模型實驗室及開發者提供基於真人回饋的模型評測與分析服務,協助客戶了解模型在實際應用中的表現、優勢、弱點及取捨。Arena表示,AI Evaluations也提供可追溯的評測資料樣本及服務水準協議(SLA),協助客戶更有效率地評估及改善AI模型。

Arena表示,年化收入突破1億美元,代表公司已建立可持續的商業模式,未來將持續投資Arena平臺,推出更多功能、工具及AI協作方式。其中,Agent Mode可評估AI代理執行長時間、多步驟任務時的完成率及幻覺率,以補足傳統靜態基準測試的不足;該功能推出僅1個月,每月已處理逾500萬次互動,且每周成長約10%。

此外,Arena也感謝使用者貢獻數億筆對話及數千萬次投票,強調使用者投票不僅支撐免費且獨立的評測平臺,也有助於引導AI模型朝更符合使用者偏好與價值的方向發展。

同樣成立於2024年的AI模型評測平臺Yupp則已於今年3月31日宣布停止營運。當時Yupp表示,該公司原本希望打造AI模型評測的雙邊市場,讓使用者免費使用多個AI模型,再利用真實使用資料協助AI實驗室評估模型,儘管累積逾130萬名使用者,也曾有多家AI實驗室付費使用,但仍未找到足以支撐營運的產品市場契合,因此決定關閉服務。