LightEval
LightEval 是一個輕量級的 LLM 評估套件，Hugging Face 在內部一直使用它，搭配最近發佈的 LLM 資料處理函式庫 datatrove 和 LLM 訓練函式庫 nanotron。
LiveBench
LiveBench 是一個大型語言模型基準測試，每月從不同來源獲得新問題和客觀答案，以進行準確評分。目前包含 6 個類別的 18 個任務，並將陸續增加更多任務。
LightEval
| Launched | |
| Pricing Model | Free |
| Starting Price | |
| Tech used | |
| Tag | Data Science,Llm Benchmark Leaderboard,Developer Tools |
LiveBench
| Launched | 2024-05 |
| Pricing Model | Free |
| Starting Price | |
| Tech used | Google Analytics,Google Tag Manager,Fastly,GitHub Pages,Gzip,Progressive Web App,Varnish |
| Tag | Llm Benchmark Leaderboard |
LightEval Rank/Visit
| Global Rank | |
| Country | |
| Month Visit |
Top 5 Countries
Traffic Sources
LiveBench Rank/Visit
| Global Rank | 111818 |
| Country | United States |
| Month Visit | 409857 |
Top 5 Countries
23.78%
10.9%
4.8%
4.33%
4.32%
United States
China
United Kingdom
Canada
Taiwan
Traffic Sources
4.16%
0.56%
0.07%
6.71%
36.53%
51.95%
social
paidReferrals
mail
referrals
search
direct
Estimated traffic data from Similarweb
What are some alternatives?
When comparing LightEval and LiveBench, you can also consider the following products
liteLLM - 使用 OpenAI 格式呼叫所有 LLM API。使用 Bedrock、Azure、OpenAI、Cohere、Anthropic、Ollama、Sagemaker、HuggingFace、Replicate（100 多個 LLM）
Huggingface's Open LLM Leaderboard - Huggingface 的 Open LLM Leaderboard 目標是促進語言模型評估的開放合作與透明度。
Evaligo - Evaligo：您的一站式AI開發平台。建構、測試並監控生產環境提示，助您大規模交付可靠的AI功能，並避免代價高昂的迴歸問題。
vLLM - LLM 的高通量及記憶體用量有效推論與服務引擎
EasyLLM - EasyLLM 是一個開放原始碼專案，提供便利工具和方法，供您使用開放原始碼和封閉原始碼大型語言模型（LLM）。立即開始或查看文件。