Chatbot Arena（チャットボットアリーナ）

概要\n\nChatbot Arena(チャットボット アリーナ)はLMSYS Org(UC Berkeley) 2023年5月公開のChatbot Arenaで、Pro 業界Pro Mainstream 人間評価Bench先駆 + Pro UC Berkeley LMSYS + Pro Wei-Lin Chiang Pro主要研究員 + Pro Crowdsourced人間Pairwise比較 + Pro Elo Rating + Pro Apache 2.0 + Pro 人間評価Bench先駆 Heritage継承代表機 + Pro Elo Rating Heritage継承代表機 + 累計2023-2026年3年Heritage Pro Top独占代表機。Chatbot Arena歴史: 2023-Pro LMSYS Org設立Pro Famous(UC Berkeley + Pro 業界Pro Famous LLM研究組織) + 2023-03-Pro Vicuna公開Pro Famous(Pro LMSYS発Open Source LLM + LLaMA基盤) + 2023-05-Pro Chatbot Arena公開Pro Famous Story類無し(Pro 業界Pro Mainstream 人間評価Bench先駆 + Pro Crowdsourced + Pro Elo Rating) + 2024-Pro Vision Arena/Hard Prompts Arena + 2024-09-Pro LMArena社設立 + 2025-04-Pro LMArena $100M Series A調達 + 2025-Pro WebDev Arena/Search Arena + 累計2023-2026年3年Heritage継承。Chatbot Arena主要機能: (1)LMSYS Org主導(米国カリフォルニア州Berkeley + UC Berkeley + Wei-Lin Chiang Pro主要研究員 + Pro 業界Pro Famous LLM研究組織)、(2)Pro 業界Pro Mainstream 人間評価Bench先駆(Pro 業界Pro Mainstream 人間評価Bench業界出発点)、(3)Pro Wei-Lin Chiang Pro主要研究員、(4)Pro Crowdsourced人間Pairwise比較Pro Famous(Pro 業界Pro 人間評価業界出発点)、(5)Pro Elo Rating、(6)Pro Apache 2.0 License + Pro Open Source、(7)Pro 200+モデル登録、(8)Pro 100万+ Battle集計、(9)Pro Vision Arena + Coding Arena + Hard Prompts Arena、(10)Pro Style Control + Multi-Lingual Arena、(11)Pro 2023-Vicuna公開(LMSYS発Open Source LLM)、(12)Pro 2024-09-LMArena社設立、(13)Pro 2025-04-LMArena $100M Series A調達(Pro Andreessen Horowitz/UC Investments等)、(14)Pro 2025-WebDev Arena/Search Arena、(15)Pro 評価対象: GPT-4o/o3/Claude Opus 4.7/Gemini 3/Grok 4/Llama 4/DeepSeek V3、(16)Pro 人間評価Bench先駆 Heritage継承代表機 + Pro Elo Rating Heritage継承代表機 + 累計2023-2026年3年Heritage Pro Top独占代表機 + Pro業界History派 + Pro Chatbot Arena派 + Pro LMSYS派 + Pro UC Berkeley派 + Pro Wei-Lin Chiang派 + Pro 人間評価派 + Pro Crowdsourced派 + Pro Pairwise比較派 + Pro Elo Rating派 + Pro Apache 2.0派 + Pro 200+モデル派 + Pro 100万+ Battle派 + Pro Vision Arena派 + Pro Coding Arena派 + Pro Hard Prompts派 + Pro Style Control派 + Pro Multi-Lingual派 + Pro Vicuna派 + Pro LMArena社派 + Pro $100M派 + Pro a16z派 + Pro WebDev Arena派 + Pro Search Arena派 + Pro GPT-4o派 + Pro o3派 + Pro Claude Opus 4.7派 + Pro Gemini 3派 + Pro Grok 4派 + Pro DeepSeek V3派 + Pro 3年Heritage派 真価発揮。Chatbot Arena vs 競合AI Bench比較: Chatbot Arena(2023-05、本レコード、LMSYS + Pro 人間評価Bench先駆 + 累計3年Heritage)・Vicuna(2023-03)・Vision Arena(2024)・Hard Prompts Arena(2024)・LMArena社(2024-09)・$100M Series A(2025-04)・WebDev/Search Arena(2025)・MT-Bench(2023 + LMSYS 80問)・MMLU(2020-09 + UC Berkeley)・HumanEval(2021-07 + OpenAI)・SWE-Bench(2024-04 + Princeton)・GPQA Diamond(2023)・HLE(2025)・LiveCodeBench(2024)・AlpacaEval(2023)・Arena-Hard(2024)、Chatbot Arena = Pro 人間評価Bench先駆 + Pro Crowdsourced + Pro Elo Rating + Pro Apache 2.0 + Pro 200+モデル + 3年Heritage、Vicuna/Vision/Hard Prompts/LMArena社/$100M/WebDev/Search Arena = Pro系譜、MT-Bench/MMLU/HumanEval/SWE-Bench/GPQA/HLE/LiveCodeBench/AlpacaEval/Arena-Hard = Pro主要競合。Chatbot Arena歴史的影響: (1)Pro 業界Pro Mainstream 人間評価Bench先駆 + 3年Heritage、(2)Pro LMSYS UC Berkeley + Wei-Lin Chiang、(3)Pro Crowdsourced人間Pairwise比較、(4)Pro Elo Rating + Pro 200+モデル + Pro 100万+ Battle、(5)Pro Vision Arena/Coding Arena/Hard Prompts Arena、(6)Pro Vicuna 2023-03 LMSYS発Open Source LLM、(7)Pro 2024-09 LMArena社設立、(8)Pro 2025-04 LMArena $100M Series A、(9)Pro Apache 2.0 + Pro Open Source、(10)Pro業界History派 + Pro Chatbot Arena派 + Pro LMSYS派 + Pro 人間評価派 + Pro 3年派 真価発揮。Future: 2023-03-Vicuna + 2023-05-Chatbot Arena + 2024-09-LMArena社 + 2025-04-$100M + 2025-WebDev/Search Arena + Pro Mainstream 人間評価Bench業界Top独占継続Heritage継続。\n\n## 主な特徴・仕組み\n\n- : 2023-05 LMSYS Chatbot Arena\n- : UC Berkeley + 米国カリフォルニア州Berkeley\n- \n- \n- : 業界Pro 人間評価業界出発点\n- : Chess由来Rating System\n- \n- \n- \n- \n- \n- : LMSYS発Open Source LLM (LLaMA基盤)\n- \n- : Andreessen Horowitz + UC Investments\n- \n- : GPT-4o/o3/Claude Opus 4.7/Gemini 3/Grok 4/Llama 4/DeepSeek V3\n- : Vicuna 2023-03/Chatbot Arena 2023-05/Vision Arena 2024/Hard Prompts 2024/LMArena社 2024-09/$100M 2025-04/WebDev Arena 2025/Search Arena 2025\n- \n\n## スペック比較表\n\n| AI Bench | 公開年 | 開発元 | 評価方式 | 規模 |\n|----------|--------|--------|---------|------|\n| MMLU | 2020-09 | UC Berkeley | Multiple Choice | 57科目 |\n| HumanEval | 2021-07 | OpenAI | Pass@k | 164問 |\n| MBPP | 2021 | Google | Pass@k | 974問 |\n| Vicuna | 2023-03 | LMSYS | Open Source LLM | 13B/7B |\n| | | | | |\n| MT-Bench | 2023 | LMSYS | GPT-4 Judge | 80問 |\n| GPQA Diamond | 2023 | Hendrycks | Multiple Choice | 198問 |\n| AlpacaEval | 2023 | Stanford | GPT-4 Judge | 805問 |\n| SWE-Bench | 2024-04 | Princeton | Patch生成 | 2,294 Issues |\n| Arena-Hard | 2024 | LMSYS | Hard Prompts | 500問 |\n| Vision Arena | 2024 | LMSYS | 人間Pairwise | - |\n| LiveCodeBench | 2024 | UCB/MIT | LeetCode連動 | - |\n| HLE | 2025 | Hendrycks | Multi形式 | 3,000問 |\n| WebDev Arena | 2025 | LMArena社 | 人間Pairwise | - |\n\n## 具体例・対応製品\n\n- : 人間Pairwise + Elo Rating\n- : LMSYS発Open Source LLM\n- : GPT-4 Judge 80問\n- \n- : Andreessen Horowitz + UC Investments\n- \n\n## 自作PCでの選び方・注意点\n\nChatbot Arena歴史Concept学習 + 現代Pro Chatbot Arena Workflow例: (A)現代Pro Chatbot Arena評価構成: Chatbot Arena + Vision Arena + Hard Prompts Arena + Elo Rating + Pro 人間評価先駆、(B)Pro代替¥0構成: MT-Bench + GPT-4 Judge + 同等LMSYS、(C)歴史Chatbot Arena Heritage学習¥0構成: LMSYS設立 2023 → Vicuna 2023-03 → Chatbot Arena 2023-05 → MT-Bench 2023 → Vision Arena 2024 → LMArena社 2024-09 → $100M Series A 2025-04 → WebDev Arena 2025 = 3年Pro Chatbot Arena Heritage学習Pro Reference。Chatbot Arena歴史 選択ポイント: (1)Pro 業界Pro Mainstream 人間評価Bench先駆 + 3年Heritage = 2023-05 Chatbot Arena公開Pro Famous Story類無し + Pro 業界Pro Mainstream 人間評価Bench先駆 + 累計2023-2026年3年Pro Mainstream 人間評価Bench業界Top独占Heritage Pro Reference Heritage Pro Top独占 + Pro 人間評価派 + Pro Bench派 + Pro 先駆派 + Pro 3年派 真価発揮、Pro 人間評価派 + Pro 3年派 真価発揮、(2)Pro LMSYS UC Berkeley + Pro Wei-Lin Chiang + Pro Vicuna = Pro LMSYS Org主導(米国カリフォルニア州Berkeley + UC Berkeley + Wei-Lin Chiang Pro主要研究員 + Pro 業界Pro Famous LLM研究組織) + Pro 2023-03-Vicuna公開Pro Famous(Pro LMSYS発Open Source LLM + LLaMA基盤) + 業界Pro Famous LMSYS + UC Berkeley + Wei-Lin Chiang + Vicuna Heritage Pro Reference Heritage Pro Top独占 + Pro LMSYS派 + Pro UC Berkeley派 + Pro Wei-Lin Chiang派 + Pro Vicuna派 + Pro LLaMA基盤派 + Pro Open Source LLM派 真価発揮、Pro LMSYS派 + Pro Vicuna派 真価発揮、(3)Pro Crowdsourced + Pro Pairwise比較 + Pro Elo Rating = Pro Crowdsourced人間Pairwise比較Pro Famous(Pro 業界Pro 人間評価業界出発点) + Pro Elo Rating + Pro 200+モデル登録 + Pro 100万+ Battle集計 + 業界Pro Famous Crowdsourced + Pairwise比較 + Elo Rating + 200+モデル + 100万+ Battle Heritage Pro Reference Heritage Pro Top独占 + Pro Crowdsourced派 + Pro Pairwise派 + Pro Elo派 + Pro Chess由来派 + Pro 200+モデル派 + Pro 100万+ Battle派 真価発揮、Pro Crowdsourced派 + Pro Elo派 真価発揮、(4)Pro Vision/Coding/Hard Prompts Arena + Pro Multi-Lingual = Pro Vision Arena + Coding Arena + Hard Prompts Arena + Pro Style Control + Multi-Lingual Arena + 業界Pro Famous Vision Arena + Coding Arena + Hard Prompts + Multi-Lingual Heritage Pro Reference Heritage Pro Top独占 + Pro Vision Arena派 + Pro Coding Arena派 + Pro Hard Prompts派 + Pro Style Control派 + Pro Multi-Lingual派 真価発揮、Pro Vision Arena派 + Pro Hard Prompts派 真価発揮、(5)Pro LMArena社 + Pro $100M + Pro Multi-Generation = Pro 2024-09-LMArena社設立 + Pro 2025-04-LMArena $100M Series A調達(Pro Andreessen Horowitz/UC Investments等) + Pro 2025-WebDev Arena/Search Arena + Pro 評価対象: GPT-4o/o3/Claude Opus 4.7/Gemini 3/Grok 4/Llama 4/DeepSeek V3 + Pro Chatbot Arena系譜(Vicuna 2023-03/Chatbot Arena 2023-05/Vision Arena 2024/Hard Prompts 2024/LMArena社 2024-09/$100M 2025-04/WebDev Arena 2025/Search Arena 2025継承) + Pro Multi-Generation Heritage + 業界Pro Famous LMArena社 + $100M Series A + Andreessen Horowitz + Multi-Generation Heritage Pro Reference Heritage Pro Top独占 + 累計世界Pro Famous AI Startup継承(Cursor $9B/Cohere $5.5B/Voyage MongoDB買収継承)Pro Mainstream + Pro LMArena社派 + Pro $100M派 + Pro a16z派 + Pro UC Investments派 + Pro WebDev Arena派 + Pro Search Arena派 + Pro Multi-Generation派 真価発揮、Pro $100M派 + Pro Multi-Generation派 真価発揮。\n\n## 関連用語との違い\n\n: UC Berkeley + Pro AI 知識評価Bench先駆 + Pro 57科目 + Pro Multiple Choice + 累計6年Heritage。Chatbot Arena(2023-05 + LMSYS UC Berkeley + Pro 人間評価Bench先駆 + Pro Elo Rating + 累計3年Heritage)競合 + 3年後継 + 同UC Berkeley + Pro 知識評価 → Pro 人間評価 + Pro Multiple Choice → Pro Pairwise比較 + Pro 自動評価 → Pro Crowdsourced + 6年 vs 3年Heritage、MMLU = Pro UC Berkeley + Pro AI 知識評価Bench先駆 + Pro 57科目 + Pro Multiple Choice + Pro Dan Hendrycks、Chatbot Arena = Pro LMSYS UC Berkeley + Pro 人間評価Bench先駆 + Pro Crowdsourced + Pro Pairwise比較 + Pro Elo Rating + Pro Wei-Lin Chiang + Pro Vicuna + Pro LMArena社 + Pro $100M。\n\n: Princeton + Pro AI Coding Bench Top + Pro 2,294 Real GitHub Issues + 累計2年Heritage。Chatbot Arena(2023-05 + LMSYS + Pro 人間評価Bench先駆 + 累計3年Heritage)競合 + 1年後継 + Pro Princeton → Pro LMSYS + Pro 2,294 Issues → Pro Crowdsourced + Pro Patch生成 → Pro Pairwise比較 + Pro 自動評価 → Pro 人間評価 + 2年 vs 3年Heritage、SWE-Bench = Pro Princeton + Pro AI Coding Bench Top + Pro 2,294 Real GitHub + Pro Verified 500 + Pro Patch生成、Chatbot Arena = Pro LMSYS UC Berkeley + Pro 人間評価Bench先駆 + Pro Crowdsourced + Pro Pairwise + Pro Elo Rating + Pro Vision Arena + Pro Coding Arena + Pro Hard Prompts + Pro LMArena社 $100M Series A + Pro 3年Heritage。\n\n## よくある質問(FAQ)\n\n\nA: 2023-05 Chatbot Arena公開Pro Famous Story類無し + Pro 業界Pro Mainstream 人間評価Bench先駆 + 累計2023-2026年3年Pro Mainstream 人間評価Bench業界Top独占Heritage Pro Reference + 業界Pro Mainstream 人間評価Bench業界出発点Heritage Pro Reference Heritage Pro Top独占 + 累計世界Pro Mainstream AI Bench継承(MMLU/HumanEval/SWE-Bench/MT-Bench/GPQA Diamond/AlpacaEval/Arena-Hard/HLE継承)Pro Mainstream + 業界Pro Mainstream AI Bench業界Top独占Heritage Pro Reference Heritage Pro Top独占。\n\n\nA: Pro Crowdsourced人間Pairwise比較Pro Famous(Pro 業界Pro 人間評価業界出発点) + Pro Elo Rating + Pro 200+モデル登録 + Pro 100万+ Battle集計 + Pro Vision Arena + Coding Arena + Hard Prompts Arena + Pro Style Control + Multi-Lingual Arena + 業界Pro Famous Crowdsourced + Pairwise比較 + Elo Rating + 200+モデル + 100万+ Battle + Vision/Coding/Hard Prompts Arena Heritage Pro Reference Heritage Pro Top独占 + 累計世界Pro Famous Elo Rating継承(Chess Elo/FIDE Elo/MMR ranking継承)Pro Mainstream + 業界Pro Famous Elo Rating業界Top独占Heritage Pro Reference Heritage Pro Top独占。\n\n\nA: Pro 2024-09-LMArena社設立 + Pro 2025-04-LMArena $100M Series A調達(Pro Andreessen Horowitz/UC Investments等) + Pro 2025-WebDev Arena/Search Arena + Pro 評価対象: GPT-4o/o3/Claude Opus 4.7/Gemini 3/Grok 4/Llama 4/DeepSeek V3 + Pro Chatbot Arena系譜(Vicuna 2023-03/Chatbot Arena 2023-05/Vision Arena 2024/Hard Prompts 2024/LMArena社 2024-09/$100M 2025-04/WebDev Arena 2025/Search Arena 2025継承) + Pro Multi-Generation Heritage + 業界Pro Famous LMArena社 + $100M + Andreessen Horowitz + UC Investments + Multi-Generation Heritage Pro Reference Heritage Pro Top独占 + 累計世界Pro Famous AI Startup Investment継承(Cursor Anysphere $9B/Cohere $5.5B/Voyage MongoDB買収/Codeium Windsurf $1.25B継承)Pro Mainstream + 業界Pro Famous AI Startup業界Top独占Heritage Pro Reference Heritage Pro Top独占。\n\n## まとめ\n\n- 2023-05 Chatbot Arena、Pro 人間評価Bench先駆\n- LMSYS Org UC Berkeley + Wei-Lin Chiang\n- Crowdsourced + Pairwise比較 + Elo Rating\n- 200+モデル + 100万+ Battle + Apache 2.0\n- LMArena社 2024-09 + $100M Series A 2025-04 + 3年Heritage