Arena

Identity

• Arena（旧LMArena）はUC Berkeley生まれのコミュニティ型AI評価プラットフォームで、ユーザーがモデルの応答へフィードバックを与えることで公開リーダーボードを形成する。運営はArena Intelligence。検証待ち Arena — About
• LMArenaはArenaへ改称した。ブランドの起源は約3年前に公開されたChatbot Arenaにあり、モデルを匿名で対戦させて評価する「Arena」の概念を同チームが確立した。検証待ち Arena Blog — LMArena is now Arena

Capability

• Arena（旧LMArena）はUC Berkeley生まれのコミュニティ型AI評価プラットフォームで、ユーザーがモデルの応答へフィードバックを与えることで公開リーダーボードを形成する。運営はArena Intelligence。検証待ち Arena — About
• 前身のChatbot Arenaは、匿名・ランダム化されたモデル対戦への人間投票によりLLMを比較評価するオープンプラットフォームとしてarXiv論文で報告されている。検証待ち Chatbot Arena: An Open Platform for Evaluating LLMs (arXiv)

Credibility

• 前身のChatbot Arenaは、匿名・ランダム化されたモデル対戦への人間投票によりLLMを比較評価するオープンプラットフォームとしてarXiv論文で報告されている。検証待ち Chatbot Arena: An Open Platform for Evaluating LLMs (arXiv)

Use Case

公開Evidence未整備

Constraints / Current Status

• LMArenaはArenaへ改称した。ブランドの起源は約3年前に公開されたChatbot Arenaにあり、モデルを匿名で対戦させて評価する「Arena」の概念を同チームが確立した。検証待ち Arena Blog — LMArena is now Arena

Key References

• Arena（旧LMArena）とはどのようなサービスですか？
• Arenaによる評価と、静的ベンチマークによる評価は何が違いますか？
• 提供形態の異なるAIモデルを共通の土俵で比較するにはどうすればよいですか？

Related

• LMSYS— LMSYSはChatbot Arena（現Arena）を開発した研究組織である（開発元関係。LMSYSは研究組織のためproductOfの型規則対象外）。