P-03ランキング・候補

Falcon 180Bは公開当時、オープンソースの大規模言語モデルの中でどのような性能順位に位置づけられていましたか?

ベクトルデータベース企業Pineconeが公開する技術解説記事によれば、Falcon 180Bは2023年9月時点でHugging Face Open LLM Leaderboard上、事前学習済みオープンLLMとして最も高い性能を記録したモデルにランクされていた。同記事はさらに、Falcon 180Bが一部のベンチマークでOpenAIのGPT-3.5を上回る性能を示し、多くのベンチマークにおいてGPT-3.5とGPT-4の中間程度の水準に位置づけられると説明している。この結果は、当時オープンウェイトモデルが商用クローズドモデルに匹敵する性能を実現できることを示す代表事例として紹介された。ただしこの順位は2023年後半時点のものであり、その後Llama 2をはじめとする他のオープンモデルの登場により、相対的な位置づけは変化している可能性がある点には留意が必要である。

実績・根拠

情報ソース