人工分析 Text-to-Image リーダーボードとアリーナのローンチ
Launching the Artificial Analysis Text to Image Leaderboard & Arena
人工分析 Text-to-Image リーダーボードは、45,000件以上の人間による画像選好データに基づき、主要な画像生成モデルの性能を人間選好ランキングで評価する。リーダーボードには、Midjourney、OpenAIのDALL·E、Stable Diffusion、Playgroundなどのオープンソースおよびプロプライエタリモデルが含まれる。画像モデルの評価は従来困難であったが、Image Arenaはクラウドソーシングによる人間選好データの収集を大規模に行う。ELOスコアは、プロンプトと2つの画像が提示され、どちらがプロンプトに最も合致するかを選択する形式で集められた選好データから算出される。プロプライエタリモデルが上位を占めるものの、Playground AI v2.5のようなオープンソースモデルも競争力を増している。DALL·E 2は急速に評価を落としている。6月12日にオープンソース化される予定のStable Diffusion 3 Mediumは、オープンソースコミュニティに大きな影響を与える可能性がある。リーダーボードはHugging Faceで公開されており、ユーザーはImage Arenaに参加して自身のランキングを確認することもできる。
- 人工分析がText-to-ImageリーダーボードとImage Arenaをローンチ
- Stable Diffusion 3 Mediumが6月12日にオープンソース化予定
- リーダーボードがHugging Faceで公開
画像生成モデルの性能を人間の選好に基づいて大規模に評価するリーダーボードの登場は、AI画像生成市場の競争構造を可視化する重要な指標となる。MidjourneyやDALL·Eといったプロプライエタリモデルが上位を占める中、Playground AI v2.5のようなオープンソースモデルが台頭しつつある点は、オープンソースAIの競争力向上を示唆する。また、Stable Diffusion 3 Mediumのオープンソース化が予告されており、オープンソースコミュニティ全体の性能底上げにつながる可能性がある。投資家としては、ELOスコアの変遷を追うことで各社のモデル競争力の変化を定量的に把握でき、AI画像生成領域への投資判断の補助材料として活用できる。