業務に使うAIの候補を絞る比較サイト
ELEMENTSは11月12日、国内業務向けAIリーダーボード「Kurabe」の提供を始めた。リーダーボードは評価結果を一覧で比べる仕組みだ。登録不要で閲覧でき、公開時点の対象業務は、問い合わせへの対話形式の応答と、文書から情報を取り出す解析の二つ。提供会社は、製品全体の優劣を一つの順位で決めるものではなく、自社の業務に合う候補を探す資料と説明している。
モデルと実行環境をセットで比べる
比較の軸は精度、処理速度、推定コスト。外部の商用AI、自社で動かす公開モデルなどを横断し、半導体を含む実行環境の違いも評価する。発表では2026年10月時点で40モデル、7種類のAI半導体を対象にしたとしている。この件数は公開日の同時実測を意味しない。業務や環境が変われば必要な条件も変わるため、モデル名だけで選ばず、評価の対象と算定条件を合わせて読む必要がある。
半導体の評価と計算資源の効率化が背景
産総研のプロジェクト概要は、多様なAI半導体を試すテストベッド、つまり比較実験のための環境を整え、性能や省電力性、運用のしやすさを調べる計画を掲げる。ELEMENTSも実施者に含まれる。Kurabeはその研究開発成果の一部として公開されたが、プロジェクトへの参加だけで、個々の比較結果があらゆる業務に適することまで保証されるわけではない。
本番導入には各社固有の検証が残る
サービス説明は、企業固有のデータ、セキュリティ要件、運用条件での検証を別途求めている。公開画面の紹介図には架空の数値を使ったものもあるため、それを実際の測定結果として引用することはできない。今後は金融・製造向けの評価を増やす方針だ。編集上は、対象業務の追加だけでなく、データセットの作り方や推定コストの条件が更新時にどう示されるかを確認したい。