I am speed(自称 LLMark)は、大規模言語モデル API 向けのベンチマークツールです。LLM 版の fast.com 速度テストという位置づけで、ネットワーク帯域ではなく、各モデル API が出力を生成する速さを測定します。
測定内容
中心となる指標は、1 秒あたりに生成される トークン数(tok/s)です。テスト実行中、画面にはスループットのタイマーがリアルタイムで表示され、最も速い tok/s の結果が示されます。また、エンジンのステータス表示により、サービスがオンラインかどうかも確認できます。そのため、あるモデルやベンダーの生の応答速度を、別のモデルやベンダーと直接比較しやすいのが特徴です。
対応ベンダー
ツールは多数の API への対応を挙げており、速度を並べて比較できます。
- ホスト型ベンダー:OpenAI、Anthropic、Groq、Cerebras、Fireworks AI、Mistral、OpenRouter、Google Gemini、x.ai、z.ai、Kimi。
- ローカルモデル:セルフホスト型のモデルもベンチマーク可能です。
注意点
公開ページで主に示されているのはリアルタイムの速度とベンダー一覧であり、価格やアカウントの要否、プロジェクトがオープンソースかどうかは明示されていません。こうした詳細は公式サイトをご確認ください。また、このツールが測るのは速度であり回答品質ではないため、モデル選定の際は複数の参考情報のひとつとして活用するのがよいでしょう。











コメント
コメントはまだありません
最初のコメントを書きましょう