Testron

CmdRunner

CmdRunner は AI エージェントを利用して、既存のテストケースを自動ブラウザテストに変換します。ユーザーが Excel やドキュメントをアップロードすると、AI がテスト意図を理解し、実際のブラウザで手順を実行して結果を検証し、レポートを自動生成します。Selenium、Playwright、Cypress のスクリプトは不要です。このツールは既存のテストケースを再利用し、自動化の作業量を削減して、ソフトウェアのリリースを加速することを目的としています。

Trulens：开源LLM实验评估与追踪库

Trulens是一个开源的Python库，专为LLM实验和AI代理的系统评估与追踪而设计。它提供反馈函数、运行时追踪和可视化仪表板，帮助开发者衡量模型性能、调试提示并优化代理行为。适用于从研究到生产的各种NLP工作流。基于MIT许可证，收集时拥有3464个GitHub星标。

deepeval：LLMアプリケーション向けのオープンソース単体テストフレームワーク

deepeval は、LLM アプリケーションのユニットテストを行うためのオープンソースの Python フレームワークです。50 以上のすぐに使えるメトリクスを備え、RAG パイプライン、エージェント、チャットボットに対応しています。スタイルは Pytest に似ており、既存のテストフローに簡単に統合できます。プロジェクトは Apache-2.0 ライセンスで公開されており、現在 16603 個の GitHub スターを獲得しています。

testkube: KubernetesネイティブなAIテストプラットフォーム

testkubeは、オープンソースかつKubernetesネイティブなテストプラットフォームで、AI駆動のエンジニアリングチーム向けに設計されています。テスト実行をCI/CDパイプラインにシームレスに統合することをサポートし、強力な可観測性と拡張性を提供します。これにより、チームはAIモデルとデータパイプラインを継続的に検証し、機械学習運用の特有の複雑さに対応できます。主な言語はGo、ライセンスはOther、GitHubスター数は1629です。

MockServer：オープンソースのHTTP(S)モックサーバーとプロキシ

MockServerは堅牢なオープンソースのHTTP(S)モックサーバーおよびプロキシです。HTTP/1.1、HTTP/2、gRPC、WebSocket、TCPなどのプロトコルをサポートしています。さらに、AI/LLM APIの動作を模擬することもでき、複雑なマイクロサービスアーキテクチャにおける統合テスト、障害注入、トラフィックのインターセプトに適しています。