CmdRunner

Testron

Testron.aiはAI駆動のソフトウェアテストプラットフォームです。テストケース生成、回帰テスト選択、UI自動化、ビジュアルテスト、テストデータ作成、自己修復テストメンテナンスを自動化し、モダンなQAチームのテストサイクルを加速し、手作業を削減します。また、インテリジェントなテストエージェントとエンタープライズ向けデプロイオプションにより、ソフトウェア品質を向上させます。

Trulens：开源LLM实验评估与追踪库

Trulens是一个开源的Python库，专为LLM实验和AI代理的系统评估与追踪而设计。它提供反馈函数、运行时追踪和可视化仪表板，帮助开发者衡量模型性能、调试提示并优化代理行为。适用于从研究到生产的各种NLP工作流。基于MIT许可证，收集时拥有3464个GitHub星标。

deepeval：LLMアプリケーション向けのオープンソース単体テストフレームワーク

deepeval は、LLM アプリケーションのユニットテストを行うためのオープンソースの Python フレームワークです。50 以上のすぐに使えるメトリクスを備え、RAG パイプライン、エージェント、チャットボットに対応しています。スタイルは Pytest に似ており、既存のテストフローに簡単に統合できます。プロジェクトは Apache-2.0 ライセンスで公開されており、現在 16603 個の GitHub スターを獲得しています。

testkube: KubernetesネイティブなAIテストプラットフォーム

testkubeは、オープンソースかつKubernetesネイティブなテストプラットフォームで、AI駆動のエンジニアリングチーム向けに設計されています。テスト実行をCI/CDパイプラインにシームレスに統合することをサポートし、強力な可観測性と拡張性を提供します。これにより、チームはAIモデルとデータパイプラインを継続的に検証し、機械学習運用の特有の複雑さに対応できます。主な言語はGo、ライセンスはOther、GitHubスター数は1629です。

MockServer：オープンソースのHTTP(S)モックサーバーとプロキシ

MockServerは堅牢なオープンソースのHTTP(S)モックサーバーおよびプロキシです。HTTP/1.1、HTTP/2、gRPC、WebSocket、TCPなどのプロトコルをサポートしています。さらに、AI/LLM APIの動作を模擬することもでき、複雑なマイクロサービスアーキテクチャにおける統合テスト、障害注入、トラフィックのインターセプトに適しています。