- エージェントをトレースし、メトリクスを収集する Weave OTel-compatible SDK を使用して一般的な SDK やハーネスで構築された
- アプリケーションの LLM Call や任意の関数を手動でインストルメントする ことで、アプリケーションをトレースし、バージョン管理し、feedback を収集する
- LLM ジャッジモデルと custom scorers を使って、エージェントまたはアプリケーションの応答を評価する
はじめに
- エージェントをトレースする
- Ops と Calls で関数をトレースする
エージェントを Weave と統合する
エージェント SDK またはハーネス向けの組み込みインテグレーションを選択し、Agents ビューでセッション、ターン、LLM Call、ツール呼び出しのトレースを開始します。
カスタム エージェントの可観測性を設定する
Weave SDK を使用してカスタムのマルチターン エージェントをトレースし、セッション、LLM Call、ツール呼び出しを OpenTelemetry のスパンとして取得します。
Weave UI でエージェントのメトリクスを表示する
LLM への基本的な呼び出しをトレースし、入力、出力、コードを W&B アカウントで確認します。
Weaveをインストール
- Python
- TypeScript