AgentOps

LLM 駆動エージェント専用のオブザーバビリティ＆運用プラットフォームです。トレース、デバッグ、デプロイ、モニタリングを通じて、エンジニアチームがエージェントの挙動を観測・診断・運用できるようにします。

公式 SDK を pip install agentops でインストールし、環境変数 AGENTOPS_API_KEY と OPENAI_API_KEY を設定。ドキュメントに従ってコードにコールバックやデコレータを追加するだけでトレースが収集され、ダッシュボードでセッション＆リプレイが確認できます。

公式サイトでは 400 以上の LLM と LangChain、AutoGen など主要エージェントフレームワークに対応すると表明。実際の互換性は最新ドキュメントをご確認ください。

Web 版ダッシュボードに「Start for Free」の表記があり、初期体験が可能。本格利用向けの有料プランも用意されており、詳細は料金ページで確認してください。

環境変数に OPENAI_API_KEY と AGENTOPS_API_KEY を設定するか、コード内で agentops.init(...) にキーを渡します。初期化手順はドキュメントとサンプルノートブックに記載されています。

Trace/Span/Tag、セッション概要とドリルダウン、セッションリプレイ、意思決定リンクの可視化、トークン＆コスト統計などが含まれ、モデル呼び出しやツール連携のトラブル特定に活用できます。

セッションと呼び出しデータが収集されます。ドキュメントではマスキング、アクセス制御、保存期間ポリシーの設定で機密情報露出リスクを低減するよう推奨。具体的な対策は各チームのコンプライアンス要件に応じて設定してください。

GitHub にオープンソースリポジトリを公開し、Discord などのコミュニティチャンネルも用意。ソース閲覧、サンプル参考、ディスカッションや貢献が可能です。