Opik
Opik 是一個開源平台,專為評估、測試和監控大型語言模型 (LLM) 應用程式而設計。由 Comet 開發,它旨在促進 LLM 基礎應用程式的更直觀協作、測試和監控。
您可以配置 AgentBuilder 以收集有關您的FLOW執行的追蹤數據,並自動將數據發送到 Opik。
先決條件
- 開源 Opik 伺服器或 Opik Cloud 帳戶
- 運行中的 AgentBuilder 伺服器
tip
如果您需要測試 Opik 整合的FLOW,請參閱 AgentBuilder 快速入門。
將 Opik 與 AgentBuilder 整合
-
如果您使用 Opik Cloud,請取得 Opik API 金鑰。
使用開源 Opik 伺服器時不需要 API 金鑰。
-
在您運行 AgentBuilder 的相同環境中呼叫
opik configureCLI 以儲存您的 Opik 配置:_10opik configure對於自託管 Opik,您也可以使用以下 Opik CLI 命令:
_10opik configure --use_local有關更多資訊,請參閱 Opik SDK 配置文件。
-
在您設定環境變數的相同終端機或環境中啟動 AgentBuilder:
_10uv run langflow run -
在 AgentBuilder 中,執行FLOW以產生 Opik 要追蹤的活動。
-
導航到您的 Opik 專案儀表板並查看收集的追蹤數據。
停用 Opik 整合
要停用 Opik 整合,請移除您使用 opik configure 設定的環境變數,然後重新啟動 AgentBuilder。