LangWatch
LangWatch 是一個全方位的 LLMOps 平台,用於監控、可觀測性、分析、評估和警報,以獲取使用者洞察並改進您的 LLM 工作 Flow。
整合 LangWatch 可觀測性
要與 AgentBuilder 整合,請將您的 LangWatch API 金鑰添加為 AgentBuilder 環境變數:
-
從您的 LangWatch 帳戶取得 LangWatch API 金鑰。
-
將金鑰添加到您的 AgentBuilder
.env檔案中:_10LANGWATCH_API_KEY="API_KEY_STRING"或者,您可以在終端機會話中設定環境變數:
_10export LANGWATCH_API_KEY="API_KEY_STRING" -
如果您修改了 AgentBuilder
.env,請使用您的.env檔案重新啟動 AgentBuilder:_10langflow run --env-file .env -
執行FLOW。
-
查看 LangWatch 儀表板以進行監控和可觀測性。

使用 LangWatch 評估器
在您的FLOW中,您可以使用 LangWatch 評估器 組件來使用 LangWatch 的評估端點來評估模型的效能。 此組件可在 LangWatch 套件中使用。