Latitude

Latitude 是一個開源 AI agent 可觀測性與監控平台，支援 OpenTelemetry tracing、警示、session 搜尋與 eval 工作流，協助團隊檢視 production traces、找出問題並驗證修復。

總覽

Latitude 是一個開源 AI agent 可觀測性與監控平台。它旨在協助團隊檢視真實的 production traffic、找出失敗原因，並驗證部署後的修復是否真的生效。

此產品以 traces、session 搜尋、問題偵測與評估工作流為核心。它可以透過自己的 SDK 或既有的 OpenTelemetry pipeline 連接，並提供將相似失敗分群、為 traces 加上註解，以及把 production 範例轉成可重複執行 eval 的工具。

功能

相容 OTEL 的 tracing

可從 Latitude 的 SDK 擷取 traces，或將既有的 OpenTelemetry pipeline 指向此平台，讓 traces 以非專有格式流入。

對話智慧分析

分析已完成的 sessions，辨識對話主題、發生了什麼，以及 escalation、abandonment、retry、tool failure 或 trust break 出現的位置。

對話搜尋與篩選

使用 semantic search、精確文字與 metadata filters，在全部 traces 中搜尋，快速縮小到真實範例。

自動問題發現與警示

偵測新的問題或 escalation，並將 alerts 路由到 Slack、email 或 webhooks，讓團隊能在使用者抱怨前回應。

Evals 與資料集管理

將已驗證的 production issues 轉為 evals，建立有版本控管的 golden datasets，並針對新的 traces 執行 regression checks。

人工註解與審查

在 traces、spans 或 outputs 上留下 inline feedback，並將產生的結構化 annotations 用於搜尋、分群與 eval 工作流。

使用情境

除錯 production agent 行為
檢視 production traces，了解 agent 在一次 session 中實際做了什麼，包括訊息、tool calls、錯誤與其他失敗訊號。
調查使用者對話中的模式
搜尋所有 conversations，找出符合某個問題、某個 release window 或特定失敗模式的真實範例群組。
監控回歸與 escalation
當問題出現時及早偵測，將相似失敗分群，並將警示送給團隊，讓問題能在擴散前被分流處理。
透過 regression checks 驗證修復
將已驗證的 production issue 轉成以真實範例支撐的 eval，接著在發布修復後以新 traces 重新執行。
協調審查與品質工作流程
使用 annotations、datasets 與 issue clustering，讓正在開發 AI agents 的團隊能有結構地進行審查工作。

Pros and Cons

Pros

開源，且定位於 AI agent 監控。
可搭配既有的 OpenTelemetry pipeline 使用，降低綁定風險。
支援對所有 traces 進行 semantic search，而不只是抽樣資料。
將可觀測性、evals、datasets、annotations 與 issue clustering 整合在同一工作流程中。
提供免費 Starter 方案，以及適合需要更多容量或支援的團隊的付費方案。

Cons

來源未提供除 OpenTelemetry 以及 Slack、email、webhooks 之外的完整整合清單。
價格頁列出了方案層級與支援等級，但來源中未顯示所有使用限制或計費細節。

FAQ

Latitude 可以免費開始使用嗎？

Latitude 的設計是用來監控 AI agent，並從 production traces 中找出問題。價格頁也顯示有免費的 Starter 方案，以及付費的 Pro 和 Enterprise 選項。

Latitude 可以處理哪些類型的資料？

來源指出 Latitude 會擷取 traces、搜尋 conversations、發現問題，並可透過 SDK 或既有的 OpenTelemetry pipeline 支援 telemetry。

Latitude 如何通知團隊有問題？

首頁說明它可以將 issue alerts 發送到 Slack、email 或 webhooks；價格頁則提到 Starter 方案支援 Slack，Pro 則提供 priority support。

Latitude 支援哪些核心工作流程？

首頁說明 Latitude 提供 observability、session 搜尋、conversation intelligence、issue discovery、自動化 evals、dataset management、human annotations、進階 filters，以及 failure mode clustering。

Quick Facts

類別: AI agent 可觀測性與監控
產品類型: 開源平台
主要使用者: 打造 AI agents 的團隊
網站: latitude.so
價格: 免費 Starter 方案；付費 Pro 與 Enterprise 方案
主要整合: OpenTelemetry、Slack、email、webhooks