Jev-as-a-judge 現已於 LangSmith 推出
LangChain 宣布 Jev-as-a-judge 現已於 LangSmith 推出。
據 LangChain 表示，此功能可為每條生產追蹤評分而非僅抽樣、在成本不攀升的情況下為每條追蹤檢查更多準則，以及足夠快地捕捉安全或保安問題以觸發自動回應。詳情見該公司文章：https://www.langchain.com/blog/jev-is-now-available-in-langsmith-evals
相關AI快訊
LangChain 披露基於 Deep Agents 與 LangSmith 的 Rippling AI 架構
Rippling AI 基於 Deep Agents 和 LangSmith 構建，透過主管 Agent 協調 5 至 7 個專用子 Agent，並配合 LangSmith 進行鏈路追蹤、評測與生產環境監控。
LangChain 邀請團隊試用 LangSmith 的 Trajectories
LangChain 表示，LangSmith 的 Trajectories 現已可試用，可用於除錯長時間運行的智能體，為領域專家提供可讀的行為檢視，以線上評估為工作階段評分，並將生產工作階段轉為微調資料集。
LangSmith Custom Apps 現已正式推出
LangChain 表示，LangSmith Custom Apps 可以用提示詞，根據代理數據建立介面，包括標註執行、比較實驗及檢視追蹤的視圖。
LangSmith Engine v2 新增紅隊測試與經驗證的修復
LangChain 在 Interrupt 發布 LangSmith Engine v2。它可在正式上線前找出代理問題，在向用戶展示前測試擬議修復，並呈現低效的代理工作以及成本與延遲趨勢。
LangChain 在 Interrupt 發布 LangSmith Engine v2
LangChain 在 Interrupt 發布 LangSmith Engine v2，並表示它能主動找出 agent 的問題，在用戶看到之前加以解決。