LangChain、9月30日にLangSmithのTuned Evaluatorsに関するセッションを開催
9月30日、LangChainはオンライン評価の要点と、チームがLangSmithのTuned Evaluatorsを使ってエージェントのやり取りを自動分析し、本番トレースに有用なフィードバックを付与する方法を取り上げる。登録はTuned Evaluatorsのページで受け付ける。
関連AIニュース
LangChain、Deep Agents と LangSmith を基盤とする Rippling AI のアーキテクチャを公開
Rippling AI は Deep Agents と LangSmith を基盤に構築されており、スーパーバイザーエージェントが 5〜7 個の特化型サブエージェントを調整し、LangSmith でトレース、評価、本番環境の監視を実施している。
LangChain、LangSmith の Trajectories の試用をチームに呼びかけ
LangChain によると、LangSmith の Trajectories は今すぐ試せ、長時間動作するエージェントのデバッグ、専門担当者向けの読みやすい挙動ビュー、オンライン評価によるセッションの採点、本番セッションのファインチューニング用データセット化に使えるという。
LangSmith Custom Appsが一般提供を開始
LangChainによると、LangSmith Custom Appsはプロンプトでエージェントデータからインターフェースを作成でき、実行へのラベル付け、実験の比較、トレースの確認といったビューを含む。
LangSmith Engine v2がレッドチーミングと検証済み修正を追加
LangChainはInterruptでLangSmith Engine v2を発表した。本番前にエージェントの問題を特定し、提案された修正をユーザーに示す前にテストし、非効率なエージェントの処理とともにコストとレイテンシの傾向を示す。
LangChain、InterruptでLangSmith Engine v2を発表
LangChainはInterruptでLangSmith Engine v2を発表し、エージェントの問題を事前に見つけ、ユーザーが目にする前に解決できるとしている。