Hamed Nilforoshan 為 HiringCafe 基準測試 OpenAI Decisions API 與 Jev
Hamed Nilforoshan 於 HiringCafe 評估 OpenAI Decisions API 與 Jev 的表現,結果顯示 OpenAI 的 API 成本高出一倍,在職位查詢相關性排序上落後 5% 至 10%。
Hamed Nilforoshan 於 HiringCafe 評估 OpenAI Decisions API 與 Jev 的表現,結果顯示 OpenAI 的 API 成本高出一倍,在職位查詢相關性排序上落後 5% 至 10%。
Modal 表示,TypeSafe AI 在 Modal 基礎設施上擴展了 Jev 的部署,自該模型於星期四發佈至星期日期間,共處理了 1 萬億個 Token。
Google Gemma 表示,在 vLLM 中以回應範本為畫布設定初始內容後,DiffusionGemma 可以在單次去噪步驟中,為是非題、選擇題和評分題返回置信度分數與概率分佈。
Zhaorun Chen稱,在DTap上對Jev 1.13進行紅隊測試發現,直接濫用的攻擊成功率為70.1%,間接提示注入為43.5%。他表示,用Jev對其自身工具呼叫做門控降低了該成功率,同時保留了大部分效用;TypeSafe AI質疑Jev是否失靈,並稱其是為可組合性而構建。
在 JevBench 上,OpenRouter 稱 solar-decide 的準確率為 87.0%,Jev 1.13 為 86.1%,中位延遲分別為 0.14 秒和 0.30 秒。
Diogo Almeida與a16z的Ben Horowitz、Martin Casado談了Jev。這是一款為嵌入軟件而構建的模型。它讀取自然語言,從一組選項中返回一個選擇,並給出每個選項的置信度。
TypeSafe AI 表示,新註冊的 Jev 用戶不再獲得免費額度,並希望盡快恢復。Jev 可在 TypeSafe 控制台啟動。
一篇論文報告,TypeSafe AI 的 Jev 無需額外訓練,就能以 0.886 的中位 AUROC 把對齊失敗與良好回應區分開。在 19 項基準上,一次 Jev 評估成本為 0.30 美元,而這些基準所用的 LLM 評判成本為 18.96 美元。
OpenRouter稱,Jev佔每週分類請求量的27%,接近此前在該類別領先的DeepSeek V4 Flash所佔份額的兩倍。
elvis 表示,在一個小型支援代理上,Jev Router 與固定的 GPT-6 Sol 基線在共 32 次呼叫中都解決了全部 8 個案例。路由成本為 0.008 美元,對比 0.018 美元;中位回應時間為 1.5 秒,對比 1.9 秒。
Isaac Miller 表示,DSPy 3.4.0 為 Jev 與 System One 模型新增原生支援,並引入 ReAnchor,一個按置信度校準輸出的優化器。
OpenRouter 表示,已在呼叫 Jev 的開發者只需把 model 欄位改為 jaredpalmer/kev-4b,即可切換至 Kev。
一篇 Jev-as-a-Judge 論文報告,接納 TypeSafe AI 有信心的 JEV 判定,並把其餘個案升級至 GPT-6 Astra,在 510 組留出偏好配對上保留了 GPT-6 準確率的 99%,費用約為 GPT-6 的 57%。作者表示,升級閾值並非對每個後備模型都能轉移,應按自身數據設定。
Pydantic 表示,這些智能體使用 TypeSafe AI 的 Jev 分類器回答具類型的問題,並以各智能體既有的輸出模型回傳結果,每個欄位附帶一個信心分數。
2026年9月22日,Ahmad Awais 表示當天在 Command Code 免費推出 Jev,僅限無頭模式或 Provider API。他同時開源了名為 cmd-mod-jev-nudge 的模組。
Jev 只可在無頭模式或透過 Provider API 使用。Ahmad Awais 亦已開源模組 cmd-mod-jev-nudge,並表示免費使用是為了在仍有工作未完成時,讓代理持續運行。
Shahriar Tajbakhsh 表示,Metaview 在週末把 TypeSafe AI 的 jev 加到每個 agent。他說,其 sourcing 產品的候選人搜尋由數分鐘縮至數秒,準確度相同,速度約為原先 10 倍,每次搜尋成本亦明顯降低。
在 OpenRouter Classifiers 中,可用 typesafeai 的 Jev 自動分類 LLM 請求,並在 Explore 分析結果。
TypeSafe 引述 MotherDuck 的聲稱,指由 TypeSafe 的 Jev 模型驅動的 SQL 函數 prompt_jev(),令文本分類速度約快 50 倍,成本約為原來的 1%。MotherDuck 報告 100k 行數據在 40 秒內完成,費用為 $0.50,對比 LLM 需時 32 分鐘、費用 $37。
TypeSafe AI 表示 Jev 現已推出,並連結至 https://console.typesafe.ai。該帖文並未指明 Jev 是甚麼或任何存取條款。