Scale Labs, 시각적 추론 벤치마크 Humanity's Sixth Sense 공개
Scale Labs가 일상적인 직관적 시각 추론을 평가하기 위해 이미지와 비디오 전반의 522개 개방형 작업으로 구성된 평가 벤치마크 Humanity's Sixth Sense를 공개했다.
Scale Labs가 일상적인 직관적 시각 추론을 평가하기 위해 이미지와 비디오 전반의 522개 개방형 작업으로 구성된 평가 벤치마크 Humanity's Sixth Sense를 공개했다.
Beyang은 Amp의 Plaid 속도가 추가 요금을 낼 의사가 있는 사용자를 위해 GPT-6 Astra를 6배 속도로 실행한다고 밝혔다. 기존 스레드에서 켜고 끌 수 있으며, ChatGPT 구독은 아직 지원하지 않는다.
Cline이 GPT-6.1 Sol을 제공한다. DeepSWE v1.1에서 Cline은 이 모델이 GPT-6 Astra와 동등하며 비용은 약 5분의 1이라고 밝혔다.
Ultrafast는 오늘부터 Codex, ChatGPT Work, API의 GPT-6 Astra에서 이용할 수 있으며, GPT-6.1 Sol 지원은 곧 제공된다. Codex와 ChatGPT Work에서의 이용은 새로운 Pro 500 요금제를 통해 제공되며, 이 요금제는 OpenAI의 가장 높은 사용 한도로 Plus의 25배다.
OpenAI Developers는 GPT-6 Astra로 구동되는 상시 작동 에이전트인 dot이 플러그인, 컨텍스트, 클라우드 컴퓨터를 사용해 버그 보고를 분류하고 실패한 빌드의 범위를 정하며, Codex로 변경 사항을 빌드하고 테스트한 뒤 완성된 풀 리퀘스트를 반환할 수 있다고 밝혔다.
OpenRouter가 OpenAI의 GPT-6.1 Sol을 입력 100만 토큰당 2달러, 출력 100만 토큰당 10달러, 캐시 입력 100만 토큰당 0.10달러에 제공한다. OpenRouter는 이 모델이 에이전트 코딩, 컴퓨터 사용, 전문 업무에서 GPT-6 Astra에 거의 맞먹으면서 가격은 Astra의 5분의 1이라고 밝혔다.
OpenAI는 GPT-6.1 Sol이 자사 정렬 평가에서 GPT-6 Sol보다 크게 향상됐고, 투명성, 사용자 의도, 안전 제약에서는 GPT-6 Astra에 더 가까워졌다고 밝혔다.
OpenAI는 GPT-6.1 Sol이 5분의 1 가격으로 Astra에 가까운 지능을 제공하며, 현재 해당 성능 기준으로 가장 비용 효율적인 모델이라고 밝혔다.
OpenAI가 GPT-6 Astra로 구동되는 상시 가동 에이전트 dots를 공개한다. OpenAI는 이 에이전트가 뛰어난 능력을 갖췄으며 모든 일을 처리하도록 만들어졌다고 설명한다.
Arena.ai는 12개 모델의 판정 34,580건을 1,460건의 Arena 대결에서 나온 인간 투표와 비교했다. 평균적으로 모델은 58%의 경우 자신의 답을 골랐고, 사람들은 같은 답을 34%의 경우 골랐다.
Theo는 Jev Router를 대상으로 한 1,000달러 규모의 DeepSWE 벤치마크가 low 설정의 GPT-6 Astra와 거의 비슷한 성능을 냈지만, 비용은 약간 더 들고 시간은 거의 5배 걸렸다고 밝혔다.
Polymarket는 GPT-6 Astra가 DrivingBench가 테스트한 AI 가운데 코스를 완주한 유일한 AI였다고 밝혔다.