긴 글 속 변화 따라가기 시험, 주요 AI 정답률 13% 이하
새 성능 시험 StateBench에서 주요 AI 4종이 긴 글 속 복잡한 변화를 따라가지 못했다. 같은 문제로 직접 학습시킨 실험에서는 모델 구조에 따라 성적이 갈렸다.
2026년 11월 11일 수요일
새 성능 시험 StateBench에서 주요 AI 4종이 긴 글 속 복잡한 변화를 따라가지 못했다. 같은 문제로 직접 학습시킨 실험에서는 모델 구조에 따라 성적이 갈렸다.
오픈AI는 GPT-5.6 Luna 사용료를 80% 내렸고, 앤트로픽은 이전 입력을 다시 읽는 비용을 낮췄다. 절감 폭은 쓰는 모델과 작업 방식에 따라 다르다.
LegalOn은 간단한 코드, 문서 작성, 복잡한 설계에 각각 다른 모델을 배정하고 부서별 예산 한도를 뒀다. 오픈AI는 이 방식으로 하루 비용이 크게 줄었는데도 개발 속도와 품질은 유지됐다고 설명했다.
Gemini 3.5 Flash와 Claude Haiku 4.5는 세 문제를 모두 맞혔다. 같은 가벼운 모델인 GPT-6 Luna는 두 문제를 틀렸다.
오픈AI가 답변 안에 버튼과 차트, 간단한 도구를 넣는 Intelligent UI를 발표했다. Plus와 Pro 등 유료 요금제는 10월 7일부터, Free와 Go는 8일부터 순차 적용한다.
오픈AI가 GPT-6 Sol과 Luna를 내놨다. API 가격을 이전 세대의 절반 이하로 내렸고, 캐시된 입력 토큰에는 90% 할인이 적용된다.