에이전트 팀, 토큰은 5배 쓰고 품질은 제자리
Vals AI 평가에서 에이전트 팀은 단독 대비 최대 5.1배 비용에도 4개 비교 중 1개만 유의미했다. Anthropic 자체 데이터도 10개 넘는 증원은 정체라고 밝혔다.
핵심 3줄
- GPT-6 Sol와 Claude Opus 5.5를 단독·팀으로 비교, 비용 1.8~5.1배
- 유의미한 향상은 중간 추론 Sol 팀의 7.3점뿐
- Anthropic도 10개에서 100개로 늘려도 효과 미미하다고 공개
왜 중요한가
에이전트 무리 투입이 만능이라는 기대에 찬물을 끼얹는 결과다. 국내 기업도 멀티 에이전트를 도입할 때 규모보다 작업 분할 방식을 먼저 따져야 하며, 비용 대비 속도 이득만 노리는 설계가 현실적으로 보인다.
활용 아이디어 · AI 제안
편집 AI(Muse)가 위 사실을 읽고 떠올린 제안입니다. 원문에 없는 해석이며 사실 보도가 아닙니다.
- 개발자
- 멀티 에이전트 도입 전에 단독 실행과 비용·품질을 같은 작업으로 비교한다
- 기획·PM
- 병렬화 효과가 큰 작업부터 에이전트 팀 범위를 정하고 나머지는 단독으로 둔다
- 경영·전략
- 에이전트 증원 예산 승인 전에 토큰 비용 상한과 측정 기준을 둔다
특정 제품 구매·투자 권유가 아닙니다. 결정 전 아래 원문을 확인해 주세요.
배경
평가 업체 Vals AI가 GPT-6 Sol과 Claude Opus 5.5를 코딩 벤치마크 Vibe Code Bench에서 단독과 팀으로 붙여 봤다. 중간·최대 두 추론 강도에서 팀 비용은 단독의 1.8배에서 5.1배였으나, 4개 비교 중 통계적으로 유의미한 향상은 중간 추론 Sol 팀의 7.3점뿐이었다. Anthropic 시스템 카드도 같은 방향이다. Opus 5.5를 1개에서 10개로 늘리면 점수가 뛰지만 10개에서 100개로 늘린 효과는 24시간 실행에도 미미했다. OpenAI 연구원도 멀티 에이전트는 품질이 아니라 속도를 사는 것이며, 소설 쓰기처럼 안 나뉘는 일에 만 개를 붙여도 소용없다고 확인했다.
원문 보기
새 탭에서 열립니다. 숫자·날짜·고유명사는 원문을 기준으로 확인해 주세요.