---
title: "AI 평가의 기준은 토큰이 아니라 출시다"
author: "VibeTimes"
published: "2026-11-04T19:51:36.680Z"
section: "technology"
tags: ["아판 시예드", "AI", "평가의", "기준", "토큰", "아니라", "Stop", "counting"]
language: "ja"
url: "https://vibetimes.co.kr/ja/news/cmw2j5up04a0ijxq98e39z9o7"
---

# AI 평가의 기준은 토큰이 아니라 출시다

AI 코딩 도구의 성능을 토큰(문장을 잘게 쪼개는 처리 단위) 사용량으로 재는 관행이 바뀔 수 있다. MIT 테크놀로지 리뷰는 2026년 11월 2일 아판 시예드 명의의 기고를 통해 AI 코딩 에이전트(코딩 작업을 스스로 수행하는 AI)의 성과는 토큰 소비량이 아니라 실제 출시된 소프트웨어로 측정해야 한다고 주장했다.

개발자가 코딩 에이전트에 작업을 맡기면 단순 질의응답과 달리 계획 수립, 코드 생성, 테스트, 오류 수정이 반복되며 하나의 작업이 기본 챗 프롬프트보다 10배에서 50배 많은 토큰을 소모한다. 에이전트가 유용해질수록 호출 횟수는 늘어나고, 토큰당 과금 구조에서는 가장 큰 가치를 만드는 작업일수록 가장 비싸지는 역설이 발생한다.

재정 압박은 이미 현실이 됐다. 우버는 클로드 코드 사용을 확대한 뒤 2026년 AI 예산을 4월까지 소진했다. 깃허브 코파일럿은 정액제에서 사용량 기반 크레딧으로 과금 모델을 바꿨다. 가트너는 2028년까지 AI 코딩 토큰 비용이 개발자 평균 연봉을 넘어설 것으로 예측했다.

## 측정해야 할 것은 출시된 소프트웨어다

이런 흐름 속에서 기업들은 사용량 상한, 좌석 제한, 에이전트 실행 승인 등 배급식 통제로 대응하고 있다. 그러나 기고문은 일괄적인 제한이 가치를 만들어내는 워크플로까지 옥죈다고 지적했다. 토큰당 비용은 소비량을 잴 뿐 결과를 재지 못한다는 것이다. 또한 토큰 비용 계량기는 재시도나 무한 루프 같은 낭비와 출시를 위한 작업을 구분하지 못해 잘못된 지표를 최적화하게 만든다고 비판했다. 대안으로 제시된 지표는 병합된 풀 리퀘스트당 비용이다. AI 지원 개발 총비용을 리뷰를 통과해 병합된 변경 건수로 나눈 값이다. 여기에 재작업과 결함을 함께 추적할 것을 권고했다.

기고문은 값비싼 추론은 꼭 필요한 작업에만 쓰고, 반복적인 작업의 단가를 낮춰야 한다고 밝혔다. 에이전트 코딩의 모든 단계에서 최상위 모델이 필요한 것은 아니다. 어려운 계획 수립과 새로운 추론에는 프론티어 모델을, 코드 생성과 테스트 작성, 반복 리팩터링은 직접 운영하는 오픈 웨이트 모델에 맡기는 방식이다. 게이트웨이는 과제 복잡도, 데이터 민감성, 비용, 지연 시간에 따라 요청을 라우팅할 수 있다. 프리미엄 추론이 정당한 순간에만 사용되게 하는 방식이다.

기고문은 토큰 절감이 아닌 병합과 출시 중심의 측정으로 전환하는 것을 AI 코딩 비용 관리의 새로운 기준으로 제시했다. MIT 테크놀로지 리뷰 게재를 통해 AI 코딩 비용 관리 방식에 대한 업계 논의가 이어질 것으로 보인다.
