AI 토큰

AI 토큰(token)은 AI 모델이 글을 읽고 쓸 때 쓰는 글 조각 단위예요. 동시에 AI 요금을 세는 단위이기도 해요. 택시 미터기의 거리처럼, 보내고 받은 토큰 수만큼 요금이 올라가요.

AI 는 글을 어떻게 잘라요?

모델마다 "자주 나오는 글자 묶음 사전"을 갖고 있어요. 이걸 토크나이저라고 해요. 글이 들어오면 사전에 있는 가장 긴 묶음부터 맞춰 잘라요.

그래서 "안녕하세요"가 어떤 모델에선 1~2조각, 다른 모델에선 4~5조각이 돼요. 영어 "hello" 처럼 흔한 말은 대개 1조각이에요. 띄어쓰기·문장부호도 조각에 들어가요.

한국어는 몇 토큰이에요? 직접 재 봤어요

2026년 10월 29일, 같은 뜻의 문장을 4개 모델에 넣고 응답에 찍힌 토큰 수를 봤어요.

한국어(40자): 오늘 서울은 맑고 오후에는 바람이 조금 불겠습니다. 우산은 필요 없어요.
영어(91자):  Today Seoul will be clear, with a little wind in the afternoon. You won't need an umbrella.

긴 글로도 재 봤어요. 퓨쳐인프라 요금 페이지 본문(4,205자)을 통째로 넣었더니 GPT-6 Luna 2,491토큰, Gemini 3.5 Flash Lite 2,482토큰, Claude Haiku 5.5 4,219토큰이었어요. 한국어 글은 대략 "글자 수 × 0.6~1.0" 토큰으로 잡으면 크게 틀리지 않아요.

예전엔 "한국어는 영어보다 토큰이 몇 배 든다"는 말이 많았어요. 이번 실험에서는 같은 뜻 기준으로 한국어가 영어와 비슷하거나 30% 정도 많은 수준이었어요.

요금은 어떻게 계산해요?

단가는 입력(보낸 글)과 출력(받은 글)이 따로예요. 출력이 보통 5배쯤 비싸요. 2026년 10월 29일 OpenRouter 목록 기준으로 계산해 볼게요.

짧은 질문 한 번은 몇 원도 안 돼요. 그래도 챗봇처럼 하루 수천 번 부르면 모델 선택에 따라 한 달 요금이 수십 배 벌어져요.

토큰을 아끼는 법

• 필요한 자료만 넣기 — 문서를 통째로 넣지 말고 관련 부분만 골라 넣어요(RAG).
• 답 길이 정하기 — "3줄로", "200자 이내"처럼 출력 길이를 정하면 비싼 출력 토큰이 줄어요.
• 일에 맞는 모델 — 요약·분류는 작은 모델로 충분해요. 단가 차이가 수십 배예요.
• 반복되는 앞부분은 그대로 두기 — 시스템 프롬프트를 매번 똑같이 두면 프롬프트 캐시 할인을 받기 쉬워요.

자주 하는 오해

• 토큰 = 단어 수 — 아니에요. 모델마다 자르는 법이 달라서 같은 글도 토큰 수가 달라요.
• 보낸 질문만 돈이 든다 — 앞선 대화 전체가 매번 다시 들어가요. 대화가 길어질수록 한 번 요금이 커져요.
• AI 토큰은 코인이다 — 블록체인의 토큰과는 전혀 다른 말이에요. 이름만 같아요.

퓨쳐인프라에서는

퓨쳐인프라 AI 라우터는 호출마다 응답의 usage 에 보낸 토큰·받은 토큰과 그 호출의 원화 요금(cost_krw)을 같이 돌려줘요. 토큰 수로 어림하지 않고 실제 청구액을 바로 볼 수 있어요. 위 실험의 모든 숫자도 이 응답에서 읽었어요.

시스템 프롬프트처럼 반복되는 앞부분은 제공사 프롬프트 캐시에 얹혀 더 싸게 처리되고, 할인된 실청구액 그대로 정산돼요. 키마다 월 한도를 걸 수 있어서 반복 호출이 꼬여도 그 금액에서 멈춰요. 사용료는 충전 지갑에서 빠져요.

자주 묻는 질문

1토큰은 한국어 몇 글자예요?

모델마다 달라요. 이번 실험에서는 GPT·Gemini 가 1토큰에 약 1.7~2자, Claude 가 약 1자였어요.

토큰 수는 어디서 확인해요?

API 응답의 usage 항목에 prompt_tokens(보낸 것)와 completion_tokens(받은 것)가 나와요. 제공사마다 미리 세 보는 기능도 있어요.

출력 토큰이 왜 더 비싸요?

답은 한 조각씩 차례로 만들어야 해서 계산이 더 들어요. 그래서 대부분 출력 단가가 입력의 4~5배예요.

생각하는 모델은 토큰이 더 들어요?

네. 답하기 전에 속으로 푸는 과정(추론 토큰)도 출력으로 세는 모델이 많아요. 짧은 답인데 출력 토큰이 많이 찍힌다면 그 때문이에요.

관련 용어

컨텍스트 윈도우 · LLM · 프롬프트 · RAG · 클로드 요금 · 제미나이 API