토큰 (Token)은 AI가 글을 읽고 쓸 때 쓰는 글자 조각 단위 같은 것 — AI가 문장을 잘게 나눠 처리하는 최소 단위이자, AI API 사용량과 요금을 세는 기준이에요.
토큰은 AI가 글을 처리하는 글자 조각이에요. 우리가 글을 단어 단위로 읽는다면, AI는 문장을 더 잘게 쪼갠 조각 단위로 읽고 써요. 한 단어가 토큰 하나일 때도 있고 여러 개로 나뉠 때도 있는데, 일반적으로 한국어는 영어보다 같은 내용을 표현할 때 토큰이 더 많이 드는 편이에요. 택시 미터기가 거리만큼 요금을 올리듯, AI 서비스는 주고받은 토큰 양만큼 사용량을 계산해요.
1인 사업자에게 토큰이 중요한 이유는 비용 때문이에요. API로 AI를 쓰면 보통 내가 보낸 글(입력 토큰)과 AI가 써 준 글(출력 토큰)을 합쳐 과금되고, 출력 쪽 단가가 더 비싼 경우가 많아요. 유튜브 영상을 자동으로 만들면서 매번 긴 자료를 통째로 넣고 대본을 길게 뽑으면 토큰이 빠르게 쌓여요. 그래서 자주 쓰는 자료는 요약해 넣거나, 간단한 작업은 저렴한 모델로 보내는 식으로 토큰을 아낍니다.
헷갈리기 쉬운 용어가 '토큰 한도'예요. 토큰은 글을 세는 단위이고, 토큰 한도는 AI가 한 번에 읽고 기억할 수 있는 최대 토큰 양(컨텍스트 윈도우)이나 요금제에서 쓸 수 있는 양을 말해요. 또 로그인이나 API 인증에 쓰는 '액세스 토큰'은 이름만 같을 뿐 전혀 다른 개념이니 구분해야 해요. 요금표를 볼 때는 입력·출력 단가가 따로 적혀 있는지 꼭 확인하세요.
AI 에이전트를 직접 만들고 24시간 운영하는 법을 단계별 강의로 배워보세요.