용어집으로 돌아가기
AI & LLM

토큰 (LLM)

대규모 언어 모델이 처리하는 텍스트의 기본 단위로, 일반적으로 단어의 일부, 전체 단어 또는 문자를 나타냅니다.

토큰 (LLM) 이해하기

토큰은 LLM이 텍스트를 읽고 생성하는 방식입니다. 대부분의 모델은 토큰당 약 4자의 청크로 텍스트를 처리합니다. AI 가시성을 위해 토큰을 이해하는 것이 중요합니다. 모델에는 한 번에 처리할 수 있는 콘텐츠 양을 결정하는 토큰 제한(컨텍스트 윈도우)이 있기 때문입니다. 간결하고 잘 구조화된 콘텐츠는 AI 시스템이 페이지를 완전히 읽고 이해할 수 있도록 보장합니다.

AI 검색 노출 개선이 필요하신가요?

현재 AI 검색 노출 상태에 대한 종합 진단을 받아보세요. 개선 방안을 함께 찾아드리겠습니다.