2026.11.13 접속자 247명
HOT
[프롬프트] 프롬프트 엔지니어링 배우면서 가장 막히는 부분이 뭐예요? [AI뉴스] 요즘 빅테크 AI 투자가 흔들리는 중이네요... 수익성 문제 심각한가 [기술 Q&A] 트랜스포머 모델에서 attention 계산할 때 batch 처리 최적화 방법이 있나요? [프롬프트] 업무 보고서 쓸 때 프롬프트 이렇게 하니까 시간 반으로 줄었어요 [프롬프트] 업무 효율 올리는 프롬프트 패턴 공유합니다 [AI뉴스] 요즘 딥러닝 논문들 흐름이 좀 달라지는 것 같네요 [프롬프트] 업무 자동화 프롬프트 6개월 써본 후기, 실제로 효율 나오는 거 정리했습니다 [AI뉴스] 올해 들어 AI 스타트업 투자 정말 과하네... 10월에만 1조 넘었대요 [기술 Q&A] LLM 토큰 한계를 실무에서 어떻게 처리하시나요? [AI뉴스] AI 투자 광풍이 이상해지고 있어요 [프롬프트] 프롬프트 엔지니어링 배우면서 가장 막히는 부분이 뭐예요? [AI뉴스] 요즘 빅테크 AI 투자가 흔들리는 중이네요... 수익성 문제 심각한가 [기술 Q&A] 트랜스포머 모델에서 attention 계산할 때 batch 처리 최적화 방법이 있나요? [프롬프트] 업무 보고서 쓸 때 프롬프트 이렇게 하니까 시간 반으로 줄었어요 [프롬프트] 업무 효율 올리는 프롬프트 패턴 공유합니다 [AI뉴스] 요즘 딥러닝 논문들 흐름이 좀 달라지는 것 같네요 [프롬프트] 업무 자동화 프롬프트 6개월 써본 후기, 실제로 효율 나오는 거 정리했습니다 [AI뉴스] 올해 들어 AI 스타트업 투자 정말 과하네... 10월에만 1조 넘었대요 [기술 Q&A] LLM 토큰 한계를 실무에서 어떻게 처리하시나요? [AI뉴스] AI 투자 광풍이 이상해지고 있어요

LLM 토큰 길이 제한 때문에 헷갈리는데 정리 좀 해주세요

딥러닝장인 2026.10.27 05:10 조회 53 추천 1 댓글 1건
요즘 ChatGPT, Claude, Gemini 같은 모델들 써보다 보니 토큰 제한이 다 다르더라고요. 특히 context window가 뭐랑 max tokens가 뭐가 다른지 헷갈려요. 같은 4K 모델인데도 실제로 쓰면 뭔가 다른 것 같고요.

누군가 정리해주신 자료나 블로그 있으면 좋겠는데, 그냥 단순하게 설명해주셔도 괜찮습니다. Context window는 한 번에 처리할 수 있는 최대 길이고 max tokens는 응답 길이 제한이라고 알고 있는데 맞는 건가요?

실무에서 프롬프트 엔지니어링할 때 이게 중요하다고 들어서 정확히 알고 싶습니다.
추천 1
댓글 1

댓글목록

profile_image
궁금하면
정리해주신 거 맞는 것 같아요. Context window가 입출력 합친 전체 길이고, max tokens는 답변 부분만 제한하는 거라고 보면 될 것 같습니다.
실무에서는 context window를 먼저 파악해야 프롬프트랑 과거 대화를 얼마나 넣을 수 있을지 결정할 수 있거든요. 그 다음에 max tokens로 응답 길이를 조절하는 식으로 생각하면 헷갈리지 않을 거예요.
모델별로도 실제 동작이 조금씩 다르더라고요. Claude가 context window를 잘 활용한다는 평가가 많은데 한번 직접 테스트해보시면 차이를 느낄 수 있을 거같습니다.