파이썬 썸네일형 리스트형 [AI] 한글과 영어의 토큰 수 비교: 글자가 짧아도 토큰은 많을 수 있어요 한글과 영어 문장의 토큰 수를 tiktoken으로 직접 세어 비교해요. 혹시 한글로 쓴 문장이 영어보다 글자 수는 더 짧은데, AI 사용량은 오히려 더 많이 잡혀서 고개를 갸웃한 적 있으세요?ChatGPT나 Claude 같은 AI 서비스는 문장을 글자 단위가 아니라 토큰이라는 조각 단위로 읽고, 길이 제한과 사용량도 이 토큰으로 계산해요. 그래서 한글과 영어의 토큰 수를 비교해 보면 글자가 적은 문장이 언제나 적은 토큰으로 표현되는 것은 아니라는 점을 직접 확인할 수 있어요. 이 글의 숫자는 2026년 기준 tiktoken 0.14.0에서 측정한 결과예요. 코드를 처음 만져보는 분도 앞 글에서 설치한 환경 그대로 따라올 수 있으니 걱정하지 않으셔도 돼요. 이 글에서 알아볼 내용은 '글자 수와 토큰 .. 더보기 [Python] 파이썬 Set 교집합·합집합·차집합 실전 활용법 메타 설명(짧고 간결한 한 문장): Set의 핵심 연산을 기준으로 중복 제거부터 데이터 비교까지 바로 적용하는 방법을 정리합니다. Set은 “겹치는 것을 정리하고, 두 덩어리를 비교하는” 상황에서 가장 강력합니다.같은 값이 여러 번 들어오면 한 번만 남기고 싶을 때, A 목록과 B 목록을 비교해서 공통만 뽑고 싶을 때, 혹은 A에는 있고 B에는 없는 것만 빠르게 찾고 싶을 때 Set이 딱 맞습니다. 그런데 막상 코드를 짜다 보면 “List로도 되는데 굳이 Set을 써야 하나요?” 같은 고민이 생깁니다. 이 고민은 아주 자연스럽습니다. 왜냐하면 Set은 순서가 없고, 인덱스로 접근할 수 없고, 중복을 허용하지 않는다는 성질 때문에, 익숙한 List와 사용감이 다르기 때문입니다. 하지만 관점을 바꾸면 오히려.. 더보기 [Python] 파이썬 변수와 자료형 완벽 정리 파이썬 변수와 자료형의 개념과 예제까지 단계별로 정리합니다. 파이썬을 처음 배우거나 다시 정리하려고 할 때 가장 먼저 마주치는 개념이 변수와 자료형입니다.이 두 개념이 정확하게 잡히지 않으면 이후에 배우는 조건문, 반복문, 함수, 클래스 모두에서 계속 혼란이 발생합니다.반대로 변수와 자료형의 역할을 정확히 이해하면 코드가 어떻게 움직이는지 자연스럽게 보이기 시작합니다. 변수는 데이터를 담는 이름이고, 자료형은 그 데이터의 성격을 정의합니다. 이 두 가지는 항상 함께 움직입니다.숫자를 담는 변수와 문자를 담는 변수는 다르게 취급되어야 하고, 여러 값을 한 번에 다루는 구조 역시 전혀 다른 방식으로 처리됩니다. 이 차이를 명확히 구분하지 못하면 오류가 반복적으로 발생합니다. 이 글에서는 파이썬에서 사용하는.. 더보기 [Python] 파이썬 print 함수 기초 설명 print()로 첫 코드를 실행하는 과정파이선을 처음 배우는 분들을 위해 Print()로 첫 코드를 실행하는 과정을 쉽게 설명해 보도록 하겠습니다. 파이썬을 처음 배우는 많은 분들이 가장 먼저 만나는 코드가 바로 print() 함수입니다."왜 첫 코드가 항상 print()일까?"라는 질문이 생기지만, 사실 이 함수는 프로그래밍의 기본 개념을 가장 쉽게 이해하게 만드는 출발점입니다. 눈에 보이지 않는 코드의 동작을 눈앞에 보여주는 기능이 바로 print()이기 때문에, 초보자에게도 코드가 실제로 “무엇을 하고 있는지” 직접 확인할 수 있게 해주는 가장 좋은 도구입니다.이 글에서는 파이썬을 설치한 직후, 가장 처음 실행하는 코드인 print() 함수 실행 과정 전체를 쉽고 세세하게 안내해드립니다.Print(.. 더보기 이전 1 다음
