워드 클라우드 – 파이썬으로 네이버 데이터랩 키워드 활용 방법 #2
오늘은 워드 클라우드를 파이썬 코드로 구현하는 방법에 대해 살펴볼게요. 지난 글에서 네이버 데이터랩을 이용해서 키워드 조회수를 확인하는 방법에 대해 이야기했어요. 오늘은 추출한 키워드와 조회수로 워드 클라우드를 구성해 보겠습니다. 검색 키워드와 …
LangChain 프롬프트 템플릿으로 GPT 프롬프트 자동화하기 #1
지금까지 이 블로그에서도 LangChain(랭체인)에 대해서는 여러 방식으로 다뤄봤어요. 하지만, 프롬프트 템플릿이나 LangChain(랭체인) 자체를 구조적으로 자세하게 살펴보지는 못했어요. 오늘부터 몇 차례에 걸쳐 OpenAI의 LangChain(랭체인)에 대해 정리해 보도록 하겠습니다. 오늘은 그 첫번째로 …
파이썬 Transformer(트랜스포머) #1 – 감정 분석부터 Self-Attention
자연어 처리(NLP)는 인간의 언어를 기계가 이해하고 생성하는 기술로, Transformer(트랜스포머) 모델의 등장은 이런 자연어 처리 기술을 매우 고도화할 수 있게 만들었어요.이번 글에서는 Transformer의 이론적 배경, 핵심 구성 요소, Hugging Face 플랫폼과의 …
AI 글쓰기의 한계 #1 – 왜 GPT는 사람처럼 글을 못 쓸까?
AI 글쓰기와 관련하여 최근 나온 심박한 뉴스는 AI를 이용해서 자기소개서나 면접을 봐서 기업에 부정 합격했다는 뉴스라고 생각해요. 물론 아직 국내 보다는 해외 이슈가 더 많은 것 같기는 합니다만, 개인적으로 이런 …
OpenAI API 요금은 어떻게 계산될까? 토큰 개념과 tiktoken 활용 #1
오늘은 OpenAI API 요금에 대해 좀 이야기해 볼까 해요. 대부분의 LLM 기반 API들이 Token(토큰) 단위로 요금을 매기고 있는데, 이 Token(토큰)이라는 개념이 우리 같은 일반인에겐 좀 낯설잖아요. 그래서 OpenAI API 비용이 …