언어모델1 사람이 쓰는 언어(자연어)를 AI가 어떻게 해석할까? (NLP, 트랜스포머, 형태소 분석) 솔직히 저는 처음에 AI 챗봇이 그냥 키워드 매칭으로 답변을 뱉어내는 기계라고 생각했습니다. "오늘 날씨 어때?"라고 치면 '날씨'라는 단어를 찾아서 날씨 API를 호출하는 식이라고요. 그런데 직접 LLM 기반 서비스를 이것저것 써보면서 그 생각이 완전히 틀렸다는 걸 깨달았습니다. 자연어 처리(NLP)가 실제로 어떻게 작동하는지 알고 나서야, 제가 얼마나 단순하게 봤는지 부끄러워졌습니다.목차NLP의 첫 관문, 텍스트 정제와 형태소 분석트랜스포머 알고리즘이 문맥을 읽는 방식, 직접 써보니인공지능 자연어 처리에 대해 자주 하는 질문(FAQ)결론: 인간과 인공지능이 소통하는 미래NLP의 첫 관문, 텍스트 정제와 형태소 분석인공지능이 인간의 말을 이해하는 과정은 생각보다 훨씬 지저분한 데서 시작됩니다. 원시 텍.. 2026. 7. 31. 이전 1 다음
