1. 들어가며RAG(검색 증강 생성) 시스템을 구축하거나 LLM을 학습시킬 때 가장 큰 골칫거리는 무엇일까요? 바로 데이터 전처리입니다.회사에 쌓여있는 문서는 PDF, Word, Excel, PowerPoint 등 다양한 포맷으로 존재합니다. 이를 단순히 텍스트만 추출(Plain Text)하면 표 구조가 깨지거나 제목과 본문의 구분이 사라져, AI가 문맥을 제대로 이해하지 못합니다.이때 Markdown(마크다운)은 최고의 해결책입니다. # 제목, | 표 | 와 같이 구조를 명확히 유지하면서도 토큰 효율성이 좋기 때문이죠.오늘 소개할 MarkItDown은 마이크로소프트가 개발한 오픈소스 도구로, "세상의 모든 파일을 가장 쉽고 빠르게 마크다운으로 변환"해주는 강력한 유틸리티입니다. 단순 변환을 넘어 OCR..