안녕하세요 booleanjars.com입니다.
최근 제가 개발 중인 툴이 있는데요. 소개를 시켜드릴까 합니다.
우선 개발 하게 된 배경을 말씀드릴게요.
RAG를 구성하기 위해서는 context라는 것이 필요하고 그 context로 넣어줄 자료를 찾고 모으는 것이 하나의 일과가 됩니다. 또한 지속적으로 해야 하는 불편함이 있죠.
아무튼 context는 일반적으로 pdf, txt, cod, hwp, png 등등 여러 자료들이 LLM에게 전달 되게 됩니다.
LLM은 해당 자료를 context로 참고하여 사용자의 질의에 대한 답변을 생성하게 됩니다.
따라서 그 ‘자료’를 모으는 것이 중요한데요 사실 상당히 귀찮습니다. 자료를 모으는 과정이란.
RAG에도 docling이라고 해서 context 전처리 툴이 있는 모양입니다. 저는 불행히도 개발전에 이것을 몰랐습니다.
아무튼, 그래서 제가 개발한 프로그램은 “AI를 통해 자료를 JSON파일 포맷으로 요약해주는 자동화 툴” 입니다.
작동영상 보시죠
다음과 같이 문서에서 JSON정보를 추출해주고 또한 base64 인코딩을 통해 JSON파일 만으로도 원본이미지 복원이 가능합니다. 이는 추후에 생성형 AI를 사용하는 MCP서버에 활용하기 너무 좋을 것입니다.