Prompt Engineering and Validation for Developing LLM-based Chatbots for Telemedicine Information Retrieval

본 연구는 주간보호센터 등에서 거동이 불편한 고령 환자를 대상으로 확산되고 있는 비대면 진료 환경을 고려하여, ChatGPT와 같은 대화형 인공지능 기술을 환자 진료 기록과 연동하여 진료 정보를 손쉽게 확인할 수 있는 챗봇 개발을 목표로 한다. 우선, CoT(Chain of Thought), 퓨샷(Few-Shot) 기능을 활용한 프롬프트를 설계하여 챗봇을 구성하였다. 의료 및 주제 분석 전문가를 통해 총 478개 테스트 데이터를 만들고 평가하여 챗봇의 신뢰성을 확인하였다. 제안된 챗봇은 89% 이상의 정확도를 가졌고, 이를 통해 환자 진료 기록과 프롬프트 기술을 연동한 챗봇을 활용하여 비대면 진료의 효율성을 높일 수 있는 가능성을 확인하였다.