안녕하세요! 오늘은 일본에서 진행된 흥미로운 AI 연구 논문 하나를 소개해드리려고 합니다. 주제는 ‘일본 HPV(인유두종바이러스) 백신 접종 상황과 정보 전달 문제’인데요, 이 연구는 백신에 대한 정보 불균형과 잘못된 정보가 만연한 상황에서 AI를 활용해 어떻게 신뢰할 만한 정보를 시민들에게 제공하고, 동시에 의료기관에는 유용한 인사이트를 전달할 수 있는지에 대해 풀어낸 내용입니다.
기존 연구와 차별점: 단순 분석에서 양방향 소통으로
기존의 HPV 백신 관련 연구들은 대체로 소셜미디어에서의 감정 분석(sentiment analysis)이나 주제 모델링(topic modeling) 같은 ‘수동적’ 데이터 분석에 머물렀습니다. 즉, 무엇이 논의되고 있는지만 파악하는 수준이었죠. 또한 건강 관련 챗봇들도 간단한 FAQ나 제한된 데이터 소스만을 활용하는 경우가 많았습니다.
이 연구의 핵심 차별점은 ‘양방향’ AI 에이전트 시스템을 구축했다는 점입니다.
- 단방향이 아닌 상호작용: 사용자(시민)와 의료기관 간 실시간 소통을 가능하게 합니다. 예를 들어, 시민이 챗봇에게 HPV 백신에 관한 질문을 하면, 챗봇은 학술 논문, 정부 문서, 뉴스, 소셜미디어 등 4가지 서로 다른 데이터 소스를 RAG(Retrieval-Augmented Generation) 기술로 종합해 답변을 만듭니다.
- 다양한 데이터 소스 융합: 이런 이질적인 소스들을 통합해 단편적 정보가 아닌 ‘구체적’이고 ‘출처가 명확한’ 답변을 생성합니다.
- 대화 맥락 이해 및 지속성 유지: 단일 질문에 답하는 기존 챗봇과 달리, 여러 턴에 걸친 대화에서 이전 맥락을 기억하며 자연스러운 대화를 이어갑니다.
- 의료기관 리포트 자동 생성: 챗봇 사용자의 질문 패턴과 소셜미디어 의견들을 분석해 주기적으로 요약 보고서를 자동으로 작성해 전달합니다. 이 보고서에는 여론 변화, 오해 및 잘못된 정보 탐지, 트렌드 분석까지 포함됩니다.
이처럼 AI 시스템이 단순히 정보를 ‘응답’하는 역할을 넘어서 ‘의사소통 채널’로 기능하게 만든 점이 기존 연구 대비 큰 진전입니다.
기술적 포인트: 멀티툴 에이전트 + 대규모 벡터 DB
기술적으로도 여러 재미난 시도를 했는데요.
- ReAct 에이전트 아키텍처: 챗봇은 단일 컨트롤러 에이전트가 있고, 5개의 ‘전문 도구’(논문, 공식문서, 뉴스, SNS, 잡담)가 있습니다. 사용자의 질문을 받고 가장 적합한 도구를 골라 답변에 필요한 정보를 수집하고, 필요하면 다중 도구를 반복 호출하는 구조입니다.
→ 기존 챗봇이 단일 지식 소스 또는 단일 툴만 활용하는 것과 다르게, AI가 상황에 따라 도구를 ‘선택’하고 ‘조합’해서 정확하고 풍부한 답변을 만들어 내죠. - 벡터 데이터베이스(Qdrant) 활용 및 임베딩:
- 네 가지 데이터(논문, 정부 문서, 뉴스, SNS)를 모두 2048차원의 벡터로 임베딩해 저장하고, 벡터 유사도를 통해 관련 정보를 빠르게 검색합니다.
- 일본어 특성(히라가나, 가타카나, 한자 혼용)과 의료용어 처리 등 언어적 어려움을 극복한 임베딩 모델(plamo-embedding-1b)을 썼습니다. → 단순 키워드 검색이 아닌, 문맥과 의미를 고려한 검색이 가능해졌습니다.
- 인용과 검증 자동화:
- 답변 내에 인용 표시를 넣고, 두 단계 검증을 통해 인용의 정확성과 완전성을 확인합니다.
- 이 부분은 의료 정보에서 ‘출처 신뢰도’가 매우 중요한데, 기존 챗봇들이 간과하기 쉬운 부분을 기술적으로 꼼꼼하게 다뤘습니다.
- 자동 보고서 생성 시스템:
- 뉴스, 논문, 소셜미디어, 챗 대화 내용 각각을 전문 분석 모듈에서 분석하고, 이를 통합해 한눈에 보기 쉽게 PDF 보고서를 생성해 의료기관에 제공합니다.
- 소셜미디어 분석 모듈은 독특하게도 ‘주제 모델링 + 입장 분류(찬성/반대/중립) + 허위정보 탐지’까지 수행합니다. → 이렇게 실제 의사결정을 지원하는 문서까지 자동화한 게 인상적입니다.
평가 및 성능: 전문가 수준의 신뢰감
- 챗봇은 단순 질문에 대해 5점 만점 중 약 4.8점, 복수 턴 대화에서는 4.98점이라는 높은 평가를 받았습니다. (특히 정확성, 적절한 도구 선택, 전문 의료커뮤니케이션 톤 부분에서 우수)
- 평가에는 사람이 직접 쓴 질문과 대화 시나리오, 그리고 AI 기반 평가자의 점수가 함께 활용됐는데, 인간 평가자와 높은 일치도를 보였습니다.
- 보고서 생성도 완성도와 정확성에서 매우 높은 점수를 받았으며, 인용된 자료의 유효성은 만점(5.0)을 기록했습니다.
종합하면!
사실 HPV 백신 같은 민감한 주제는 그냥 ‘정보만 넘겨준다고’ 해결되는 게 아니잖아요. 특히 일본처럼 안전성 논란으로 접종률이 뚝 떨어진 상황에서는, 사람들이 믿을 만한 정보를 ‘읽는 것’ 뿐만 아니라 ‘대화’할 수 있어야 하죠. 이 논문에서 선보인 AI 시스템은 단순 봇이 아니라, 의료기관과 시민을 연결하는 ‘소통 엔진’이 될 가능성이 높습니다.
또한, 기술적으로도 다양한 데이터 소스를 똑똑하게 섞어가며 실시간으로 정확도 높은 답변을 내놓는 다중 도구 조율(ReAct agent)과 자연스러운 대화 흐름 유지, 그리고 양질의 보고서 자동 생성 기능은 지금 다운로드 받고 싶은 챗봇 중 단연 최고 수준이라 할 수 있어요.
마무리: 앞으로 AI가 해야 할 역할은 ‘신뢰와 소통’
이번 일본 HPV 백신 AI 시스템은 의료 AI 기술이 단순한 적응형 정보 제공기를 넘어, ‘신뢰받는 조언자’와 ‘현장과 정책을 연결하는 브릿지’가 되도록 설계하는 좋은 본보기입니다.
더 나아가 여러 나라 언어와 백신 주제로 확장하면, 전 세계적으로 커다란 공중보건 문제 해결에 기여할 수 있을 거라 기대합니다.
궁금하신 점이나 논문 관련 기술 사항 더 알고 싶으시면 댓글 달아주세요. AI와 공중보건의 만남, 앞으로도 계속 기대해 봅시다!
감사합니다 :)