RAG vs. GraphRAG: A Systematic Evaluation and Key Insights

이 논문은 텍스트 기반 작업에서 RAG 와 GraphRAG 를 체계적으로 비교 평가하기 위한 통합 프로토콜을 제시하고, 두 접근법의 장단점과 통합 전략을 분석하여 성능 향상을 도모합니다.

Haoyu Han, Li Ma, Yu Wang, Harry Shomer, Yongjia Lei, Zhisheng Qi, Kai Guo, Zhigang Hua, Bo Long, Hui Liu, Charu C. Aggarwal, Jiliang Tang

게시일 2026-03-05
📖 3 분 읽기☕ 가벼운 읽기

Each language version is independently generated for its own context, not a direct translation.

🧐 핵심 비유: "도서관 사서 vs. 인간 관계 전문가"

이 논문의 주제는 **"복잡한 질문에 답할 때, 어떤 검색 방법이 더 잘할까?"**입니다.

1. RAG (전통적인 검색): "빠른 도서관 사서"

  • 방식: 사용자가 질문하면, 사서가 도서관 책장 (문서) 을 빠르게 훑어보고 가장 관련 있는 책 한 두 권을 가져옵니다.
  • 강점: 단순하고 구체적인 사실을 찾을 때 매우 빠르고 정확합니다. (예: "대한민국의 수도는 어디야?", "어제 주식 시세는 어땠지?")
  • 약점: 책과 책 사이의 숨겨진 연결고리를 찾기 어렵습니다. 여러 정보를 종합해서 추론해야 하는 복잡한 질문에는 약할 수 있습니다.

2. GraphRAG (그래프 기반 검색): "인맥이 넓은 인간 관계 전문가"

  • 방식: 단순히 책만 찾는 게 아니라, 책 속의 인물, 사건, 개념들을 **점과 선으로 연결된 거대한 지도 (그래프)**로 만듭니다. 질문이 들어오면 이 지도를 따라가며 정보들을 연결하고 종합합니다.
  • 강점: 복잡한 추론이 필요한 질문에 강합니다. (예: "A 라는 사건이 B 라는 사건에 어떤 영향을 미쳤고, 그 결과 C 라는 사람이 어떻게 변했을까?") 여러 정보를 이어붙여 큰 그림을 그리는 데 탁월합니다.
  • 약점: 지도를 만드는 데 시간과 비용이 많이 들고, 아주 구체적인 세부 사항 (숫자나 날짜) 을 찾을 때는 오히려 RAG 보다 느리거나 부정확할 수 있습니다.

🔍 연구의 주요 발견 (한 줄 요약)

연구진은 이 두 방법을 다양한 시험 (질문 답변, 요약) 에서 공평하게 비교했습니다. 결과는 다음과 같습니다.

1. "누가 더 잘하나?" → 상황에 따라 다릅니다!

  • 단순한 사실 질문: RAG가 압도적으로 좋습니다. (예: "누가 대통령이었어?")
  • 복잡한 추론 질문: GraphRAG가 훨씬 좋습니다. (예: "왜 A 가 B 를 싫어하게 되었는지 그 과정을 설명해줘.")
  • 요약 작업:
    • 세부 사항이 중요한 요약: RAG 가 원문 그대로 가져와서 더 정확합니다.
    • 전체적인 흐름이나 다양한 관점: GraphRAG 가 더 넓은 시야를 제공합니다.

2. "그래프를 만드는 게 중요해"

GraphRAG 는 처음에 '지도 (그래프)'를 어떻게 그리느냐에 따라 성능이 천차만별입니다.

  • 비유: 지도를 그리는 사람이 (AI 모델) 실수를 많이 하면, 아무리 좋은 지도를 사용해도 길을 잃게 됩니다. 더 똑똑한 AI 로 지도를 그릴수록 성능이 좋아지지만, 그 비용도 비쌉니다.

3. "평가하는 방법도 함정이다"

논문은 흥미로운 사실을 발견했습니다. "AI 가 AI 를 평가하는 (LLM-as-a-Judge)" 방식은 순서에 따라 결과가 바뀔 수 있다는 것입니다.

  • 비유: 두 명의 요리사가 요리를 내놓을 때, 먼저 나온 요리를 더 맛있다고 생각하는 경향이 있다는 것입니다. 그래서 순서를 바꿔가며 평가해야 진짜 실력을 알 수 있습니다.

💡 결론: "둘 다 섞어 쓰는 게 최고!"

이 논문의 가장 중요한 메시지는 **"하나만 고집하지 마라"**는 것입니다.

  • 선택 (Selection) 전략: 질문이 단순하면 RAG 를, 복잡하면 GraphRAG 를 자동으로 골라 쓰는 것.
  • 통합 (Integration) 전략: RAG 의 정확한 사실과 GraphRAG 의 넓은 연결고리를 한 번에 가져와서 답을 만드는 것.

연구 결과, 이 두 방법을 상황에 맞게 섞어 쓰면 가장 정확하고 똑똑한 AI 를 만들 수 있었습니다.

📝 쉽게 정리한 교훈

"단순한 질문에는 '빠른 사서 (RAG)'를, 복잡한 추론에는 '인맥 전문가 (GraphRAG)'를 부르세요. 그리고 둘을 함께 쓰면 더 똑똑한 답을 얻을 수 있습니다."

이 연구는 앞으로 우리가 AI 를 설계할 때, 무조건 최신 기술 (그래프) 만 쫓기보다 질문의 성격에 맞춰 적절한 도구를 선택해야 한다는 중요한 통찰을 줍니다.