Decoupling Search from Reasoning: A Vendor-Agnostic Grounding Architecture for LLM Agents
이 논문은 검색 추출(search retrieval)과 추론 모델(reasoning models)을 분리하여 라우팅과 캐싱에 대한 세밀한 제어를 제공함으로써, 다양한 LLM 워크로드 전반에서 네이티브 수준의 정확도를 달면서도 비용과 지연 시간을 획기적으로 줄이는 벤더 중립적 아키텍처인 디커플드 서치 그라운딩(Decoupled Search Grounding, DSG)을 소개한다.
원본 논문은 CC BY 4.0 (http://creativecommons.org/licenses/by/4.0/) 라이선스로 제공됩니다. 이것은 아래 논문에 대한 AI 생성 설명입니다. 저자가 작성하거나 승인한 것이 아닙니다. 기술적 정확성을 위해서는 원본 논문을 참조하세요. 전체 면책 조항 읽기
당신은 질문에 답하기 위해 유능하고 박식한 비서(LLM)를 고용한다고 상상해 보십시오. 때때로 이 비서는 좋은 답변을 내놓기 위해 인터넷에서 최신 정보를 찾아봐야 합니다.
현재 대부분의 기업들은 "네이티브 서치(Native Search)" 방식을 사용합니다. 이것은 마치 비서가 자신만의 개인 도서관과 검색 엔진을 소유하고 있는 것과 같습니다. 비서는 도서관에 가서 책을 가져와 당신에게 가져다줍니다. 이는 편리하지만, 당신은 그들이 어떤 도서관을 이용했는지, 책을 가져오는 데 비용이 얼마나 들었는지, 혹은 시간을 얼마나 썼는지 알 수 없습니다. 더 심각한 것은, 비서가 찾은 책들에 너무 흥وث한 나머지 당신이 요청한 간단한 답변 대신 길고 장황한 이야기를 늘어놓기 시작한다는 점입니다.
이 논문의 저자들은 **디커플드 서치 그라운딩(Decoupled Search Grounding, DSG)**이라는 새로운 방식을 제안합니다. 이 방식의 작동 원리를 쉬운 비유를 통해 설명하면 다음과 같습니다.
1. "중간 관리자" 매니저 (게이트웨이)
비서가 직접 도서관을 소유하는 대신, 당신은 전문화된 매니저(DSG 게이트웨이)를 고용합니다.
- 작동 방식: 비서가 정보가 필요할 때, 매니저에게 요청합니다. 그러면 매니저는 가장 적합한 도서관을 골라 방문합니다 (예를 들어, 어떤 곳은 더 저렴하거나, 어떤 곳은 더 최신 뉴스를 제공할 수 있습니다).
- 이점: 도서관을 교체할 때 비서를 해고할 필요 없이 즉시 바꿀 수 있습니다. 만약 A 도서관이 너무 비싸지면, 매니저는 그냥 B 도서관으로 전환하면 됩니다. 비서는 이러한 변화를 전혀 알지 못합니다.
2. "엄격한 집사" (소스 인지형 포맷팅)
"네이티브 서치" 비서가 가진 가장 큰 문제 중 하나는 말이 너무 많아진다는 것입니다. 만약 당신이 "프랑스의 수도는 어디인가요?"라고 물으면, 그들은 "음, 제가 찾아본 결과, 검색 결과에 따르면 파리가 수도인 것으로 밝혀졌습니다..."라고 답할 수 있습니다.
- DSG의 해결책: 매니저는 엄격한 집사 역할을 합니다. 그들은 도서관으로부터 받은 가공되지 않은 정보를 가져와서 깔고 다듬은 뒤, 정형화된 패키지 형태로 비서에게 전달합니다.
- 결과: 비서는 불필요한 잡담 없이 당신이 요청한 정확한 내용(예: 단순히 "파리")만을 제공하도록 강제됩니다. 이는 현실 세계에서 컴퓨터가 이러한 답변을 자동으로 읽어야 할 때 매우 중요한데, 추가적인 단어들이 컴퓨터 코드를 망가뜨릴 수 있기 때문입니다.
3. "스마트 파일링 캐비닛" (캐싱)
만약 당신이 같은 질문을 연달아 두 번 한다고 가정해 봅시다.
- 네이티브 서치: 비서는 다시 도서관에 가서 비용을 지불하고 책을 다시 가져옵니다. 당신은 비용을 두 번 지불하게 됩니다.
- DSG: 매니저에게는 스마트 파일링 캐비닛이 있습니다. 만약 이전에 본 적 있는 질문을 던진다면, 매니저는 캐비닛에서 즉시 답변을 꺼내 옵니다.
- 결과: 테스트 결과, 이 파일링 캐비닛은 매우 효과적이어서 반복되는 질문의 99.4%를 즉시 답변해 냈으며, 검색 비용을 거의 제로 수준으로 낮추고 응답 속도를 68% 더 빠르게 만들었습니다.
4. "예산 조절 노브" (조절 가능한 제어)
기존 방식에서는 도서관 서비스에 대해 고정된 가격을 지불해야 했습니다. 하지만 DSG를 사용하면 예산 조절 노브를 가질 수 있습니다.
- 당신은 매니저에게 이렇게 말할 수 있습니다: "이 질문에는 0.01달러를 써서 결과 3개를 가져오세요." 또는 "이 중요한 질문에는 0.50달러를 써서 결과 10개를 가져오세요."
- 이를 통해 기업은 실제로 깊이 있는 조사가 필요한 경우에만 비용을 지불함으로써 막대한 돈을 절약할 수 있습니다.
무엇을 발견했는가?
저자들은 다섯 가지 종류의 스마트 비서와 다양한 유형의 질문을 사용하여 이 새로운 시스템을 기존의 "네이티브 서치" 방식과 비교 테스트했습니다.
- 비용: 표준적인 질문에 대해서는 비싼 네이티브 서치와 거의 동일한 품질의 답변을 얻으면서도 비용을 91% 절감할 수 있었으며, 실제 이커머스 테스트에서는 98% 이상의 비용을 절감할 수 있음을 발견했습니다.
- 속ness (속도): "스마트 파일링 캐비닛" 덕분에 동일한 질문이 반복될 때 답변이 훨씬 빠르게 돌아왔습니다.
- 신뢰성: "엄격한 집사" 방식은 짧고 단순한 답변이 필요한 상황에서 비서가 길고 지저한 문단을 작성하는 것을 막아주었습니다. 이는 깨끗한 데이터에 의존하는 시스템에서 오류가 발생하는 것을 방지했습니다.
핵심 요약
이 논문은 인터넷 검색이 특정 AI 기업의 숨겨진, 고정된 기능이 되어서는 안 된다고 주장합니다. 대신, 검색은 관리하고, 최적화하며, 교체할 수 있는 별도의 제어 가능한 도구가 되어야 합니다. "검색"하는 부분과 "생각"하는 부분을 분리함으로써, 기업은 비용을 절감하고, 더 빨라지며, 답변을 깨끗하고 신뢰할 수 있게 유지할 수 있습니다.
연구 분야의 논문에 파묻히고 계신가요?
연구 키워드에 맞는 최신 논문의 일일 다이제스트를 받아보세요 — 기술 요약 포함, 당신의 언어로.