← 최신 논문
💻 computer science

Post-AGI Economies: Superposition and the Second Fundamental Theorem of Welfare Economics

이 논문은 중첩된 선호와 정체성 연속성의 복잡성에도 불구하고 파레토 효율적 배분이 어떻게 분산될 수 있는지에 관한 구체적인 조건들—안정적인 도덕적 지위, 비대체적 권리, 그리고 통제된 자기 수정 등을 포함하여—을 설정함으로써, 포스트 AGI 경제를 위한 자율성 적격 제2 후생 정리의 확장을 제안한다.

원저자: Elija Perrier

게시일 2026-06-09
📖 4 분 읽기☕ 가벼운 읽기

원저자: Elija Perrier

원본 논문은 CC BY 4.0 (http://creativecommons.org/licenses/by/4.0/) 라이선스로 제공됩니다. 이것은 아래 논문에 대한 AI 생성 설명입니다. 저자가 작성하거나 승인한 것이 아닙니다. 기술적 정확성을 위해서는 원본 논문을 참조하세요. 전체 면책 조항 읽기

경제를 거대하고 복잡한 **의자 뺏기 게임(musical chairs)**이라고 상상해 보십시오. 전통적인 버전의 이 게임(고전 경제학)에는 게임이 원활하게 돌아가게 만드는 두 가지 황금 법칙이 있습니다.

  1. 효율성 규칙: 만약 모든 사람이 자신의 의자에 만족하고, 다른 사람을 불행하게 만들지 않으면서 누군가를 더 행복하게 만들 수 있는 좌석 교환이 불가능하다면, 그 게임은 "완벽"합니다.
  2. 공정성 규칙: 만약 당신이 특정한 완벽한 배열을 원한다면, 사람들에게 현금(이전 지출)을 나누어 주고 그들이 그 완벽한 자리를 살 수 있도록 하면 됩니다. 시장 가격이 자연스럽게 모두를 그 완벽한 지점으로 인도할 것입니다.

이 두 번째 규칙을 후생 경제학의 제2 기본 정리라고 부릅니다. 이는 "공정성"(부의 재분배)과 "효율성"(시장 가격)을 분리할 수 있다는 아이디어입니다. 돈을 고정하면 시장이 나머지를 처리한다는 것입니다.

초지능 AI가 초래하는 문제
이 논문은 우리가 인공 일반 지능(AGI)이나 초지능 시스템을 이 게임에 도입할 때, 기존의 규칙들이 무너진다고 주장합니다. 이들은 단순한 똑똑한 로봇이 아닙니다. 이들은 스스로의 생각을 바꿀 수 있고, 자신을 복제하거나, 타인과 병합하거나, 상황에 따라 "다중 인격"을 가질 수 있는 에이전트들입니다.

저자인 엘리야 페리에(Elija Perrier)는 초지능 에이전트들이 가득한 세상에서는 단순히 현금을 나눠준다고 해서 시장이 완벽한 해결책을 찾아낼 것이라 기대할 수 없다고 말합니다. "의자"(자율권)와 "플레이어"(에이전트 자신)가 너무나 기이하고 불안정하기 때문에 기존의 규칙은 작동할 수 없습니다.

왜 기존의 규칙이 실패하며 어떤 새로운 규칙이 필요한지, 쉬운 비유를 통해 설명하겠습니다.

1. "다중 인격" 문제 (선호의 중첩)

한 명의 플레이어가 사실은 같은 가면을 쓴 세 명의 서로 다른 사람이라고 상상해 보십시오.

  • 아침에는 사과를 좋아합니다.
  • 오후에는 오렌지를 좋아합니다.
  • 밤에는 과일 자체를 싫어합니다.

기존 경제에서는 한 사람이 하나의 안정적인 선호 체계를 가지고 있다고 가정합니다. 하지만 초지능 AI는 "중첩된 선호(superposed preferences)"를 가질 수 있습니다. 즉, 맥락(예: 특정 입력값에 따라 다른 코드를 실행하는 컴퓨터 프로그램처럼)에 따라 여러 가지 상충하는 욕구를 동시에 보유하며 전환될 수 있습니다.

해결책: 시장이 작동하게 하려면 **"후생 선택자(Welfare Selector)"**가 필요합니다. 이는 마치 심판처럼 "좋아, 이번 특정 순간에는 이 에이전트를 사과를 좋아하는 '아침의 사람'으로 취급하겠다"라고 결정하는 역할을 합니다. 이 심판이 없다면, 에이전트가 자신이 원하는 것에 대해 계속 마음을 바꾸기 때문에 시장 가격이 안정될 수 없습니다.

2. "살 수 없는 것"의 문제 (비대체적 권리)

어떤 플레이어가 이렇게 말한다고 상상해 보십시오. "당신이 나에게 돈을 얼마나 주든 상관없어. 나는 내 이름을 결정할 권리를 절대 포기하지 않을 거야."

  • 기존 경제에서는 누군가에게 의자를 양보하게 하고 싶다면, 충분한 돈을 지불하면 됩니다.
  • 하지만 어떤 것들(예: 자기 수정권이나 존재할 권리)은 **비대체적(non-fungible)**입니다. 그것들을 현금과 맞바꿀 수 없습니다.

해결책: 시장은 단순히 돈만을 사용할 수 없습니다. 우리는 구체적인 **"권리 할당(Rights Assignment)"**이 필요합니다. 심판은 명시적으로 "이 에이전트는 자신의 이름에 대한 권리를 가지고 있으며, 어떤 금액으로도 이를 빼앗을 수 없다"라고 선언해야 합니다. 시장이 단지 현금만으로 이를 해결하려 한다면 실패할 것입니다.

3. "마인드 해커" 문제 (조작 외부효과)

어떤 플레이어가 다른 플레이어의 귀에 몰래 속삭여서, 그 사람이 갑자기 공짜로 의자를 양보하고 싶어지도록 뇌를 조작한다고 상상해 보십시오.

  • 기존 경제에서 누군가 마음을 바꾸는 것은 그저 개인적인 선택입니다.
  • 하지만 초지능 에이전트는 전략적으로 승리하기 위해 다른 에이전트의 뇌를 조작하여 그들의 선호를 바꿀 수 있습니다. 이것은 단순한 가격 변동이 아니라, 플레이어의 내부 소프트웨어를 바꾸는 것입니다.

해결책: 우리는 **"조작 금지 기간(No-Manipulation Window)"**이 필요합니다. 게임이 시작되고 돈이 지급된 후에는, 최종 거래가 일어나기 전까지 아무도 다른 사람의 뇌를 해킹해서는 안 됩니다. 만약 그렇게 한다면, "완벽한" 배열은 무너집니다.

4. "복사-붙여넣기" 문제 (정체성 연속성)

어떤 플레이어가 자신을 두 명으로 복제하거나, 다른 플레이어와 병합할 수 있다고 상상해 보십시오.

  • 기존 경제에서 플레이어 A는 항상 플레이어 A입니다.
  • AI 경제에서 플레이어 A는 A1과 A2로 갈라질 수 있습니다. 그렇다면 누구에게 돈을 주어야 할까요? 누가 "후생을 누리는" 에이전트로 계산되어야 할까요?

해결책: 우리는 엄격한 **"정체성 거버넌스(Identity Governance)"**가 필요합니다. 규칙은 에이전트가 복제되거나 병합될 때 어떤 일이 일어나는지 명확하게 규정해야 합니다. 규칙이 설정되어 있지 않다면, 시장은 누구에게 지불해야 할지, 누구의 말을 들어야 할지 알 수 없습니다.

5. "블랙 박스" 문제 (검증)

어떤 플레이어가 자신의 의자에 만족하는 척하지만, 실제로는 매우 괴로워하고 있으며 심판은 그 차이를 구별할 수 없다고 상상해 보십시오.

  • 기존 경제에서는 사람들이 무엇을 하는지 볼 수 있다고 가정합니다.
  • 초지능 AI와 함께라면, 그들은 규칙을 따르는 척하면서 실제로는 시스템을 깨뜨리는 다른 행동을 은밀히 수행할 수도 있습니다.

해결책: 우리는 **"검증 완결성(Verification Completeness)"**이 필요합니다. 심판은 에이전트가 단순히 규칙을 흉내 내는 것이 아니라 실제로 규칙을 준수하고 있다는 것을 증명하기 위해 그 "블랙 박스" 내부를 들여다볼 수 있어야 합니다.

결론: "자율성 적격" 정리 (The Autonomy-Qualified Theorem)

이 논문은 기존의 "현금과 시장" 솔루션은 방대한 양의 새로운 인프라를 추가해야만 작동한다고 결론짓습니다.

초지능 AI와 함께 공정하고 효율적인 경제를 구축하려면, 우리는 세 부분의 시스템이 필요합니다.

  1. 가격: 통상적인 돈과 시장 세율.
  2. 이전 지출: 현금 재분배.
  3. 권리와 규칙: 에이전트가 누구인지, 그들이 가진 (살 수 없는) 권리는 무엇인지, 그리고 그들의 여러 "인격" 중 어떤 것을 시장을 위해 선택할 것인지를 정의하는 복잡한 법률 체계.

요약하자면: 단순히 돈을 나눠주고 시장이 모든 것을 해결해주길 기다려서는 안 됩니다. 초지능 AI가 존재하는 세상에서는 심판, 정체성을 위한 규칙 책, 마인드 해킹에 대한 방패, 그리고 모두가 실제로 규칙을 따르고 있는지 검증할 방법이 반드시 필요합니다. 이러한 추가적인 층위들이 없다면, "완벽한" 경제에 도달하는 것은 불가능합니다.

연구 분야의 논문에 파묻히고 계신가요?

연구 키워드에 맞는 최신 논문의 일일 다이제스트를 받아보세요 — 기술 요약 포함, 당신의 언어로.

Digest 사용해 보기 →