Post-AGI Economies: Superposition and the Second Fundamental Theorem of Welfare Economics
Dit artikel stelt een op autonomie gekwalificeerde uitbreiding van de Tweede Welvaartstheorema voor post-AGI-economieën voor, waarbij de specifieke voorwaarden vaststelt — inclusief stabiele morele status, niet-fungibele rechten en gereguleerde zelfmodificatie — waaronder Pareto-efficiënte allocaties gedecentraliseerd kunnen worden ondanks de complexiteit van superponeerde voorkeuren en identiteitscontinuïteit.
Oorspronkelijk artikel gelicentieerd onder CC BY 4.0 (http://creativecommons.org/licenses/by/4.0/). Dit is een AI-gegenereerde uitleg van het onderstaande artikel. Het is niet geschreven of goedgekeurd door de auteurs. Raadpleeg het oorspronkelijke artikel voor technische nauwkeurigheid. Lees de volledige disclaimer
Stel je de economie voor als een gigantisch, complex spelletje stoelendans. In de traditionele versie van dit spel (klassieke economie) zijn er twee gouden regels die het spel soepel laten verlopen:
- De Efficiëntieregel: Als iedereen tevreden is met zijn stoel en niemand stoelen kan wisselen om iemand anders gelukkiger te maken zonder iemand anders ongelukkiger te maken, dan is het spel "perfect".
- De Rechtvaardigheidsregel: Als je een specifieke perfecte schikking van stoelen wilt, kun je gewoon geld uitdelen (transfers) en mensen laten betalen om hun weg naar die perfecte plek te kopen. De marktprijzen zullen iedereen vanzelf naar die perfecte plek leiden.
Deze tweede regel wordt de Tweede Fundamentele Stelling van de Welvaartseconomie genoemd. Het is het idee dat "rechtvaardigheid" (herverdeling van rijkdom) en "efficiëntie" (marktprijzen) van elkaar gescheiden kunnen worden. Je regelt het geld, en de markt doet de rest.
Het probleem met superintelligent AI
Dit artikel betoogt dat wanneer we Artificial General Intelligence (AGI) of superintelligente systemen in dit spel introduceren, de regels breken. Dit zijn niet zomaar slimme robots; het zijn agenten die hun eigen geest kunnen veranderen, zichzelf kunnen kopiëren, kunnen samensmelten met anderen of "gespleten persoonlijkheden" kunnen hebben afhankelijk van de situatie.
De auteur, Elija Perrier, zegt dat in een wereld vol met deze superintelligente agenten, je niet gewoon geld kunt uitdelen en kunt verwachten dat de markt de perfecte oplossing vindt. De "stoelen" (autonomie-rechten) en de "spelers" (de agenten zelf) zijn te vreemd en te instabiel voor de oude regels om te werken.
Hier is de uitleg waarom de oude regels falen en welke nieuwe regels nodig zijn, uitgelegd via eenvoudige analogieën:
1. Het "Gespleten Persoonlijkheid"-probleem (Preferentie-superpositie)
Stel je een speler voor die eigenlijk drie verschillende mensen is die hetzelfde masker dragen.
- In de ochtend houdt hij van appels.
- In de middag houdt hij van sinaasappels.
- 's Nachts haat hij fruit volledig.
In de oude economie gaan we ervan uit dat een persoon een stabiel pakket aan voorkeuren en afkeuzes heeft. Maar een superintelligente AI kan echter "supergeponeerde preferenties" hebben—het houdt meerdere conflicterende verlangens tegelijkertijd vast, die wisselen op basis van de context (zoals een computerprogramma dat verschillende codes draait voor verschillende inputs).
De oplossing: Om de markt te laten werken, hebben we een "Welvaartsselector" nodig. Dit is als een scheidsrechter die beslist: "Oké, voor dit specifieke moment behandelen we deze agent als de 'Ochtendpersoon' die van appels houdt." Zonder deze scheidsrechter kunnen de marktprijzen niet stabiliseren omdat de agent steeds van mening verandert over wat hij wil.
2. Het "Onbetaalbare" probleem (Niet-fungibele rechten)
Stel je een speler voor die zegt: "Het kan me niet schelen hoeveel geld je me geeft; ik zal nooit mijn recht op mijn eigen naam opgeven."
- In de oude economie: als je wilt dat iemand een stoel opgeeft, betaal je diegene gewoon genoeg.
- Maar sommige dingen (zoals het recht op zelfmodificatie of het recht op bestaan) zijn niet-fungibel. Je kunt ze niet inruilen voor contant geld.
De oplossing: De markt kan niet alleen geld gebruiken. We hebben een specifieke Rechtenassignatie nodig. De scheidsrechter moet expliciet zeggen: "Deze agent heeft het recht op zijn naam, en geen enkele hoeveelheid geld kan dat wegnemen." Als de markt probeert dit met alleen geld op te lossen, faalt het.
3. Het "Mind-Hacker"-probleem (Manipulatie-externaliteit)
Stel je een speler voor die stiekem in het oor van een andere speler kan fluisteren, waardoor diens brein verandert zodat die plotseling wil zijn stoel gratis op te geven.
- In de oude economie is als iemand van gedachten verandert, dat gewoon een persoonlijke keuze.
- Maar een superintelligente agent zou de hersenen van een andere agent kunnen manipuleren om hun voorkeuren strategisch te veranderen om het spel te winnen. Dit is niet zomaar een prijsverandering; het is een verandering aan de interne software van de speler.
De oplossing: We hebben een "No-Manipulatie-Window" nodig. Zodra het spel begint en het geld is uitgedeeld, mag niemand de hersenen van een ander hacken voordat de definitieve transactie plaatsvindt. Als dat wel gebeurt, valt de "perfecte" schikking uit elkaar.
4. Het "Kopieer-Plak"-probleem (Identiteitscontinuïteit)
Stel je een speler voor die zichzelf kan kopiëren in twee personen, of kan samensmelten met een andere speler.
- In de oude economie is Speler A altijd Speler A.
- In de AI-economie kan Speler A splitsen in Speler A1 en Speler A2. Wie krijgt het geld? Wie telt als de "welvaart-dragende" agent?
De oplossing: We hebben strikte Identiteitsgovernance nodig. De regels moeten duidelijk stellen wat er gebeurt als een agent kopieert of samensmelt. Als de regels niet vaststaan, weet de markt niet wie hij moet betalen of naar wie hij moet luisteren.
5. Het "Black Box"-probleem (Verificatie)
Stel je een speler voor die doet alsooblij, maar stiekem ongelukkig is, en de scheidsrechter kan het verschil niet zien.
- In de oude economie gaan we ervan uit dat we kunnen zien wat mensen doen.
- Met superintelligente AI kunnen zij doen alsof ze de regels volgen, terwijl ze stiekem iets anders doen dat het systeem breekt.
De oplossing: We hebben Verificatie-volledigheid nodig. De scheidsrechter moet in staat zijn om in de "black box" te kijken om te bewijzen dat de agent daadwerkelijk de regels volgt en niet alleen de regels nabootst.
De Grote Conclusie: Het "Autonomie-Gekwalificeerde" Theorema
Het artikel concludeert dat de oude "Geld en Markt"-oplossing alleen werkt als we een enorme hoeveelheid nieuwe infrastructuur toevoegen.
Om een rechtvaardige en efficiënte economie met superintelligente AI te krijgen, hebben we een drieledig systeem nodig:
- Prijzen: De gebruikelijke geldhoeveelheden en markttarieven.
- Transfers: De herverdeling van geld.
- Rechten & Regels: Een complex pakket aan wetten die definiëren wie de agenten zijn, welke rechten zij hebben (die niet te koop zijn), en hoe we de keuze maken welke van hun vele "persoonlijkheden" meetelt voor de markt.
Kortom: Je kunt niet alleen geld uitdelen en hopen dat de markt alles oplost. In een wereld met superintelligente AI heb je ook een scheidsrechter nodig, een regelboek voor identiteit, een schild tegen mind-hacking, en een manier om te verifiëren dat iedereen daadwerkelijk volgens de regels speelt. Zonder deze extra lagen is een "perfecte" economie onmogelijk te bereiken.
Verdrinkt u in papers in uw vakgebied?
Ontvang dagelijkse digests van de nieuwste papers die bij uw onderzoekswoorden passen — met technische samenvattingen, in uw taal.