Endogenous Feedback in Coevolutionary Games Reshapes the Stability of Cooperation

Technische Samenvatting: Endogene Feedback in Co-evolutionaire Spellen Herstructureert de Stabiliteit van Samenwerking

Probleemstelling
De standaard Evolutionaire Speltheorie (EGT) gaat er doorgaans van uit dat uitbetalingsstructuren vaststaan of uitsluitend worden gevormd door externe omgevingsvariabelen. In deze modellen fungeert de omgeving als een statisch decor of als een exogene dynamische variabele (zoals in eco-evolutionaire modellen) die strategiekeuze beïnvloedt, maar de strategieën zelf veranderen de prikkelstructuur niet direct in real-time. Veel real-world systemen – variërend van sociale normen en online platformen tot financiële markten – vertonen echter een tweerichtingsfeedback waarbij collectief gedrag de prikkels die toekomstige strategische competitie regeren, direct herstructureert. Bestaande modellen slagen er vaak niet in de directe, endogene koppeling vast te leggen waarbij het gespeelde spel een functie is van de huidige of vroegere strategische samenstelling van de populatie, en niet van een externe voorraad middelen.

Methodologie
De auteurs introduceren het Endogene Feedback Model (EFM), een raamwerk voor paarsgewijze symmetrische co-evolutionaire spellen waarbij de uitbetalingsmatrix direct evolueert als een functie van het samenwerkingsniveau van de populatie, $\rho(t)$. In tegenstelling tot eco-evolutionaire modellen die strategiefrequenties koppelen aan een aparte omgevingsvariabele, stelt het EFM dat het spel $G(t)$ wordt bepaald door de dichtheid van coöperanten op een eerder tijdstip $t-\tau$.

De algemene formulering definieert het spel op tijdstip $t$ als een convexe combinatie van twee basisspellen, $G_1$ en $G_2$:
$$G(t) = [1 - f(\rho(t-\tau))]G_1 + f(\rho(t-\tau))G_2$$
waarbij $f: [0, 1] \to [0, 1]$ een feedbackfunctie is. De evolutie van het samenwerkingsniveau $\rho(t)$ in een goed gemengde populatie wordt beheerst door de Replicatorvergelijking:
$$\frac{d\rho}{dt} = \rho(1-\rho)\Delta\pi(\rho)$$
waarbij $\Delta\pi$ het uitbetalingsverschil is tussen coöperanten en defecteurs, dat afhankelijk is van de tijdvertraagde spelmatrix.

De studie analyseert drie specifieke varianten van dit raamwerk:

1. Instantane Lineaire Feedback: $\tau = 0$ en $f(\rho) = \rho$.
2. Vertraagde Feedback: $\tau > 0$ met lineaire feedback, wat tijdvertragingen introduceert in de prikkelstructuur.
3. Niet-lineaire Feedback: Instantane feedback met $f(\rho) = \rho^\lambda$, waarbij $\lambda$ de gevoeligheid van de prikkelstructuur voor veranderingen in samenwerking bepaalt (sublineair voor $\lambda < 1$, superlineair voor $\lambda > 1$).

De analyse combineert deterministische stabiliteitsanalyse van de resulterende differentiaal- (en delay-differentiaal)vergelijkingen met stochastische agent-gebaseerde Monte Carlo-simulaties om de theoretische bevindingen te valideren.

Belangrijkste Bijdragen en Resultaten

• Ontstaan van "Chimera-spellen": In het geval van instantane lineaire feedback identificeren de auteurs een nieuw regime dat chimera-spellen wordt genoemd. Dit zijn hybride toestanden waarbij de populatie zich vestigt in een stabiel gemengd evenwicht (co-existentie van strategieën), zelfs al behoort het evenwichtsspel ($G_{eq}$) zelf tot een dilemma-klasse (bijvoorbeeld Stag Hunt) die onder standaard dynamiek met een vast spel alleen absorberende toestanden zou ondersteunen (volledige samenwerking of volledige defectie). De endogene koppeling stabiliseert een inwendig evenwicht dat anders instabiel zou zijn, waardoor het systeem effectief kan "ontsnappen" aan de voorspellingen van de statische spelklasse die het op dat moment speelt.

  • Specifiek: wanneer $G_2$ een Gevangenendilemma (PD) is, verschuift toenemende samenwerking het spel naar sterkere prikkels voor defectie. Contra-intuïtief kan deze "zelfbeperkende" feedback een niet-triviale co-existentieniveau stabiliseren als $G_1$ bij lage dichtheden samenwerking bevoordeelt.
  • Omgekeerd, wanneer $G_2$ een Harmoniespel is, is de feedback "zelfversterkend", wat leidt tot absorberende toestanden in plaats van stabiele inwendige evenwichten.

• Vertraagingsgeïnduceerde Oscillaties: Het introduceren van een tijdvertraging $\tau$ destabiliseert de stabiele vaste punten die in het instantane geval worden aangetroffen. Wanneer de vertraging een kritieke drempel $\tau_c$ overschrijdt (bepaald via Hopf-bifurcatieanalyse), gaat het systeem over van een stabiel evenwicht naar aanhoudende limietcycli. In dit regime oscilleren zowel het samenwerkingsniveau $\rho(t)$ als het spel $G(t)$ periodiek. Het systeem "overreageert" op verouderde prikkelstructuren, wat boom-bust-cycli creëert in gedrag en het landschap van prikkels. Opmerkelijk is dat, als er een chimera-spel bestaat in het instantane limiet, de vertraging dit niet elimineert maar oscillaties eromheen induceert.

• Niet-lineaire Feedback en Padafhankelijkheid: Niet-lineaire feedbackfuncties ($f(\rho) = \rho^\lambda$) herschikken de evenwichtsstructuur kwantitatief en kwalitatief.

  • Sublineaire feedback ($\lambda < 1$): Versterkt de respons op intermediaire samenwerkingsniveaus, wat over het algemeen de evenwichtsniveaus van samenwerking verlaagt (in PD-doelscenario's), maar de structuur met één evenwicht van het lineaire geval behoudt.
  • Superlineaire feedback ($\lambda > 1$): Introduceert verzadigingseffecten, waardoor feedback op intermediaire niveaus wordt onderdrukt. Cruciaal kan dit bistabiliteit genereren waarbij twee inwendige vaste punten ontstaan (één stabiel, één instabiel) voor hetzelfde paar basisspellen. Dit introduceert padafhankelijkheid: het langetermijnresultaat hangt af van het initiële samenwerkingsniveau $\rho_0$, waardoor het systeem zich kan vestigen in zowel consensus als co-existentie, afhankelijk van de beginvoorwaarden.

Betekenis en Aanspraken
Het artikel stelt dat endogene feedback fundamenteel het stabiliteitslandschap van sociale dilemma's verandert, en dynamische regimes produceert die onmogelijk zijn onder standaard EGT met vaste uitbetalingen. De primaire betekenis ligt in het aantonen dat samenwerking kan worden bevorderd, onderdrukt of destabiliseerd uitsluitend door de prikkels die endogeen worden gegenereerd door het collectieve gedrag van de populatie zelf.

De auteurs benadrukken dat deze mechanismen verschillend zijn van canonieke routes naar samenwerking (zoals verwantschapsselectie of netwerkreciprociteit). Door aan te tonen dat het spel zelf co-evolueert met de populatie, verklaart het raamwerk hoe systemen stabiele coöperatieve gedragingen kunnen vertonen die "irrationeel" lijken of inconsistent met de statische prikkels van het spel dat op dat moment wordt gespeeld (het chimera-fenomeen).

Het artikel sluit af met een schets van connecties met real-world systemen waarbij prikkels endogeen worden gevormd, zoals:

• Financiële Markten: Waar liquiditeitsvoorziening en prijsontdekking handelsprikkels op korte tijdschalen herstructuren, wat mogelijk het co-existentie van liquiditeit en opportunistische arbitrage verklaart.
• Online Platformen: Waar reputatiesystemen en feedbackloops dynamische prikkels creëren die samenwerking kunnen handhaven in omgevingen die anders defectie zouden bevoordelen.
• Volksgezondheid en Beheer van Middelen: Waar vertraagde reacties op vaccinatiepercentages of uitputting van middelen kunnen leiden tot oscillerende dynamiek in gedrag en prevalentie.

De auteurs stellen dat beleidsmakers en ontwerpers van mechanismen moeten erkennen dat dynamische reacties op prikkels niet alleen individueel gedrag verschuiven, maar de structuur van strategische interacties zelf kunnen veranderen, wat leidt tot uitkomsten die statische modellen niet kunnen anticiperen.