Q&A or Document-Based? The Effects of Interface Type on How Screen Reader Users Access Interconnected Documents
Dit onderzoek onthult dat hoewel blinde en slechtziende gebruikers vaak de voorkeur geven aan en de effectiviteit van vraag-antwoordinterfaces voor het verkennen van onderling verbonden documenten overschatten, documentgebaseerde interfaces hen er feitelijk toe in staat stellen om toegang te krijgen tot meer verschillende bronnen, nauwkeurigere mentale modellen op te bouwen en kennis effectiever toe te passen.
Oorspronkelijk artikel gelicentieerd onder CC BY 4.0 (http://creativecommons.org/licenses/by/4.0/). Dit is een AI-gegenereerde uitleg van het onderstaande artikel. Het is niet geschreven of goedgekeurd door de auteurs. Raadpleeg het oorspronkelijke artikel voor technische nauwkeurigheid. Lees de volledige disclaimer
Voor mensen die blind of slechtziend zijn, is het internet een wereld die gebouwd is voor de ogen, niet voor de oren. Om er doorheen te navigeren, vertrouwen zij op schermlezers, software die tekst op een scherm omzet in gesproken woorden of braille. Decennialang betekende dit een methodisch proces van het beluisteren van documenten één voor één, het volgen van links en het samenvoegen van informatie uit een gestructureerde lay-out. Maar er is een nieuw soort hulpmiddel gearriveerd: conversatie-artificiële intelligentie. Deze systemen stellen gebruikers in staat om vragen te stellen en directe antwoorden te ontvangen, wat de belofte inhoudt dat het de tijdrovende arbeid van het lezen van volledige bestanden kan overslaan. De hoop is dat deze technologie informatie-toegang sneller en gemakkelijker maakt. Echter, een kritische vraag blijft over: betekent het krijgen van een snel antwoord dat je werkelijk het hele plaatje begrijpt? Onderzoekers beginnen zich af te vragen of het gemak van conversatie de kennis mogelijk verbergt, waardoor gebruikers achterblijven met een gevoel van weten zonder de substantie om dat te onderbouwen.
Om dit te onderzoeken, voerde een team onderzoekers van de University of Victoria en Singapore Management University een studie uit met zestien blinde en slechtziende deelnemers. Ze wilden zien hoe deze gebruikers hun begrip opbouwden van complexe, onbekende onderwerpen wanneer ze twee zeer verschillende hulpmiddelen gebruikten. Het eerste hulpmiddel was een traditionele documentinterface, waarbij gebruikers een verzameling van vijfentwintig onderling verbonden tekstbestanden en diagrammen navigeerden, vergelijkbaar met het browsen op een website of het lezen van een reeks gekoppelde encyclopedie-artikelen. Het tweede hulpmiddel was een conversatie-interface aangedreven door een groot taalmodel, waarbij gebruikers open vragen konden stellen en gesynthetiseerde antwoorden konden ontvangen die waren afkomstig uit dezelfde collectie documenten. Om de resultaten eerlijk te houden, creëerden de onderzoekers twee volledig fictieve werelden, genaamd Solana en Dominion, compleet met hun eigen geschiedenissen, regeringen en culturen. Dit zorgde ervoor dat geen enkele deelnemer over voorkennis beschikte om op terug te vallen; ze moesten alles vanaf nul leren.
De deelnemers besteedden tijd aan het verkennen van deze fictieve werelden met behulp van beide interfaces. In de ene sessie gebruikten ze het traditionele documentsysteem, en in een andere sessie gebruikten ze de conversatie-chatbot. Na elke sessie vroegen de onderzoekers de deelnemers om in kaart te brengen wat ze hadden geleerd, door verbanden te leggen tussen verschillende ideeën, en vervolgens een probleem op te lossen dat vereiste dat ze hun ontdekkingen toepasten. De resultaten onthulden een verrassende discrepantie tussen wat de gebruikers dachten te hebben bereikt en wat ze daadwerkelijk hadden gepresteerd. Wanneer ze de traditionele documentinterface gebruikten, bezochten deelnemers een grotere verscheidenheid aan documenten en construeerden ze mentale modellen die groter, gedetailleerder en aanzienlijk nauwkeuriger waren. Ze maakten minder fouten in hun begrip en waren beter in staat hun kennis toe te passen op nieuwe situaties. In contrast hiermee, bij het gebruik van de conversatie-interface, bezochten deelnemers minder verschillende documenten. Hoewel de chatbot hen hielp bij het maken van snelle verbindingen tussen een kleinere set onderwerpen, was hun algemene begrip oppervlakter en maakten ze meer fouten in hun mentale kaarten van de werelden.
Misschien wel de meest opvallende bevinding was dat de deelnemers dit verschil niet beseften. Ondanks dat ze beter presteerden met het traditionele documentensysteem, voelden velen van hen dat de conversatie-interface hen had geholpen meer te leren, meer te verkennen en meer vertrouwen te hebben in hun antwoorden. Zij beschouwden de chatbot als een effectiever hulpmiddel voor het opbouen van kennis, ook al toonde het bewijs het tegenovergestelde. De onderzoekers suggereren dat de conversatiestijl een gevoel van gemak en volledigheid creëert dat misleidend kan zijn. Omdat de chatbot informatie synthetiseert tot een vloeiend, direct antwoord, voelt het als een compleet beeld, maar het kan er feitelijk op neerkomen dat het bredere contexten overslaat die een gebruiker zou tegenkomen door de documenten zelf te navigeren. De traditionele interface, hoewel soms veeleisender en vereisend om verbanden te volgen, dwingt de gebruiker om zich bezig te houden met de structuur van de informatie, wat leidt tot een robuuster en nauwkeuriger begrip.
Deze studie benadrukt een potentieel risico bij de snelle adoptie van conversatie-artificiële intelligentie voor informatievoorziening. Hoewel deze hulpmiddelen onmiskenbaar gemak bieden en uitstekend kunnen zijn voor het vinden van specifieke feiten, kunnen ze onbedoeld een oppervlakkige betrokkenheid bij complexe informatieruimtes stimuleren. Voor blinde en slechtziende gebruikers, die vaak technologie gebruiken om het speelveld gelijk te trekken, bestaat het gevaar dat een hulpmiddel dat gemakkelijker en sneller aanvoelt, hen in werkelijkheid kan achterlaten met een zwakkere grip op de materie. Het onderzoek suggereert dat het ontwerp van deze systemen er diep toe doet; als het doel diep begrip en het vermogen om kennis toe te passen is, dan kan het gestructureerde, soms meer arbeidsintensieve pad van traditionele documentnavigatie nog steeds de superieure keuze zijn. De bevindingen dienen als een herinnering dat efficiëntie niet verward moet worden met begrip, en dat de manier waarop we toegang krijgen tot informatie bepaalt wat we daadwerkelijk weten.
Verdrinkt u in papers in uw vakgebied?
Ontvang dagelijkse digests van de nieuwste papers die bij uw onderzoekswoorden passen — met technische samenvattingen, in uw taal.