Exploring the use of generative AI advice for the academic advancement of faculty
Dieser Bericht dokumentiert die Entwicklung und Nutzertests von „AskADD“, einem KI-gestützten Tool, das darauf ausgelegt ist, die akademische Karriereberatung zu optimieren und die Transparenz in Beförderungs- und Tenure-Prozessen für über 2.800 klinische Fakultätsmitglieder am SingHealth Duke-NUS Academic Medical Center zu erhöhen.
Originalarbeit lizenziert unter CC BY 4.0 (https://creativecommons.org/licenses/by/4.0/). Dies ist eine KI-generierte Erklärung eines Preprints, das nicht peer-reviewed wurde. Dies ist kein medizinischer Rat. Treffen Sie keine Gesundheitsentscheidungen auf Grundlage dieses Inhalts. Vollständigen Haftungsausschluss lesen
Stellen Sie sich vor, Sie sind ein Arzt an einem großen Universitätsklinikum. Sie möchten wissen, wie Sie befördert werden oder eine Tenure (eine unbefristete Anstellung mit Lebenszeit) erhalten können. Das Problem ist: Das „Regelwerk“ dafür ist kein einzelnes, leicht lesbares Buch. Stattdessen ist es über 30 verschiedene Dokumente verstreut, die tief in der internen Website des Krankenhauses versteckt sind. Die richtige Regel zu finden, fühlt sich an, als würde man versuchen, eine bestimmte Nadel in einem riesigen, unordentlichen Heuhaufen zu finden, und es kostet viel Zeit.
Um dies zu lösen, haben die Forscher einen digitalen „intelligenten Assistenten namens AskADD“ entwickelt. Stellen Sie sich AskADD als einen superschnellen, superwissenden Bibliothekar vor, der alle 30 Dokumente gelesen hat und Ihre Fragen sofort und rund um die Uhr beantworten kann.
Hier ist, wie sie es getestet haben und was sie herausgefunden haben, einfach erklärt:
Der Zwei-Schritte-Testlauf
Das Team hat das Tool nicht einfach nur veröffentlicht; sie haben es in zwei Runden getestet, ähnlich wie ein Automobilhersteller ein neues Modell testet.
Der „Alpha“-Test (Der Prototyp):
- Sie bauten die erste Version mit Standard-Werkzeugen (wie einem einfachen Lego-Set).
- Sie baten 35 Fakultätsmitglieder, es auszuprobieren.
- Das Ergebnis: Der Bibliothekar war hilfreich, aber etwas tollpatschig. Nutzer mussten oft dieselbe Frage zweimal stellen oder sie umformulieren, weil der Assistent sie nicht ganz „verstand“. Es sparte zwar etwas Zeit, war aber nicht perfekt. Die Nutzer fanden es „okay“, waren aber noch nicht begeistert genug, um es ihren Freunden weiterzuempfehlen.
Der „Beta“-Test (Die polierte Version):
- Das Team hörte auf die Beschwerden. Sie verbesserten den Bibliothekar zu einer „Custom AI“ (einer fortschrittlicheren Version des Gehirns hinter dem Chatbot). Sie behoben die technischen Fehler, die die Links zu den Originaldokumenten unterbrachen.
- Sie baten dieselben 35 Personen, es erneut zu testen.
- Das Ergebnis: Das Upgrade bewirkte Wunder.
- Geschwindigkeit: Es lieferte Antworten schneller.
- Klarheit: Die Leute mussten ihre Fragen nicht mehr umformulieren.
- Vertrauen: Die Nutzer empfanden den Assistenten als „empathischer“ (er klang menschlicher und hilfreicher).
- Empfehlung: Die Anzahl der Menschen, die das Tool einem Kollegen empfehlen würden, hat sich mehr als verdoppelt.
Was hat die Leute eigentlich begeistert?
Die Forscher fanden heraus, dass die Fakultätsmitglieder das Tool aus drei Hauptgründen liebten:
- Zeitersparnis: Anstatt sich durch den „Heuhaufen“ von 30 Dokumenten zu graben, erhielten sie in Sekundenschnelle eine direkte Antwort.
- Die „Karten“-Funktion: In der zweiten Runde begann der Assistent, direkte Links zu den Original-Regelwerken anzugeben. Das war entscheidend, da es den Nutzern ermöglichte, die Informationen selbst zu überprüfen, was das Vertrauen stärkte.
- Die „menschliche“ Note: Die verbesserte Version fühlte sich weniger wie ein Roboter und mehr wie ein hilfreicher Wegweiser an, was die Interaktion angenehmer machte.
Was fehlte noch?
Obwohl das Tool ein Erfolg war, hatten die Nutzer noch einige Wünsche für die Zukunft:
- Personalisierung: Sie wollten, dass der Assistent sich ihren spezifischen Lebenslauf ansieht und sagt: „Hier ist genau das, was Ihnen noch fehlt, um befördert zu werden.“ Das aktuelle Tool gibt nur allgemeine Ratschläge, da es aufgrund von Datenschutzregeln (es kann noch keine privaten Mitarbeiterdaten einsehen) keine privaten Daten sehen darf.
- Mehr Themen: Sie wollten, dass es nicht nur Beförderungsregeln abdeckt, sondern auch allgemeine Karriereentwicklung und HR-Fragen.
Das Fazit
Das Paper kommt zu dem Schluss, dass dieses „AskADD“-Tool ein erfolgreiches Experiment ist. Es hat bewiesen, dass man einen sicheren, KI-gestützten Wegweiser bauen kann, der Ärzten hilft, komplexe Karriere-Regeln zu navigieren, ohne durch endlose Dateien suchen zu müssen.
Dennoch warnen die Forscher, dass dieses Tool wie ein spezialisiertes GPS ist, das für eine ganz bestimmte Stadt (ihr Krankenhaus) gebaut wurde. Es funktioniert dort hervorragend, weil es auf deren spezifischen Karten und Regeln basiert. Andere Krankenhäuser können es nicht einfach „kopieren und einfügen“, da ihre „Stadtkarten“ (Richtlinien) und „Straßen“ (IT-Systeme) anders sind.
Kurz gesagt: Sie haben einen intelligenten 24/7-Karriereführer gebaut, der Zeit spart und Frustration reduziert. Es ist noch nicht perfekt, aber es ist ein riesiger Schritt nach vorne im Vergleich zur alten Methode, in der man durch 30 verschiedene Dateien suchen musste.
Ertrinken Sie in Arbeiten in Ihrem Fachgebiet?
Erhalten Sie tägliche Digests der neuesten Arbeiten passend zu Ihren Forschungsbegriffen — mit technischen Zusammenfassungen, in Ihrer Sprache.