Detecting Soft Skills in ML Engineering Roles CVs
Dit artikel introduceert een op LLM gebaseerde pipeline om 300 CV's van ML-engineers te analyseren, waarbij wordt onthuld dat kandidaten zachte vaardigheden voornamelijk via narratief in plaats van trefwoorden verwoorden en waarbij elf hypothesen worden gevalideerd die eerdere aannames aan de vraagzijde over rolspecifieke competenties en senioriteitsontwikkeling uitdagen.
Oorspronkelijk artikel gelicentieerd onder CC BY 4.0 (http://creativecommons.org/licenses/by/4.0/). Dit is een AI-gegenereerde uitleg van het onderstaande artikel. Het is niet geschreven of goedgekeurd door de auteurs. Raadpleeg het oorspronkelijke artikel voor technische nauwkeurigheid. Lees de volledige disclaimer
Stel je de wereld van technologie voor als een enorme, bruisende bouwplaats. Op deze bouwplaats heb je drie hoofdtypen bouwers: Software Engineers die de stevige steigers en muren bouwen, Data Scientists die de blauwdrukken ontwerpen en de materialen analyseren, en ML (Machine Learning) Engineers die de slimme, zelflerende robots installeren die het gebouw laten functioneren. Een tijdlang dachten mensen dat het enige dat telde op deze bouwplaats hoe goed je je gereedschap kon gebruiken—je hamers, je code, je wiskunde. Maar onlangs is iedereen tot de conclusie gekomen dat zelfs de beste bouwers geen wolkenkrabber kunnen voltooien als ze niet met elkaar kunnen praten, een team kunnen leiden of samen een probleem kunnen oplossen. Deze "menselijke vaardigheden" worden soft skills genoemd.
Normaal gesproken kijken we naar de "hiring managers"—de voormannen op de bouwplaats die de vacatures schrijven—om deze vaardigheden te begrijpen. Zij zeggen: "We hebben goede communicatoren nodig!" Maar dit artikel stelt een andere vraag: Wat zeggen de bouwers zelf wanneer ze hun cv inleveren? Schrijven ze daadwerkelijk over hun teamwork en leiderschap, of sommen ze alleen hun gereedschap op? Om dit te achterhalen, gebruikten de onderzoekers een speciaal soort "slimme robotlezer" (een AI) om 300 echte cv's te scannen. Ze wilden zien of de bouwers hun soft skills verborgen in lange verhalen over hun werk, of dat ze ze alleen opsomden als ingrediënten in een recept.
Het Grote Detectivestory van het CV
De onderzoekers, onder leiding van Aidin Azamnouri en zijn team, besloten detective te spelen. Ze verzamelden 300 cv's van ML Engineers, Data Scientists en Software Engineers. In plaats van alleen te tellen hoe vaak het woord "communicatie" voorkwam, gebruikten ze een krachtige AI om de verhalen binnen de cv's te lezen. Denk er maar eens zo over: als een cv een schatkaart is, dan is een eenvoudige zoekopdracht naar trefwoorden als zoeken naar het woord "goud". Maar de AI die zij gebruikten, las de zinnen daadwerkelijk om te zien of de kaart beschreef hoe de schat werd gevonden, zelfs als het woord "goud" niet werd vermeld.
Ze stelden 13 specifieke vermoedens (hypotheses) op, gebaseerd op wat hiring managers gewoonlijk zeggen, en testten deze tegen de echte cv's. Dit is wat ze vonden:
1. Het Geheim van het "Verhalen Vertellen"
De grootste verrassing was hoe mensen hun vaardigheden verbergen. De meeste cv's (ongeveer 59%) bevatten helemaal geen speciale sectie met "Vaardigheden" waarin soft skills werden vermeld. In plaats daarvan weefden kandidaten ze in de verhalen over hun vorige banen. Bijvoorbeeld, in plaats van "Leiderschap" in een lijstje te zetten, schreef een kandidaat: "Ik leidde een team van vijf personen om het project vervroegd af te ronden." De studie vond dat kandidaten drie keer zo vaak een verhaal vertelden over hun vaardigheden dan dat ze ze simpelweg als trefwoorden opsomden. Dit is een groot ding, omdat veel computerprogramma's die bedrijven gebruiken om cv's te scannen alleen naar de trefwoorden kijken. Als je alleen verhalen schrijft, kunnen die programma's denken dat je helemaal geen vaardigheden hebt!
2. Het Misverstand over "Leiderschap"
Hiring managers zeggen vaak: "Iedereen heeft leiderschapsskills nodig, ongeacht welke baan ze ook doen." De onderzoekers gaven de voorspelling dat dit waar zou zijn voor alle drie de typen engineers. Maar de data zeiden nee.
- Data Scientists en ML Engineers spraken behoorlijk veel over hun leiderschapsskills (ongeveer 42–47% van hen).
- Software Engineers daarentegen noemden leiderschap zelden in hun cv's (slechts ongeveer 26%).
Dit suggereert dat hoewel software engineers misschien wel leiderschapsskills hebben, ze deze niet zo vaak opschrijven als hun vakgenoten. Het is als een groep chefs waarbij twee groepen pronken met hun mesvaardigheden, terwijl de derde groep gewoon stilletjes groenten hakt zonder een woord te zeggen.
3. De Verschuiving door "Senioriteit"
Naarmate bouwers ouder en ervaren worden (van "Junior" naar "Senior" gaan), veranderen hun cv's. De studie vond dat senior professionals bijna drie keer zo vaak leiderschap noemen als junioren. Maar hier komt het coole deel bij: ze stoppen niet met praten over teamwork. In plaats daarvan praten ze over zowel teamwork als leiderschap. Het is als een muzikant die begint met het spelen van eenvoudige noten, maar naarmate hij beroemd wordt, begint hij zowel het orkest te dirigeren als de solo te spelen. De studie bewees dat ervaring samenwerking niet vervangt; het voegt leiderschap toe aan de top.
4. De "Stille" Bouwers
De onderzoekers merkten ook op dat sommige cv's volledig stil waren over soft skills. Ongeveer 18% van de ML Engineers en 16% van de Software Engineers hadden helemaal geen detecteerbare soft skills vermeld. Dit kwam echter niet doordat ze de vaardigheden misten; het kwam vooral doordat deze groepen veel zeer jonge, junior medewerkers hadden die nog niet hadden geleerd hoe ze over hun menselijke vaardigheden moesten schrijven. Data Scientists waren het beste in het tonen van hun soft skills, waarbij slechts 4% van hun cv's "stil" was.
Wat dit betekent voor iedereen
Het paper concludeert dat er een "kloof" is tussen wat kandidaten doen en wat ze opschrijven. De vaardigheden zijn er, verborgen in de verhalen van hun werk, maar de ouderwetse computersystemen die cv's scannen zijn te dom om ze te vinden. Ze zoeken naar een lijst met ingrediënten, maar de koks schrijven een roman over de maaltijd.
De studie suggereert dat als je een jonge engineer bent die een baan probeert te krijgen, je moet stoppen met alleen je gereedschap op te sommen. Je moet het verhaal vertellen van hoe je die tools hebt gebruikt om mensen te helpen, teams te leiden en problemen op te lossen. En als je een bedrijf bent dat robots gebruikt om cv's te scannen, loop je misschien de beste kandidaten mis omdat je robot alleen naar trefwoorden kijkt en de verhalen negeert.
Kortom, het paper telde niet alleen woorden; het bewees dat de manier waarop we over onze soft skills praten aan het veranderen is, en als we niet updaten hoe we ze lezen, missen we misschien de beste bouwers op de bouwplaats.
Verdrinkt u in papers in uw vakgebied?
Ontvang dagelijkse digests van de nieuwste papers die bij uw onderzoekswoorden passen — met technische samenvattingen, in uw taal.