De ontwikkeling van AI voor het human resources domein gaat razendsnel. Zo blijkt ook uit een verandering op de homepage van 8vance. Want de homepage van 8vance zag er een kleine twee maanden geleden nog zo uit:

Homepage 8vance, 14 mei 2024

(meer…)

Ik heb al eerder aandacht besteed aan het recent verschenen whitepaper van 8vance (zie: Laten we nou eens stoppen met het misbruiken van de term ‘matchen’). Vandaag wil ik stilstaan bij het volgens 8vance rechtmatige karakter van haar dienstverlening. Een opvallende positie die niet wordt gedeeld door de Autoriteit Persoonsgegevens.

Massa = kassa, maar massa = NIET beter
Op pagina 11 van haar whitepaper stelt het bedrijf:

AI-systemen voor talentmanagement zijn ontworpen om de interne en externe arbeidsmarkt te ontsluiten en eerlijker en objectiever te maken. Deze systemen worden getraind op grote hoeveelheden data: hoe meer data, hoe beter om bias te voorkomen.

Er is voor zover mij bekend geen enkele relatie tussen de hoeveelheid data en de mate waarin die data vrij is van bias. Ik nodig 8vance uit deze “meer = schoner” claim te bewijzen met concrete voorbeelden of anders haar marketingmateriaal drastisch aan te passen. Als deze claim wel correct zou zijn dan betekent het per direct dat 8vance behoorlijk smerige data moet hebben, gezien het relatief kleine datavolume (85+ miljoen persoonsprofielen) in vergelijking met collegascrapers zoals Eightfold, hireEZ, HeroHunt en SeekOut, die tussen de 800 miljoen en 1,1 miljard persoonsprofielen zeggen te bezitten. Ik heb voor alle zekerheid ook nog even de volgende vraag aan het LLM Perplexity gesteld: Is er een correlatie tussen de hoeveelheid data en het voorkomen van bias? en dat gaf dit resultaat:

(meer…)

8vance heeft een whitepaper uitgebracht, in samenwerking met Digitaal-Werven. De titel van het whitepaper is: Het beste van AI voor talent en recruitment in een uitdagende arbeidsmarkt. Als je op de link klikt, ga je naar een invoerformulier om de whitepaper te downloaden.

Het whitepaper begint met deze alinea:

In dit whitepaper belichten we hoe skills-based matching met AI bijdraagt aan het oplossen van de uitdagingen van de arbeidsmarkt. […] Voor bedrijven, recruiters, hiring managers en HR-adviseurs die op zoek zijn naar de perfecte match op skills en ambities, daar waar traditioneel matchen op werkervaring en opleiding niet meer volstaat.

(meer…)

Een aantal dagen geleden geleden verscheen er weer eens een (ondoordacht?) artikel van 8vance op haar favoriete marketing kanaal Werf& met de volgende teaser:

Nederland [is] naarstig op zoek naar een nieuwe minister-president. In deze zoektocht rijst de vraag: wat zou A.I. daarvan vinden?

Kort gezegd komt het artikel er op neer dat 8vance een vergelijking zegt te willen maken tussen ‘brede’ AI’s (LLM’s zoals ChatGPT, Perplexity en Gemini) en smalle AI (hier komt 8vance niet verder dan: 8vance). En over die brede AI’s zegt 8vance:

Voordeel is dat deze technologie getraind is op openbare data van het hele internet en daardoor oneindig veel bronnen kan combineren. Nadeel is dat deze technologie niet altijd consistent is, soms hallucineert en vooral heel specifieke ‘kennis’ ontbeert als je inzoomt op een bepaald onderwerp zoals bijvoorbeeld recruitment. De antwoorden zijn daarvoor vaak te algemeen en nietszeggend.

Dat is het. Geen specifieke prompts die zijn uitgeprobeerd, geen concrete resultaten die kunnen woren vergeleken, helemaal niets. Feitelijk zet 8vance LLM’s weg als onbetrouwbaar en onbruikbaar zonder hiervoor ook maar een snipper bewijs te leveren. Waarmee overigens niet is gezegd dat LLM’s een goede vraagbaak zou zijn. Kijk naar de resultaten op basis van de prompt: Welke publiek bekende figuren zijn in theorie kandidaat voor het premiersschap van de nieuwe Nederlandse regering (PVV, BBB, VVD en NSC)? Wees concreet.

(meer…)