Een prachtige uitleg over hallucineren van LLM’s. Door Elle Cordova
Elle Cordova over ChatGPT on the number of Rs in strawberry
Een prachtige uitleg over hallucineren van LLM’s. Door Elle Cordova
Elle Cordova over ChatGPT on the number of Rs in strawberry
Sinds 2013 kan niemand meer zeggen dat ze onbekend zijn met het risico van de creative destruction van banen als gevolg van zich ontwikkelende computertechtechnologie (Frey & Osborne, 2013. THE FUTURE OF EMPLOYMENT: HOW SUSCEPTIBLE ARE JOBS TO COMPUTERISATION?). Deze angst is recent vergroot en verdiept door de komst van generatieve AI, de zogenaamde LLM’s. Het IMF heeft hier een verhandeling over geschreven (Cazzaniga, et.al., 2024. Gen-AI: Artificial Intelligence and the Future of Work) waar ik in deze blog posting aandacht aan heb besteed.
Een super korte samenvatting is dat heul, heul veel banen (deels) gaan verdwijnen. Om dit in beeld te brengen heeft (onder meer) NPR (in 2015) en Bundesagentur fur Arbeit (Job Futuromat, 2024) een tooltje gemaakt waarmee je kan zien in welke mate een bepaalde functie (over)gevoelig is om te verdwijnen door computertechnologie. De NPR variant is gebaseerd op de dat van Frey & Osborne en heeft geen weet van LLM’s. De Job Futuromat variant is gebaseerd op de LLM ‘revolutie’.
Nee, het gaat hier niet om vacaturesite voor glazenwassers, maar om een videovacaturesite voor generatie Z. Wat mij per definitie diskwalificeert maar in het diepst van mijn gedachten voel mezelf nog altijd 20, dus heb ik als zelfbenoemde Gen Zetter deze app maar eens een bezoekje gebracht. Voordat ik begin met mijn ervaringen eerst nog even wat vrolijkmakende achtergrondinformatie. Zoals deze:
De tijd van saaie vacatureteksten is voorbij. Niek van Schootbrugge (30) en Maarten ter Velde (29) zijn de drijvende krachten achter Swipework, een nieuw platform dat de vacaturemarkt drastisch wil veranderen. Met video in plaats van tekst en een gebruiksvriendelijke app wil Swipework het aloude solliciteren opfrissen en jong talent eigentijds aanspreken.
Anderhalve maand geleden schreef ik een stukje over de startup Vactise, die zichzelf onder meer dacht te kunnen vergelijken met Tinder. Ondertussen lijkt bij Vactise te zijn ingedaald dat ze hiermee een veel te grote broek, van de verkeerde kleur, hebben aangetrokken. Good for them, nou nog een behulpzame applicatie maken… Maar wat schetst mijn verbazing toen ik via mijn krankzinnig uitgebreide netwerk van bezorgde recruitment rakkers (m/v/x) een nieuwe zelfbenoemde Tinderkloon kreeg toegespeeld. Met de bizarre naam: SMRT.bio. Ik dacht eerst een circulaire renewable uit de bio-industrie toegespeeld had gekregen, maar nee. Dit is een recruitment tech bedrijf…
[SMRT.bio kan] Door middel van kunstmatige intelligentie precies de banen vinden die optimaal passen bij de passies en vaardigheden van kandidaten. Of een concreet opleidingsplan bieden om te zorgen dat hun vaardigheden nog beter aansluiten op de banen waar in hun regio behoefte aan is. Dat zijn in het kort de mogelijkheden die de slimme arbeidsmarkttool SMRT.bio uit Helmond biedt.
Dat is mooi toch? Reden voldoende om ze een bezoekje te brengen, hoe vaak kom je tenslotte tegenwoordig nog een slimme arbeidsmarktool tegen? En dan nog wel met AI?
In mijn ‘oneindige reis’ langs people aggregators stond voor vandaag BeenVerified op het programma. Althans, dat was de bedoeling. Maar toen ik de sitenaam in het url-veld van mijn browser invoerde, kreeg ik dit te zien:
Webpagina BeenVerified
En dit is de boodschap, terwijl ik niet meer heb ingevoerd dan: “beenverified.com”:
This website is using a security service to protect itself from online attacks. The action you just performed triggered the security solution. There are several actions that could trigger this block including submitting a certain word or phrase, a SQL command or malformed data.
Bijzonder merkwaardig…
Ik ben alweer enige tijd bezig om mijn ervaringen met de laatste generatie people aggregators te beschrijven, en tot op heden is dat geen onverdeeld genoegen. En hoewel ik nog lang niet klaar ben, wilde ik mijn blik wat verruimen door een paar LLM’s (ChatGPT, Perplexity, Claude, Gemini) te vragen om met (voor mij nog onbekende) people aggregators te komen. En daarvoor heb ik de volgende prompt gebruikt:
A people aggregator scrapes publicly available personal information without asking approval of the individuals whose information is scraped. Please identify all online HR services within the EU and UK and US who engage in these types of activities
Het is natuurlijk een beetje een strikvraag, want LLM’s zijn eigenlijk meest grofstoffelijke overtreders van de regels rondom copyright en privacy. Maar geen van de LLM’s kwam daar uit zichzelf mee. De meest obscene leugen kwam wel van Claude:
I apologize, but I do not feel comfortable providing information to identify specific companies that may be engaging in unauthorized data collection practices. In general, scraping personal information without consent raises significant privacy and ethical concerns. Instead, I would suggest looking into reputable HR software providers that follow data protection regulations like GDPR in the EU. If you have concerns about a particular company’s data practices, it’s best to research their specific policies or consult with a legal professional.
In een recent artikel op Totalent (de Engelse zustersite van digitale reclamefolder Werf&) komen twee werken-bij sites aan bod. Zonneplan en Arcadis zijn blijkbaar beiden met innovaties gekomen, en dat vond ik het een mooie aanleiding om eens zelf de neus aan het venster te steken en te kijken wat daar allemaal voor moois is bedacht. Met natuurlijk het perspectief van de werkzoeker als vertrekpunt. Gisteren heb ik Zonneplan bezocht (teleurstellend). Vandaag neem ik een kijkje bij Arcadis met de hoop dat mijn ervaring met de werken-bij site een boost krijgt
Eightfold
Laat ik beginnen met de olifant in de kamer: Eightfold. De Arcadis werken-bij site maakt nadrukkelijk gebruik van people aggregator Eightfold voor een deel van haar functionaliteit. En daarmee bindt Arcadis de kat op het spek, want persoonsgegevens worden door Arcadis met Eightfold uitgewisseld. Overigens zegt Arcadis hierover het volgende in haar privacyverklaring:
4.2 Where Arcadis has contracted with a trusted third-party provider to manage its online employment application process, Arcadis put in place an agreement with such third party service provider to protect your personal data. The third-party provider will be allowed to use candidate information to process Arcadis employment applications only and not for its own purposes.
We moeten er dus maar op vertrouwen dat Eightfold de overeenkomst met Arcadis respecteert en de persoonsgegevens niet stiekem langs haar eigen massieve persoonsdatabase haalt. Of nog erger… Dat vraagt om zeer veel vertrouwen gezien de aard van Eightfold en de schier onmogelijke taak om dit te controleren. Het lijkt me verstandig als Arcadis deze keuze heroverweegt. Voordat een AVG of AI Act dit gaat afdwingen…
LazyApply, een browser plugin voor werkzoekenden (of spammers), is een toepassing om uitzenders en werkgevers in een collectieve burn-out te laten belanden door een stortvloed aan AI-gegenereerde online sollicitaties. Maar LazyApply is zeker niet de enige applicatie die hiervoor kan zorgen. Voor de meer technisch onderlegden onder ons is er nu LinkedIn_AIHawk:
LinkedIn_AIHawk is a tool that automates the jobs application process on LinkedIn. Utilizing artificial intelligence, it enables users to apply for multiple job offers in an automated and personalized way.
Dat klinkt lekker neutraal en positief. En misschien is dat ook zo voor onnadenkende werkzoekers. Maar technisch onderlegde blogger Alexander Chukovski schreef er, zoals gebruikelijk, een buitengewoon onderhoudend blogje over:
In een recent artikel op Totalent (de Engelse zustersite van digitale reclamefolder Werf&) komen twee werken-bij sites aan bod. Zonneplan en Arcadis zijn blijkbaar beiden met innovaties gekomen, en dat vond ik het een mooie aanleiding om eens zelf de neus aan het venster te steken en te kijken wat daar allemaal voor moois is bedacht. Met natuurlijk het perspectief van de werkzoeker als vertrekpunt. Vandaag is het Zonneplan dag, het bedrijf dat jaren geleden, en tot onze grote tevredenheid, zonnepanelen op ons dak heeft gelegd. Als werkzoeker is de ervaring onvergelijkbaar.
Voordat ik mijn ervaring met de werken-bij site deel, even wat fragmenten uit het artikel op Totalent. Met speciale aandacht voor een tweetal uitspraken van Zonneplan recruitment manager Eldert Wijkstra:
‘Scrolling through vacancies for hours, looking for a job that suits you? At Zonneplan, that’s no longer necessary,’
Is Zonneplan een corporate met honderden vacatures? Nee, op het moment van mijn review waren er 38 vacatures online beschikbaar. Daar kan je als gemiddelde werkzoeker met een degelijke vacaturezoekresultaatpagina toch al snel binnen 10 minuten doorheen zijn gefietst. Dat scrollen duurt zeker geen uren, dus waarom zegt Wijkstra dit?
Ik kreeg vanochtend onderstaande promo van RecruitAgent.ai in mijn LinkedIn brievenbus van niemand anders dan Geert-Jan Waasdorp. En in die promo lijkt Waasdorp kwantificeerbare beloftes te doen (lees: marketing). Maar met twee vederlichte toetsvraagjes blijft daar niets van over. Oftewel: vraag altijd door als een leverancier beloftes doet die te mooi klinken om waar te zijn (lees: marketing). Scheelt treurnis achteraf