Het lijkt alweer zo lang geleden toen UWV op 23 december 2022 aankondigde een aanbieder voor haar tender te hebben geselecteerd: 8vance. In reactie op een conceptartikel wist UWV Woordvoering op 4 oktober 2023 het volgende te melden:
Een belangrijke eis uit de aanbesteding was dat de leverancier op het moment van gunnen van de opdracht met standaard software volledig zou voldoen aan het Programma van Eisen uit de aanbesteding. Op het moment van gunnen voldeed enkel 8vance aan deze eis.
Overigens was 8vance op het moment van gunnen de enige overgebleven leverancier waarmee die laatste zin dus volstrekt overbodig is. Wat echter wel van wezenlijk belang is dat UWV stelt dat 8vance met standaard software volledig voldoet aan alle eisen van het PvE uit de aanbesteding. Maar was (is) dat ook echt zo?
Belangrijk om vast te stellen dat 8vance op 23 december 2022 (de datum dat UWV op Tendernet haar keuze publiceert, overigens zonder de naam van de gelukkige aanbieder te noemen. Verder verscheen deze publicatie pas op 25 december op Tendernet. Op Eerste Kerstdag, een datum die er vrijwel garant voor staat dat het bericht door niemand gelezen wordt) met haar standaard software volledig kon voldoen aan de door UWV geëiste functionaliteit.
Dat leest als: morgen installeren, overmorgen in productie. Maar zo werkt dat natuurlijk niet. Alleen is het wel bijzonder dat nu, ruim drie jaar later, nog geen teken van 8vance-functionaliteit binnen de operationele UWV systemen kan worden aangetroffen. En als ik de geluiden moet geloven, is het niet bepaald waarschijnlijk dat er in 2025 iets van 8vance software in productie zal worden genomen.
Wat is er aan de hand?
Laten we iets dieper duiken in de wondere wereld van het Programma van Eisen van UWV. En laten we daarbij beginnen met een conceptueel plaatje waar UWV laat zien hoe de “suite” in het grotere geheel past:
De suite moet dus kunnen interacteren met alle andere modules in dit landschap. En voor een verdere verduidelijking is er ook nog dit landschap:
Een heerlijke brei van vrolijk gekleurde pijltjes plakt alles met alles aan elkaar. Dat is de omgeving waarbinnen de standaard software van 8vance ingeprikt moet worden. What could possibly go wrong?
Met deze informatie in de bagage duik ik vervolgens in de functionaliteit. Waarbij ik de meeste modules (UWV taalgebruik) zonder verbijzondering toon:
2.1 Algemeen
2.2 Ondersteuning interactieve inschrijving: Aanmaken, publiceren en beheren van werkzoekendenprofielen en vacatures Hiermee wordt het aanmaken van werkzoekendeprofielen en vacatures op werk.nl dynamisch ondersteund.
2.3 Adviseursportaal Professionals van het WERKbedrijf kunnen via een voor hen beschikbaar portaal, in overleg met klanten, profielen en vacatures opvoeren, lezen, wijzigen en beheren
2.6 Optimaliseren matching Arbeidsmarktspecialisten UWV kunnen matchingsalgoritmen inzien, beheren, configureren en daarmee optimaliseren.
2.7 Kennismanagement Specialisten kunnen gebruikmaken van een ondersteunende voorziening voor het werken met meerdere taxonomieën, ontologieën, tabellen en relaties tussen diverse arbeidsmarktobjecten
2.8 Analyse afstand tot de arbeidsmarkt Deze functie laat de werkzoekende (en UWV-medewerker) zien waar nog verbeterkansen liggen, zoals de mogelijkheden voor een ander beroep, andere branche, het verbeteren van skills (vaardigheden, kennis), opleiding en regio
2.9 Verkleinen mismatch: Adviseren en verbeteren inzetbaarheid Functionaliteit die adviezen, feedback en/of verbetersuggesties aanbiedt aan de werkzoekenden, werkgevers en/of UWV-adviseurs, met name bij mismatch
2.10 Doelgroepbepaling: Profilering en segmentering. Profilering en segmentering, via data-analyse op selectie- en matchingscriteria en resultaten.
2.11 Dataopslag, -verrijking en –analyse. De suite ondersteunt het opslaan, wijzigen, opvragen en verwijderen van data in de centrale database met onder meer gegevens van vacatures en profielen
Dat is alles bij elkaar al bijzonder veel functionaliteit, maar zoals gezegd, volgens UWV voldoet 8vance hier volledig aan. Met standaard software…
En dan nu de twee modules waarvan ik vermoed dat de kern van de onzichtbaarheid van 8vance in zit:
2.4 Zoeken en vinden
2.4.1 De suite biedt een service aan waarmee het mogelijk wordt via het bestaande portaal Werk.nl te zoeken in de database(s) met vacatures en profielen. De klant kan zelf uiteenlopende criteria, filters, wegingsfactoren en (internationale) locaties instellen. Via deze zoekfunctie worden resultaten getoond in een volgorde die het meest tegemoet komt aan de door de cliënt aangegeven zoekcriteria.
2.4.2 De genoemde mogelijkheden voor zoeken worden ook via een API aangeboden aan medewerkers van UWV en UWV-partners.
2.5 Matchen
2.5.1 De suite biedt een service aan waarmee het mogelijk wordt via het bestaande portaal werk.nl via een API op basis van vacatures en profielen en met inzet van geavanceerde algoritmen tot een matching van vacatures en profielen te komen. In de getoonde resultaten staan meest relevante matches bovenaan. Matching vindt plaats op basis van uiteenlopende criteria, filters en modellen, waaronder semantisch matchen, skills, opleiding, werkervaring, reisafstand (regio) en persoonlijke beperkingen.
2.5.2 Via een ‘abonnement-systeem’ worden klanten en medewerkers automatisch geattendeerd op nieuwe, geschikte matches.
2.5.3 De genoemde mogelijkheden voor matchen worden ook via een API aangeboden aan medewerkers van UWV en UWV-. Daarbij kunnen ook extra criteria, filters en gegevens worden gebruikt.
UWV maakt hier twee koeien van fouten: het bestaande portaal Werk.nl gebruiken om 1. zoekresultaten te tonen en 2. matchresultaten te tonen.
Het bestaande portaal is verouderd en heeft hard een nieuwe jas nodig. En om in het bestaande portaal matchresultaten aan werkzoekers (en adviseurs, zie hieronder) te laten zien is helemaal een foute keuze wat garant staat voor onbegrip, frustratie en teleurstelling bij gebruikers. Matchen en zoeken zijn (zeer) verschillende functies.
Maar ik ga er vanuit dat het probleem veel fundamenteler is. En tweeledig:
- De kwaliteit van de zoek- en matchresultaten valt waarschijnlijk (sterk) tegen
- De integratie met publieke taxonomieën gaat (zeer) moeizaam
Allereerst de kwaliteit van de match-en zoekresultaten. 8vance stelt aan zoeken/’matching’ te doen met gebruikmaking van AI. Om haar AI te trainen heeft 8vance jarenlang persoonsprofielen van m.n. Linkedin gekopieerd zonder toestemming van LinkedIn en zonder toestemming van LinkedIn gebruikers. 8vance stelt dat ze opleidingen en werkervaringen van de gekopieerde profielen gebruikt om haar AI te trainen en dat ze daarmee de privacy niet schendt. I beg to differ.
Voelt u het probleem? Inderdaad, de verzameling persoonsprofielen van LinkedIn wijkt significant af van die van Werk.nl. Wie had dat gedacht? Dit is een meer dan plausibele reden waarom er sprake kan zijn van tegenvallende zoek- en ‘match’resultaten.
Ik heb vernomen dat 8vance op dit moment bezig is om data van UWV(!) te gebruiken om haar AI te hertrainen. Mijn nekharen staan recht overeind, want betekent het dat UWV 8vance toegang geeft tot persoonsgegevens van werkzoekenden die zich bij UWV hebben ingeschreven? Heeft UWV in dat geval toestemming gevraagd aan alle werkzoekenden? Expliciet, enkelvoudig en vrijwillig? Ik kan me deze situatie nauwelijks voorstellen, een marktpartij als 8vance kan misschien regelgeving negeren in de afwezigheid van handhaving (Autoriteit Persoonsgegevens) maar ik kan me niet voorstellen dat een uitvoeringsorganisatie van de landelijke overheid met die wetenschap bereid is een overtreder faciliteert. Hoe dan ook, het hertrainen van AI schijnt tijdrovend (en ongetwijfeld) kostbaar te zijn.
Dan is er de kwestie van integratie met taxonomieën. 8vance heeft een eigen taxonomie, waarschijnlijk een door het bedrijf zelf gegenereerde taxonomie op basis van de gekopieerde persoonsprofielen. UWV is in samenwerking met meerdere partijen bezig aan de ontwikkeling van CompetentNL, onze nationale taxonomie. En CompetentNL vormt een wezenlijk onderdeel van UWV’s toekomstige dienstverlening en is als zodanig ook in het Programma van Eisen vermeld (zie ook de eerste afbeelding hierboven). Een zelf gegenereerde taxonomie heeft zeer waarschijnlijk een statistisch fundament terwijl CompetentNL een kwalitatief fundament heeft. Dat zijn twee fundamenteel verschillende taxonomiën. Integreren met CompetentNL is maatwerk en betekent ongetwijfeld extra kosten en vertraging.
En een stroever project is een kostbaarder project. De kosten voor de oude infrastructuur lopen door terwijl er meer kosten moeten worden gemaakt voor de nieuwe infrastructuur. Nog meer kosten bij een uitvoeringsorganisatie die al grossiert in uit de kosten lopende miljoenenprojecten. Hoor ik daar een parlementaire enquete aankomen?