© Smederevac - iStock Getty Images Plus
Med en betydande andel av de jobberbjudanden som annonseras på nätet innehåller uppgifterna i dem värdefull information om den nuvarande arbetsmarknaden. Att utnyttja dessa data med stordatateknik kan till exempel bidra till att förstå trender i befintliga och framväxande färdigheter som krävs och antalet lediga platser. Det är viktigt för politiska beslutsfattare och beslutsfattare att få objektiv information om arbetsmarknaden för att säkerställa Europas konkurrenskraft och att arbetskraftens kompetens tillgodoser efterfrågan. När man arbetar med nya datadrivna lösningar hjälper Europeiska kommissionens testverktyg för stordata till att experimentera med verkliga data innan systemutvecklingen inleds.
Fakta i korthet
- Berörda parter: Europeiska centrumet för utveckling av yrkesutbildning (Cedefop) och Europeiska unionens statistikkontor (Eurostat), som företräder projektet för stordata inom det europeiska statistiksystemet (ESSnet) och de deltagande nationella statistikbyråerna
- Vilkenär UTMANINGEN: Använd data om webbplatsannonser (OJA) för att ge aktuell information om de europeiska arbetsmarknaderna
- Lösning: Fastställa krav på ett alleuropeiskt system för framställning av officiell statistik och särskild politisk analys på grundval av uppgifter i EUT.
- Testinfrastruktur för stordata (BDTI)
Perfekta partner
För ungefär ett halvt årtionde sedan insåg Cedefop och Eurostat att de arbetade hårt med samma uppgifter för att få fram liknande insikter om den europeiska arbetsmarknaden. Å ena sidan är Cedefop en byrå som behöver arbetsmarknadsuppgifter för att hjälpa beslutsfattare och andra arbetsmarknadsaktörer på EU-nivå och nationell nivå att förstå trender när det gäller tillgång och efterfrågan på arbetskraft och kompetens samt eventuella obalanser mellan dessa båda. Å andra sidan hjälper Eurostat, Europeiska unionens statistikkontor, beslutsfattare genom att samla in och tillhandahålla officiell statistik om samhället, ekonomin och miljön i EU, inklusive den europeiska arbetsmarknaden. Båda ville använda webbplatsannonser för att utforska och extrahera nya typer av information med hjälp av stordatateknik.
I mars 2019 lanserade Cedefop verktyget Skills Online Vacancy Analysis Tool for Europe (Skills-OVATE), som redan i sitt första begränsade genomförande visade systemets potential att bearbeta och analysera data från EUT för efterfrågan på kompetens. Eurostat har främjat de nationella statistikbyråernas användning av uppgifter i EUT för att förbättra den officiella arbetsmarknadsstatistiken och sedan 2015 stödja stordata från ESSnet. Cedefop och Eurostat har vidtagit åtgärder för att utvidga Cedefops Skills-OVATE för att anpassa det till framställningen av europeisk officiell statistik. och att utvidga den till att omfatta utforskning av många andra källor till webbdata genom inrättandet av det europeiska webbunderrättelsetjänsten.
Fördelar med bindande klassificeringsbesked
Innan de tog med Europeiska kommissionens stordataverktyg försökte NSI själva samla in och analysera data från EUT, men de tog upp tekniska problem när det gäller otillräcklig datorkapacitet och otillräckligt minne. OJA:s stordatakaraktär krävde en mer robust infrastruktur, som BDTI tillhandahöll kostnadsfritt. BDTI erbjöd en lättillgänglig testmiljö med anpassningsmöjligheter och stödtjänster. Dess virtuella miljömallar fungerar med olika datakällor, programvaruverktyg och stordatateknik. BDTI gjorde det möjligt för byråerna att fokusera på att samla in kunskap, insikter och värde från sina data, i stället för att anstränga sig för att inrätta ett komplext experimentellt testutrymme. Detta gör det möjligt att skapa snabba prototyper för att verifiera och testa hypoteser, metoder och visualiseringar av data.
Under 2019 inrättade BDKB-teamet en testmiljö för data för en fyramånadersperiod och anordnade en utbildning för utvalda NSI. Målet var att undervisa och ge de nationella statistikbyråerna möjlighet att utforska verkliga uppgifter i EUT ur deras nationella perspektiv. Dessa uppgifter hade samlats in av Cedefop under mer än ett år. BDTI bidrog till att spara tid, kostnader och insatser för att förnya och validera vilka statistiska dataprodukter som är genomförbara och värda att utvecklas i Skills-OVATE. Som en del av detta genomförande hanterade BDTI 15 terabyte av OJA-data och miljontals sökningar.
BDTI hjälpte oss enormt genom att ge oss mycket snabbt möjlighet att få en lämplig miljö för utbildningsevenemanget och den följande utforskningen av data från EUT.
Fernando Reis, stordatatistiker, Eurostat
Vad är nytt i EUT?
Data från Oja gör det möjligt att skapa unika och innovativa indikatorer som komplement till traditionell officiell statistik. De kommer inte att användas för att ersätta befintlig statistik, utan för att införa nya dimensioner i arbetsmarknadsinformationen. De traditionella sätten att ta fram statistik innebär mer tidskrävande processer genom undersökningar som undersöker arbetskraften (utbudssidan) och lediga platser (efterfrågesidan). Uppgifter från Oja ger statistik i nära realtid och mer information om efterfrågan på kompetens och kompetens.
Här är några större fördelar för statistik som bygger på stordata i EUT:
- Kan framställas oftare och snabbare än traditionell statistik (som publiceras kvartalsvis)
- Ger information om jobb som utelämnats i traditionella kanaler, t.ex. internationella jobb.
- Effektivt sätt att studera även lokala och regionala arbetsmarknader
- Möjlighet att få mer detaljerad information om titel, yrke, kompetens och plats
Hur det fungerar
För att extrahera uppgifter från EUT måste man omvandla det digitala fotavtryck som företagen lämnar på arbetsmarknaden online till 10 relevanta statistiska variabler. Eftersom ingen av de uppgifter som samlas in och analyseras avser personuppgifter omfattas systemet inte av EU:s dataskyddslagstiftning (GDPR). De två typer av uppgifter som samlas in är följande:
- Strukturerade data i datafält, såsom arbetsort och publiceringsdatum, samlas snabbt in av databanker.
- Naturligt språk finns i fritext. Här används artificiell intelligens (AI), som kombinerar naturspråksbehandling (NLP) och algoritmer för maskininlärning, för att rensa fritext och extrahera relevanta uppgifter om yrke, utbildning och färdigheter, lön osv.
BDTI bidrog till att planera för en mer målinriktad resursanvändning för att utvidga Skills-OVATE till att omfatta statistik, och till att förfina de tekniska kraven för att framställa dem. Till exempel visste NSI att OJA inte alltid översätter till lediga platser. En ledig plats kan annonseras på flera plattformar, och det kan finnas flera lediga platser bakom en enda EUT. Tack vare BDTI har arbetsgruppen bättre förståelse för att fastställa en metod för att beräkna indikatorer utan snedvridning, innan man tar tid och anstränger sig för att koda funktioner i Skills-OVATE.
Nästa steg
Skills-OVATE samlar nu in uppgifter från alla EU-länder och över 94,000 webbsidor, däribland offentliga arbetsförmedlingar, privata arbetsförmedlingar, rekryteringsbyråer, företags webbplatser och nättidningar. Skills-OVATE förväntas bli fullt operativt senare under 2020 och tillhandahålla ett enda centraliserat alleuropeiskt system för alla berörda parter på alla nivåer: EU, nationell och regional nivå.
Nästa steg för Web Intelligence Hub är att inrätta förfaranden för övervakning av uppgifternas kvalitet, fastställa en styrningsmodell och utvidga systemet för storskalig framställning av officiell statistik inom och utanför arbetsmarknadsinformationen. EIAH kommer att bygga på Skills-OVATE-systemet och utnyttja samarbetet mellan NSI som startades av BDTI och utbildningen.