© Smederevac - iStock Getty Images Plus
Като се има предвид значителният дял на обявените онлайн предложения за работа, съдържащите се в тях данни съдържат ценна информация за настоящия пазар на труда. Използването на тези данни чрез технологии за големи информационни масиви може да помогне да се разберат например тенденциите в съществуващите и нововъзникващите умения, които се изискват, и броят на свободните работни места. Създаването на обективна информация за пазара на труда е важно за политиците и лицата, отговорни за вземането на решения, за да се гарантира конкурентоспособността на Европа и уменията на работната сила да отговарят на търсенето. Когато се работи по нови решения, основани на данни, инструментът на Европейската комисия за изпитване на големи информационни масиви помага да се експериментира с реални данни, преди да започне разработването на системата.
Фактите накратко
- Участващи страни: Европейският център за развитие на професионалното обучение (CEDEFOP) и Статистическата служба на Европейския съюз (Евростат), представляващи проекта за големи информационни масиви на Европейската статистическа система (ESSnet) и участващите национални статистически институти (НСИ)
- Предизвикателство: Използване на данни за онлайн реклама на работни места (OJA), за да се предостави навременна информация за европейските пазари на труда
- Разтвор: Установяване на изисквания за общоевропейска система за изготвяне на официални статистически данни и специален анализ на политиката въз основа на данни от OJA
- Инфраструктура за изпитване на големи информационни масиви (ОТИ)
Идеални партньори
Преди около половин десетилетие Европейският център за развитие на професионалното обучение (CEDEFOP) и Евростат осъзнават, че работят усилено по едни и същи данни, за да получат подобна информация за европейския пазар на труда. От една страна, CEDEFOP е агенция, която се нуждае от данни за пазара на труда, за да помогне на създателите на политики и другите участници на пазара на труда на равнището на ЕС и на национално равнище да разберат тенденциите в предлагането и търсенето на професионална работна ръка и умения, както и всякакви дисбаланси между тях. От друга страна, Евростат, Статистическата служба на Европейския съюз, помага на политиците и лицата, отговорни за вземането на решения, като събира и предоставя официални статистически данни за обществото, икономиката и околната среда в ЕС, включително за европейския пазар на труда. И двамата искаха да използват онлайн реклами за работа (OJAs), за да проучват и извличат нови видове информация чрез използване на технологии за големи информационни масиви.
През март 2019 г. CEDEFOP стартира онлайн инструмента за анализ на свободните работни места за Европа (Skills-OVATE), който още при първото си ограничено прилагане доказа потенциала на системата да обработва и анализира данни от OJA за търсене на умения. От 2015 г. насам Евростат насърчава използването на данни от OJA от НСИ с цел подобряване на официалната статистика на пазара на труда в подкрепа на ESSnet Big Data. Cedefop и Евростат предприеха стъпки за разширяване на уменията на CEDEFOP, за да го адаптират към изготвянето на официални европейски статистически данни; и за разширяване на обхвата, така че да обхване проучването на много други източници на уеб данни със създаването на Европейския център за уеб разузнаване.
Ползи от ОТИ
Преди да използват инструмента на Европейската комисия за големи информационни масиви, BDTI, НСИ се опитаха сами да събират и анализират данни от OJA, но се заеха с технически проблеми по отношение на недостатъчната изчислителна мощност и памет. Естеството на големите информационни масиви на оперативните действия изискваше по-стабилна инфраструктура, която ОТИ предоставяше безплатно. ОТИ осигури леснодостъпна тестова среда с възможности за персонализиране и помощни услуги. Нейните образци на виртуална среда работят с различни източници на данни, софтуерни инструменти и техники за големи информационни масиви. ОТИ позволи на агенциите да се съсредоточат върху събирането на знания, информация и стойност от своите данни, вместо да полагат усилия за създаване на сложно пространство за експериментални изпитвания. Това дава възможност за създаване на бързи прототипи за проверка и изпитване на хипотези, методики и визуализации на данни.
През 2019 г. екипът на ОТИ създаде среда за изпитване на данни за период от четири месеца и организира обучение за избрани НСИ. Целта беше да се преподава и да се даде възможност на НСИ да проучват реални данни от OJA от национална гледна точка. Тези данни са били събирани от CEDEFOP в продължение на повече от една година. ОТИ спомогна за спестяването на време, разходи и усилия за иновации и валидиране на това кои продукти със статистически данни са осъществими и заслужават да бъдат разработени в Skills-OVATE. Като част от това изпълнение ОТИ обработи 15 терабайта данни от OJA и милиони запитвания.
ОТИ ни помогна изключително много, като ни позволи много бързо да създадем подходяща среда за учебното мероприятие и последващото проучване на данните на OJA.
Фернандо Рейс, статистик в областта на големите информационни масиви, Евростат
Какво е новото в СПО?
Данните от Оя дават възможност за създаване на уникални и иновативни показатели, които да допълват традиционните официални статистически данни. Те няма да се използват за заместване на съществуващите статистически данни, а за внасяне на нови измерения в проучването на пазара на труда. Традиционните средства за постигане на статистически данни включват по-продължителни процеси чрез проучвания, които изследват работната сила (предлагането) и свободните работни места (от гледна точка на търсенето). Данните от Oja предоставят на масата статистически данни в почти реално време и повече подробности за уменията и търсенето на умения.
Ето някои повече ползи за статистическите данни, основани на големи информационни масиви на OJA:
- Може да се изготвя по-често и по-бързо от традиционните статистически данни (публикувани на тримесечие)
- Предоставя информация за работни места, пропуснати в традиционните канали, например международни работни места
- Ефективен начин за проучване дори на поднационалните пазари на труда
- Възможност за извличане на по-подробна информация за званието, професията, уменията и местоположението
Как работи
Извличането на данни от СПО изисква преобразуване на цифровия отпечатък, оставен от дружествата на онлайн пазара на труда, в 10 съответни статистически променливи. Тъй като нито една от събраните и анализирани данни не е свързана с лична информация, системата попада извън обхвата на законодателството на ЕС за защита на данните (ОРЗД). Двата вида събирани данни са:
- Структурирани данни, съдържащи се в полетата за данни, като например местоположение на работното място и дата на публикуване, събрани бързо от скраперите на данни.
- Естественият език се намира в свободен текст. Тук изкуственият интелект (ИИ), съчетаващ алгоритми за обработка на естествени езици (NLP) и машинно самообучение, се използва за почистване на свободния текст и извличане на съответните данни за професията, образованието и необходимите умения, заплатата и т.н.
ОТИ спомогнаха за планиране на по-целенасочено използване на ресурсите за разширяване на Skills-OVATE до статистиката и за прецизиране на техническите изисквания за тяхното изготвяне. Например НСИ знаеха, че ОВО невинаги водят до свободни работни места. Едно свободно работно място може да бъде обявено на няколко платформи и може да има множество свободни работни места зад една и съща OJA. Благодарение на ОТИ работната група има по-добро разбиране за установяване на метод за изчисляване на показателите без пристрастност, преди да отдели време и усилия за кодиране на функционалните възможности в Skills-OVATE.
Следващи стъпки
Сега Skills-OVATE събира данни от OJA от всички държави — членки на ЕС, и над 94,000 уебстраници, включително публични служби по заетостта (ПСЗ), частни съвети по заетостта, агенции за набиране на персонал, уебсайтове на дружества и онлайн вестници. Очаква се Skills-OVATE да започне да функционира пълноценно по-късно през 2020 г. и да осигури единна, централизирана общоевропейска система за всички заинтересовани страни на всички равнища: ЕС, национални и регионални.
Следващите стъпки за Web Intelligence Hub включват създаването на процедури за наблюдение на качеството на данните, определянето на модел на управление и разширяването на системата за широкомащабно изготвяне на официални статистически данни в областта на проучването на пазара на труда и извън него. Центърът ще се основава на системата Skills-OVATE и ще стимулира сътрудничеството между НСИ, започнато от средата и обучението за ОТИ.