© Smederevac - iStock Getty Images Plus
Com uma parte significativa das ofertas de emprego publicitadas em linha, os dados neles contidos contêm informações valiosas sobre o atual mercado de trabalho. A utilização destes dados com tecnologias de megadados pode ajudar a compreender, por exemplo, as tendências nas competências existentes e emergentes necessárias e o número de ofertas de emprego. O estabelecimento de informações objetivas sobre o mercado de trabalho é importante para que os decisores políticos e políticos assegurem a competitividade da Europa e que as competências da mão de obra satisfaçam a procura. Ao trabalhar em novas soluções baseadas em dados, a ferramenta de teste de megadados da Comissão Europeia ajuda a experimentar dados reais antes de iniciar o desenvolvimento do sistema.
Factos rápidos
- Partes envolvidas: O Centro Europeu para o Desenvolvimento da Formação Profissional (CEDEFOP) e o Serviço de Estatística da União Europeia (Eurostat), em representação do projeto de megadados do Sistema Estatístico Europeu (ESSnet) e dos institutos nacionais de estatística (INE) participantes
- Desafio: Utilizar os dados relativos à publicidade ao emprego em linha (JOJ) para fornecer informações atempadas sobre os mercados de trabalho europeus
- Solução: Estabelecer requisitos para um sistema pan-europeu destinado a produzir estatísticas oficiais e análises políticas específicas com base em dados do JOJA
- Infraestrutura de ensaio de megadados (BDTI)
Parceiros perfeitos
Há cerca de uma década, o CEDEFOP e o Eurostat reconheceram que estavam a trabalhar arduamente nos mesmos dados para produzir perspetivas semelhantes sobre o mercado de trabalho europeu. Por um lado, o CEDEFOP é uma agência que necessita de dados sobre o mercado de trabalho para ajudar os decisores políticos e outros intervenientes no mercado de trabalho a nível nacional e da UE a compreender as tendências na oferta e procura de mão de obra e competências profissionais, bem como quaisquer desequilíbrios entre ambos. Por outro lado, o Eurostat, o Serviço de Estatística da União Europeia, ajuda os decisores políticos, recolhendo e fornecendo as estatísticas oficiais sobre a sociedade, a economia e o ambiente da UE, incluindo o mercado de trabalho europeu. Ambos pretendiam utilizar os anúncios de emprego em linha (JOL) para explorar e extrair novos tipos de informação utilizando tecnologias de megadados.
Em março de 2019, o CEDEFOP lançou a ferramenta de análise de ofertas de competências em linha para a Europa (Skills-OVATE), que já na sua primeira aplicação de âmbito limitado demonstrou o potencial do sistema para processar e analisar os dados do JOJ para a procura de competências. O Eurostat tem vindo a promover a utilização dos dados do JOJ pelos INE para melhorar as estatísticas oficiais do mercado de trabalho, apoiando os megadados ESSnet desde 2015. O Cedefop e o Eurostat tomaram medidas no sentido de alargar o programa Skills-OVATE do CEDEFOP, a fim de o adaptar à produção de estatísticas oficiais europeias; e alargá-lo à exploração de muitas outras fontes de dados Web com a criação da Plataforma Europeia de Informações Web.
Benefícios da IPV
Antes de recorrerem à ferramenta de megadados da Comissão Europeia, as IPV, os INE tentaram recolher e analisar os dados do JOJ por si próprios, mas abordaram questões técnicas no que diz respeito à insuficiente capacidade computacional e memória. A natureza dos megadados das JOJ exigiu uma infraestrutura mais robusta, que as IPV forneciam gratuitamente. As IPV proporcionaram um ambiente de teste facilmente disponível, com possibilidades de personalização e serviços de apoio. Os seus modelos de ambiente virtual funcionam com várias fontes de dados, ferramentas de software e técnicas de megadados. As IPV permitiram que as agências se concentrassem na recolha de conhecimentos, conhecimentos e valor a partir dos seus dados, em vez de envidarem esforços para criar um complexo espaço experimental de ensaio. Tal permite a criação de protótipos rápidos para verificar e testar hipóteses, metodologias e visualizações de dados.
Em 2019, a equipa das IPV criou um ambiente de teste de dados para um período de quatro meses e organizou uma sessão de formação para determinados INE. O objetivo era ensinar e capacitar os INE para explorarem dados reais do JOJ do seu ponto de vista nacional. Estes dados foram recolhidos pelo CEDEFOP ao longo de mais de um ano. As IPV ajudaram a poupar tempo, custos e esforços para inovar e validar que produtos de dados estatísticos são viáveis e merecem ser desenvolvidos em Skills-OVATE. No âmbito desta implementação, as IPV trataram 15 terabytes de dados do JOJ e milhões de consultas.
A IPV ajudou-nos de forma tremenda, permitindo-nos dispor muito rapidamente de um ambiente adequado para a ação de formação e a subsequente exploração dos dados do JOJ.
Fernando Reis, Big Data Statistician, Eurostat
O que é novo nos JOL?
Os dados Oja permitem a criação de indicadores únicos e inovadores para complementar as estatísticas oficiais tradicionais. Não serão utilizados para substituir as estatísticas existentes, mas sim para introduzir novas dimensões nas informações sobre o mercado de trabalho. Os meios tradicionais para a obtenção de estatísticas implicam processos mais morosos através de inquéritos, que exploram a mão de obra (lado da oferta) e as ofertas de emprego (lado da procura). Os dados da Oja trazem para o quadro estatísticas quase em tempo real e mais pormenores sobre a procura de competências e competências.
Eis alguns benefícios adicionais para as estatísticas baseadas nos megadados do JOJA:
- Pode ser produzido mais frequentemente e mais rapidamente do que as estatísticas tradicionais (publicadas trimestralmente)
- Fornece informações sobre empregos omitidos nos canais tradicionais, por exemplo, empregos internacionais
- Forma eficaz de estudar mesmo os mercados de trabalho infranacionais
- Possibilidade de extrair informações mais pormenorizadas sobre o título, a profissão, as competências e a localização
Como funciona
A extração de dados dos JOL exige a conversão da pegada digital deixada pelas empresas no mercado de trabalho em linha em 10 variáveis estatísticas pertinentes. Uma vez que nenhum dos dados recolhidos e analisados diz respeito a informações pessoais, o sistema não é abrangido pelo âmbito de aplicação da legislação da UE em matéria de proteção de dados (RGPD). Os dois tipos de dados recolhidos são:
- Dados estruturados contidos em campos de dados, como a localização das funções e a data de publicação, rapidamente recolhidos por raspadores de dados.
- Língua natural disponível em texto livre. Neste caso, a inteligência artificial (IA), que combina o processamento da linguagem natural (PLN) e os algoritmos de aprendizagem automática, são utilizados para limpar o texto livre e extrair dados pertinentes sobre a profissão, a educação e as competências necessárias, o salário, etc.
A IPV ajudou a planear uma utilização mais direcionada dos recursos para alargar o âmbito de aplicação do programa Skills-OVATE às estatísticas e a aperfeiçoar os requisitos técnicos para a sua produção. Por exemplo, os INE sabiam que os JOJ nem sempre se traduzem em ofertas de emprego. Uma oferta de emprego pode ser publicitada em várias plataformas e pode haver várias ofertas de emprego por detrás de um único JOJ. Graças às IPV, o grupo de trabalho tem uma melhor compreensão para estabelecer um método de cálculo dos indicadores sem enviesamentos, antes de levar o tempo e o esforço para codificar funcionalidades em Skills-OVATE.
Próximos passos
Skills-OVATE recolhe agora dados do JOJA de todos os Estados-Membros da UE e mais de 94,000 páginas Web, incluindo serviços públicos de emprego (SPE), conselhos de emprego privados, agências de recrutamento, sítios Web das empresas e jornais em linha. O projeto Skills-OVATE deverá estar plenamente operacional no final de 2020 e proporcionar um sistema pan-europeu único e centralizado a todas as partes interessadas a todos os níveis: UE, nacional e regional.
As próximas etapas da Plataforma de Informações Web incluem a criação de procedimentos de controlo da qualidade dos dados, a definição de um modelo de governação e a expansão do sistema para a produção em larga escala de estatísticas oficiais em informações sobre o mercado de trabalho e não só. A PEAI basear-se-á no sistema Skills-OVATE e tirará partido da colaboração entre os INE, iniciada pelo ambiente das IPV e pela formação.