Skip to main content
Kształtowanie cyfrowej przyszłości Europy

Infrastruktura testowa Big Data - Zasoby

Zasoby infrastruktury testowej dużych zbiorów danych (BDTI) obejmują dokumentację techniczną, przewodniki wdrażania, kod wielokrotnego użytku i najlepsze praktyki, aby wspierać administracje i organizacje publiczne.

Wyróżnione zasoby

Aby wesprzeć administracje i organizacje publiczne w jak najlepszym wykorzystaniu dużych zbiorów danych i analiz, zgromadziliśmy wszystkie zasoby BDTI w specjalnym repozytorium Gitlab. Obejmuje to dokumentację techniczną, przewodniki wdrażania, kod wielokrotnego użytku oraz najlepsze praktyki naszych pilotów i historie sukcesu. 

Wprowadzenie do analityki geoprzestrzennej

Rozpoznawanie wzorców w danych poprzez wykorzystanie informacji geograficznych, przestrzennych i lokalizacji.

  • Dowiedz się więcej o geoprzestrzennych systemach informacyjnych (GIS), ich znaczeniu i o tym, jak pomagają one sprostać współczesnym wyzwaniom w zakresie zdrowia publicznego, zmiany klimatu, inteligentnej mobilności, planowania urbanistycznego i innych
  • Poznaj dwa najczęstsze typy danych geoprzestrzennych: Dane wektorowe i dane rastrowe
  • Poznaj rozszerzenie Geospatial Analytics dla KNIME (współtworzone przez CGA Harvard), które może być używane do uzyskiwania dostępu, przekształcania, manipulowania i przetwarzania danych GIS w sposób niskokodowy

Wprowadzenie do statystyki

Poznaj podstawy statystyki i jej konieczność analizy danych.

  • Zagłębić się w statystyki opisowe dla wybranego zjawiska społecznego w UE, koncentrując się na miernikach tendencji centralnej, zmienności, rozkładu kształtu, skojarzeń i działek eksploracyjnych.
  • Poznaj pojęcie prawdopodobieństwa, badając różne rodzaje zdarzeń, obliczenia prawdopodobieństwa i bardziej zaawansowane tematy, takie jak prawdopodobieństwo warunkowe i twierdzenie Bayesa.
  • Zapoznaj się z rozszerzeniami statystyk dla KNIME, które można wykorzystać do wykrywania wartości odstających, uzyskiwania macierzy korelacji, testowania hipotez i innych w sposób niskokodowy.

Wprowadzenie do analizy wykresów

Analizuj złożone relacje między podmiotami i odkrywaj wzorce w danych.

  • Zapoznaj się z teoretycznymi podstawowymi pojęciami dotyczącymi wykresów, w tym terminologią
  • Dowiedz się więcej o zastosowaniach wykresów skupiających się na przypadkach użycia obejmujących planowanie podróży do Unii Europejskiej i w jej obrębie
  • Dowiedz się, jak modelować, przetwarzać, analizować i wizualizować wykresy bez kodowania za pomocą platformy KNIME Analytics

Pulpity nawigacyjne do wizualizacji danych: Analiza i prezentacja informacji o wypadkach drogowych

Przekształć złożone dane w jasne, praktyczne spostrzeżenia, zwiększając swoją zdolność do skutecznej komunikacji.

  • Zdobądź dogłębne zrozumienie technik wizualizacji danych i ich zastosowań w analizie bezpieczeństwa miejskiego
  • Zdobądź praktyczne doświadczenie w zarządzaniu i wizualizacji statycznych zbiorów danych
  • Naucz się umiejętności wstępnego przetwarzania, przechowywania i integracji danych za pomocą PostgreSQL

Komunikowanie się ze złożonymi zbiorami danych: Integracja danych w czasie rzeczywistym na potrzeby analiz miejskich

Naucz się integrować i wizualizować dane w czasie rzeczywistym.

  • Budowanie fundamentalnego zrozumienia technik i narzędzi wizualizacji danych
  • Zdobądź doświadczenie w integracji i wizualizacji danych w czasie rzeczywistym
  • Zobacz praktyczne zastosowania wizualizacji danych w podejmowaniu decyzji w sektorze publicznym, w szczególności w planowaniu urbanistycznym i zarządzaniu środowiskiem

Wykorzystanie danych klimatycznych: Klasyfikacja i analityka predykcyjna dla turystyki

Dokonuj dokładnych przewidywań i świadomych decyzji, odkrywając wzorce i trendy w danych historycznych.

  • Zrozumieć klasyfikację danych i analitykę predykcyjną
  • Dowiedz się, jak używać Jupyter Notebooks do przetwarzania danych i MinIO do bezpiecznego przechowywania danych i zarządzania nimi
  • Rozwijanie doświadczenia w stosowaniu modeli uczenia maszynowego do danych rzeczywistych

Modelowaniepredykcyjne i analiza w czasie rzeczywistym: Prognozowanie i monitorowanie korzystania z rowerów w czasie rzeczywistym

Analizuj dane historyczne, aby odkryć wzorce i relacje, aby prognozować przyszłe wydarzenia, identyfikować trendy.

  • Zdobądź solidne zrozumienie modelowania predykcyjnego z wykorzystaniem danych rzeczywistych
  • Uzyskaj doświadczenie z narzędziami do przetwarzania danych, takimi jak R Studio i MongoDB
  • Zdobądź praktyczne umiejętności w zakresie tworzenia zautomatyzowanych potoków danych

Przetwarzanie językanaturalnego & wizualizacja danych: Zwiększenie partycypacji obywatelskiej

Zastosuj techniki oparte na danych, aby lepiej zrozumieć wyniki ankiety i odkryć praktyczne spostrzeżenia.

  • Naucz się korzystać z NLP w tłumaczeniu tekstów i analizowaniu zdań
  • Zdobądź doświadczenie w masowym analizowaniu odpowiedzi na ankiety
  • Rozwijaj umiejętności zarządzania przechowywaniem i przetwarzaniem danych za pomocą Apache Superset, MongoDB i Jupyter Notebooks

Dyskusja panelowa na temat innowacji: Przypadki wykorzystania danych przez administracje publiczne UE

Dowiedz się, w jaki sposób oparte na danych spostrzeżenia, oparte na otwartych danych, mogą zrewolucjonizować usługi publiczne w całej Europie, przekształcając złożone wyzwania w łatwe do opanowania rozwiązania.

Prezentacja pilotażowaBDTI: Prezentacja rozwiązań opartych na danych w działaniu

Prezentacje kierowników projektów, którzy wykorzystali BDTI do sprostania kluczowym wyzwaniom i osiągnięcia znaczących rezultatów.

Bezpłatny kurs mający na celu pomoc administracjom publicznym w zapoznaniu się z narzędziami oferowanymi w zakresie BDTI za pomocą praktycznego przypadku użycia. Kurs prowadzi uczestników przez typowy przepływ pracy projektu danych po fikcyjnym przypadku użycia. Slajdy kursu i nagrania na żywo są dostępne pod poniższymi linkami.

Szczegóły kursu

Wykaz przypadkówużycia: Inspiracje i szablony do zbudowania własnego przypadku użycia.

Te rzeczywiste przypadki użycia ilustrują, w jaki sposób oparte na danych spostrzeżenia, oparte na otwartych danych, mogą wyposażyć rządy w zdolność do szybkiego reagowania na wyzwania, poprawy wydajności, wspierania przejrzystości i tworzenia skuteczniejszych polityk z korzyścią dla obywateli. Przegląd przypadków użycia może zainspirować administracje publiczne do opracowania i wdrożenia własnych podejść opartych na danych.

Przypadki użycia

Szablony przypadków wykorzystania danych

Materiały te mają na celu wspieranie administracji publicznych w definiowaniu i projektowaniu przypadków wykorzystania danych.

Praktyczne zasoby BDTI: Niniejszy dokument zawiera zasoby, takie jak kwestionariusze, listy kontrolne, drzewa decyzyjne i ramy.

Metodyka określania zakresu projektu: Niniejszy dokument zawiera wytyczne dla administracji publicznych zainteresowanych eksperymentowaniem z projektami dotyczącymi danych. Celem niniejszego dokumentu jest dostarczenie użytkownikom użytecznych narzędzi do definiowania i projektowania ich pilotażowego przypadku użycia.

Szablony przypadków użycia

 

Cele pośrednie WIT

  • 2019

    Startuje BDTI i rozpoczynają się pierwsi piloci.

  • marzec 2019 r.

    Gromadzenie danych z Hackathonu: BDTI wdrożyło specjalną instancję do obsługi niestandardowej aplikacji do gromadzenia danych na smartfony, agregując około 1,5 TB wysoce spersonalizowanych danych w ciągu dwóch tygodni i bezpiecznie utrzymując je w S3 przy ścisłej kontroli prywatności i dostępu.

     
  • maj 2019 r.

    Oferty pracy online: Platforma dużych zbiorów danych dla laboratorium danych, która umożliwia urzędom statystycznym w państwach UE badanie i przetwarzanie danych gromadzonych przez RLMI w celu uzyskania wglądu w rynek pracy w czasie rzeczywistym.

     

    System automatycznej identyfikacji: Celem projektu pilotażowego było wykorzystanie dużych zbiorów danych dotyczących geopozycjonowania wygenerowanych przez statki systemów automatycznej identyfikacji (AIS) w celu poprawy jakości i porównywalności istniejących statystyk morskich oraz stworzenia nowych produktów statystycznych.

  • 2020

    Projekty pilotażowe są kontynuowane, a zespół BDTI współpracuje z administracją publiczną i środowiskiem akademickim w całej Europie.

  • luty 2020 r.

    Norwegia, Difi (agencja zarządzania publicznego i administracji elektronicznej): Stworzenie jeziora danych z wykorzystaniem danych PEPPOL dotyczących zamówień publicznych, umożliwiającego analizę danych transakcyjnych w celu zwiększenia wydajności zamówień, wykrywania nieefektywności i zapewnienia spostrzeżeń na potrzeby dalszej poprawy.

  • kwiecień 2020 r.

    Miasto Walencja, Hiszpania: Projekt pilotażowy mający na celu pozyskanie wiedzy zawartej w dużej ilości istniejących dowodów naukowych i dokumentacji regulacyjnej dotyczącej COVID-19 oraz dostarczenie jej klinicystom i kierownikom w łatwy do opanowania sposób za pomocą zaawansowanych narzędzi wizualizacji danych.

    Gmina Mediolan: Ramy modelowania predykcyjnego służące analizie danych dotyczących mobilności obywateli w Mediolanie podczas etapu 2 pandemii COVID-19, umożliwiające świadome kształtowanie polityki dzięki wglądowi opartemu na danych.

     
  • lipiec 2020 r.

    Miasto Florencja: Projekt pilotażowy mający na celu zrozumienie wpływu COVID-19 na mobilność poprzez wykorzystanie danych zgromadzonych przez Smart City Control Room (SCCR) – jako kluczowego elementu i czynnika umożliwiającego realizację większego projektu o nazwie REPLICATE – w celu zapewnienia odpowiedzialnego i kontrolowanego zniesienia środków izolacji.

     

    Europejski Sojusz na rzecz Krwi i Komisja Europejska (DG SANTE): Projekt pilotażowy mający na celu stworzenie ogólnounijnej ogólnodostępnej platformy gromadzącej dane na potrzeby badania dotyczącego rekonwalescencji COVID-19 w osoczu i zarządzanie nią.

     
  • wrzesień 2020 r.

    Włochy, Portugalia i Norwegia: Pilotaż obejmował władze włoskie, portugalskie i norweskie i koncentrował się na zapewnieniu skalowalnego środowiska wirtualnego i procedur analitycznych w celu pracy nad danymi dotyczącymi zamówień publicznych i wspierania tworzenia przestrzeni danych dotyczących e-zamówień.

     
  • Marzec 2021 r.

    Gmina Casola Valsenio: Analiza rozmieszczenia ludności i dostępności Internetu w Casola Valsenio w celu informowania o podejmowaniu decyzji dotyczących przyszłego rozwoju infrastruktury szerokopasmowej i inicjatyw monitorowania środowiska.

  • maj 2021 r.

    Gmina Casola Miglierina: Analiza wzorców zużycia energii i optymalizacja produkcji energii odnawialnej przy użyciu zaawansowanych technik analizy danych, w tym modelowania predykcyjnego i analizy szeregów czasowych.

  • 2022

    Wyniki zaczynają udowadniać, w jaki sposób BDTI pomaga administracjom publicznym i projektom prowadzonym przez sektor publiczny poprawić doświadczenia obywateli, zwiększyć wydajność rządu oraz pobudzić biznes i szeroko rozumianą gospodarkę za pomocą dużych zbiorów danych.

  • 2023

    Trwają projekty pilotażowe i rozpoczynają się działania komunikacyjne w zakresie dzielenia się wiedzą.

  • marzec 2023 r.

    Uruchomiono specjalną stronę internetową poświęconą BDTI, szczegółowo opisującą ofertę usług BDTI, udostępnianie zasobów i przykłady udanych projektów pilotażowych.

  • maj 2023 r.

    Zespół BDTI organizuje webinaria i warsztaty dotyczące umiejętności w zakresie danych, aby zachęcić sektor publiczny do umiejętności korzystania z danych.

  • październik 2023 r.

    GminaDun Laoghaire, Dublin: Projekt pilotażowy mający na celu wykorzystanie zintegrowanych danych o ruchu i wydarzeniach na potrzeby strategicznego planowania urbanistycznego oraz zapewnienie władzom i społecznościom lokalnym praktycznych informacji w celu wsparcia inicjatyw na rzecz zrównoważonej mobilności miejskiej.

    Zespół BDTI uczestniczy w Szczycie Otwartych i Zwinnych Inteligentnych Miast oraz Europejskim Tygodniu Regionów, prezentując rozwiązanie i organizując warsztaty przypadków użycia.

    Biuletyn BDTI Kitchen Biuletyn BDTI Kitchen Biuletyn BDTI Kitchen Biuletyn BDTI Kitchen Biuletyn BDTI Kitchen Biuletyn BDTI Kitchen Biuletyn BDTI Biuletyn BDTI Kitchen  Biuletyn BDTI Biuletyn BDTI Kitchen Biuletyn BDTI Biuletyn B

  • styczeń 2024 r.

    GRNET i Uniwersytet Macedonii, Grecja: GRNET i UoM uruchamiają projekt pilotażowy mający na celu przekształcenie MITOS, który zapewnia uporządkowane opisy ponad 3000 usług publicznych, w połączone otwarte dane.

     

    Zespół BDTI uczestniczy i prezentuje na OASC 2024.

     

    Uruchomiono kurs online BDTI Essentials: „Umożliwienie funkcjonowania sektora publicznego opartego na danych: Kurs wprowadzający do podstawowych zagadnień związanych z BDTI”, wspierający inteligentny i innowacyjny sektor publiczny w całej UE.

  • luty 2024 r.

    Biuletyn BDTI Kitchen Biuletyn BDTI Kitchen Biuletyn BDTI Kitchen Biuletyn BDTI Kitchen Biuletyn BDTI Kitchen Biuletyn BDTI Kitchen Biuletyn BDTI Biuletyn BDTI Kitchen Biuletyn BDTI Biuletyn BDTI Kitchen Biuletyn BDTI Biuletyn B

  • marzec 2024 r.

    Materiały promocyjne BDTI są tłumaczone na wszystkie 24 języki europejskie.

  • maj 2024 r.

    Miasto Bochum, Niemcy: Projekt pilotażowy mający na celu zbudowanie modelu uczenia maszynowego, aby zrewolucjonizować sposób monitorowania i przewidywania zdrowia drzew na obszarach miejskich.

     

    Miasto i Uniwersytet w Turku, Finlandia: Wspólny projekt pilotażowy mający na celu przygotowanie analizy przepływów ruchu w celu poprawy transportu publicznego poprzez połączenie kilku źródeł danych dotyczących mobilności z danymi geograficznymi.

  • lipiec 2024 r.

    BDTI Skills Studio rozpoczyna oferowanie warsztatów i seminariów internetowych obejmujących różne tematy analizy danych, umożliwiając uczestnikom zdobycie praktycznej wiedzy i praktycznego doświadczenia.

     

    Neapol, Włochy: Projekt pilotażowy mający na celu udoskonalenie planowania miejskiego i strategii mobilności poprzez zaawansowaną analizę przestrzeni publicznej i danych związanych z mobilnością.

  • październik 2024 r.

    Podczas konferencji Smart Country Convention w Berlinie zespół BDTI zorganizował warsztaty, podczas których omówiono, w jaki sposób regiony i miasta mogą odnieść korzyści dzięki ponownemu wykorzystaniu informacji sektora publicznego na potrzeby innowacji.

     

    Miasto Arezzo, Włochy: Projekt pilotażowy mający na celu wspieranie podejmowania decyzji w oparciu o dane, aby osiągnąć delikatny spadek liczby wypadków i rannych w mieście, z wykorzystaniem dogłębnej, nadrzędnej analizy obszernej bazy danych niebezpiecznych dróg i skrzyżowań w gminie Arezzo.

  • listopad 2024 r.

    Podczas brukselskiej konferencji FARI zespół BDTI zorganizował warsztaty na temat znaczenia ponownego wykorzystywania danych dla przyszłości miast i regionów.

  • styczeń 2025 r.

    Uczestnicy projektu pilotażowego prezentują swoje studia przypadków podczas wirtualnego wydarzenia BDTI Pilot Showcase.