Bronnen voor Big Data Test Infrastructure (BDTI) omvatten technische documentatie, implementatiehandleidingen, herbruikbare code en beste praktijken om overheidsdiensten en organisaties te ondersteunen.
Uitgelichte bronnen
Om overheden en organisaties te ondersteunen bij het optimaal benutten van big data en analytics, hebben we alle BDTI-resources verzameld in een speciale Gitlab-repository. Dit omvat technische documentatie, implementatiehandleidingen, herbruikbare code en best practices uit onze pilots en succesverhalen.
Een inleiding tot geospatiale analyses
Herken patronen in gegevens door gebruik te maken van geografische, ruimtelijke en locatie-informatie.
- Kom meer te weten over Geospatial Information Systems (GIS), hun belang en hoe ze helpen bij moderne uitdagingen op het gebied van volksgezondheid, klimaatverandering, slimme mobiliteit, stadsplanning en meer
- Maak kennis met de twee meest voorkomende geospatiale gegevenstypen: Vectorgegevens en Rastergegevens
- Ontdek de Geospatial Analytics Extension for KNIME (mede ontwikkeld door CGA Harvard) die kan worden gebruikt om GIS-gegevens op een low-code manier te openen, transformeren, manipuleren en verwerken
Leer de fundamenten van statistieken en de noodzaak ervan voor data-analyse.
- Verdiep je in beschrijvende statistieken voor een geselecteerd sociaal fenomeen in de EU, met de nadruk op maatstaven van centrale tendens, variabiliteit, vormverdeling, associatie en verkennende percelen.
- Leer het concept van waarschijnlijkheid kennen door verschillende soorten gebeurtenissen, waarschijnlijkheidsberekeningen en meer geavanceerde onderwerpen zoals voorwaardelijke waarschijnlijkheid en de stelling van Bayes te verkennen.
- Verken de Statistiekextensies voor KNIME, die kunnen worden gebruikt om uitschieters te detecteren, correlatiematrices te verkrijgen, hypothesen te testen en meer op een low-code manier.
Een inleiding tot grafiekanalyse
Analyseer complexe relaties tussen entiteiten en ontdek patronen in gegevens.
- Leer theoretische basisbegrippen over grafieken, inclusief terminologie
- Meer informatie over toepassingen van grafieken gericht op use cases met betrekking tot reisplanning naar en binnen de Europese Unie
- Leer hoe u grafieken kunt modelleren, verwerken, analyseren en visualiseren zonder codering met het KNIME Analytics Platform
Dashboards voor datavisualisatie: Analyseren en presenteren van verkeersongevalleninzichten
Transformeer complexe gegevens in duidelijke, bruikbare inzichten, waardoor u effectiever kunt communiceren.
- Krijg een grondig inzicht in datavisualisatietechnieken en hun toepassingen in stedelijke veiligheidsanalyse
- Doe praktijkervaring op bij het beheren en visualiseren van statische datasets
- Leer vaardigheden op het gebied van voorbewerking, opslag en integratie van gegevens met PostgreSQL
Communiceren van complexe datasets: Integreren van real-time data voor stedelijke inzichten
Leer real-time data te integreren en visualiseren.
- Bouw een fundamenteel begrip op van datavisualisatietechnieken en -tools
- Ervaring opdoen met het integreren en visualiseren van real-time data
- Zie praktische toepassingen van datavisualisatie in de besluitvorming van de publieke sector, met name in stadsplanning en milieubeheer
Gebruik van klimaatgegevens: Classificatie en voorspellende analyses voor toerisme
Maak nauwkeurige voorspellingen en weloverwogen beslissingen door patronen en trends in historische gegevens bloot te leggen.
- Begrijp gegevensclassificatie en voorspellende analyses
- Leer Jupyter Notebooks te gebruiken voor gegevensverwerking en MinIO om de gegevens veilig op te slaan en te beheren
- Ontwikkel ervaring met het toepassen van machine learning-modellen op real-world data
Predictive modelling en real-time analyse: Real-time voorspelling en monitoring van het fietsgebruik
Analyseer historische gegevens om patronen en relaties te ontdekken om toekomstige gebeurtenissen te voorspellen, trends te identificeren.
- Krijg een goed begrip van voorspellende modellering met behulp van real-world data
- Doe ervaring op met datatools zoals R Studio en MongoDB
- Krijg praktische vaardigheden bij het opzetten van geautomatiseerde datapijplijnen
Natuurlijke taalverwerking & datavisualisatie: Versterking van de burgerparticipatie
Pas datagestuurde technieken toe om enquêteresultaten beter te begrijpen en bruikbare inzichten te ontdekken.
- Leer NLP te gebruiken bij het vertalen van teksten en het analyseren van zinnen
- Ervaring opdoen met het analyseren van enquêtereacties in bulk
- Bouw vaardigheden op in het beheren van gegevensopslag en -verwerking met behulp van Apache Superset, MongoDB en Jupyter Notebooks
Ontdek hoe datagestuurde inzichten, aangedreven door open data, een revolutie teweeg kunnen brengen in overheidsdiensten in heel Europa en complexe uitdagingen kunnen omzetten in beheersbare oplossingen.
BDTI-proefshowcase: Presenteren van datagestuurde oplossingen in actie
Presentaties van projectmanagers die de BDTI hebben gebruikt om belangrijke uitdagingen aan te pakken en impactvolle resultaten te leveren.
Een gratis cursus om overheidsdiensten te helpen instrumenten te verkennen die op BDTI worden aangeboden door middel van een praktische use case. De cursus begeleidt deelnemers door een typische dataprojectworkflow na een fictieve use case. Cursusdia's en live-opnamen zijn beschikbaar via de onderstaande links.
- Sessie 1: Toegang tot en exploratie van gegevens: Leg de basis voor data-analyse door de relevante datasets te laden en te verkennen.
- Sessie 2: Gegevensreiniging en -transformatie: Bereid de gegevens voor op analyse door ze op te schonen en te transformeren.
- Sessie 3: Bijmenging en opslag van gegevens: Leer technieken voor het automatiseren van data blending en opslag.
- Sessie 4: Basisanalyse: Begin het analytisch proces door de kerndoelstellingen aan te pakken.
- Sessie 5: Geavanceerde module: Verzamelen van gegevens van het web en geovisualisatie.
Inventarisatie van use cases: Inspiratie en templates om je eigen use case te bouwen.
Deze praktijkvoorbeelden illustreren hoe datagestuurde inzichten, aangedreven door open data, overheden in staat kunnen stellen snel te reageren op uitdagingen, de efficiëntie te verbeteren, transparantie te bevorderen en effectiever beleid te creëren ten behoeve van burgers. Het herzien van de use cases kan overheidsdiensten inspireren om hun eigen datagestuurde benaderingen te ontwerpen en uit te voeren.
Sjablonen voor gegevensgebruik
Deze materialen zijn bedoeld om overheidsdiensten te ondersteunen bij het definiëren en ontwerpen van cases voor gegevensgebruik.
Praktische BDTI-middelen: Dit document bevat bronnen zoals vragenlijsten, checklists, beslisbomen en kaders.
Methodologie voor projectscoping: Dit document biedt richtsnoeren voor overheidsdiensten die willen experimenteren met dataprojecten. Het doel van dit document is om gebruikers nuttige hulpmiddelen te bieden om hun pilot use case te definiëren en te ontwerpen.
BDTI mijlpalen
-
2019
BDTI lanceert en de eerste pilots beginnen.
-
maart 2019
Hackathon gegevensverzameling: BDTI implementeerde een speciale instantie ter ondersteuning van een aangepaste applicatie voor het verzamelen van smartphonegegevens, waarbij ongeveer 1,5 TB aan zeer gepersonaliseerde gegevens gedurende twee weken werd geaggregeerd en veilig werd volgehouden in S3 met strikte privacy- en toegangscontroles.
-
mei 2019
Online vacatures: Een big data-platform voor een datalab dat statistische bureaus in EU-landen in staat stelt door het RLMI verzamelde gegevens te verkennen en te verwerken voor realtime inzichten op de arbeidsmarkt.
Automatisch identificatiesysteem: De pilot was gericht op het gebruik van big data over de geo-positionering van door schepen gegenereerde automatische identificatiesystemen (AIS) om de kwaliteit en vergelijkbaarheid van bestaande maritieme statistieken te verbeteren en nieuwe statistische producten te produceren.
-
2020
De proefprojecten worden voortgezet en het BDTI-team onderhoudt contacten met het openbaar bestuur en de academische wereld in heel Europa.
-
februari 2020
Noorwegen, Difi (agentschap voor overheidsbeheer en e-overheid): Creëerde een data lake met behulp van openbare aanbestedingsgegevens van PEPPOL, waardoor transactiegegevens kunnen worden geanalyseerd om de efficiëntie van aanbestedingen te verbeteren, inefficiënties op te sporen en inzichten te bieden voor verdere verbetering.
-
april 2020
Stad Valencia, Spanje: Een proefproject om de kennis uit een grote hoeveelheid bestaande wetenschappelijke gegevens en regelgevingsdocumentatie over COVID-19 te extraheren en deze op een beheersbare manier aan de clinici en managers te verstrekken door middel van geavanceerde gegevensvisualisatie-instrumenten.
Gemeente Milaan: Een voorspellend modelleringskader voor de analyse van gegevens over de mobiliteit van burgers in Milaan tijdens COVID-19-fase 2, dat geïnformeerde beleidsvorming mogelijk maakt door middel van gegevensgestuurde inzichten.
-
juli 2020
Stad Florence: Een pilot om de impact van COVID-19 op mobiliteit te begrijpen door gebruik te maken van gegevens die zijn verzameld door Smart City Control Room (SCCR) - als een belangrijk onderdeel en enabler van een groter project genaamd REPLICATE - om ervoor te zorgen dat lockdownmaatregelen op een verantwoorde en gecontroleerde manier werden opgeheven.
Europese Bloedalliantie en Europese Commissie (DG SANTE): Een proefproject om een EU-breed open toegangsplatform op te zetten en te beheren dat gegevens verzamelt ter ondersteuning van een studie over plasmatherapie voor herstelde COVID-19-patiënten.
-
september 2020
Italië, Portugal en Noorwegen: Bij het proefproject waren de Italiaanse, Portugese en Noorse autoriteiten betrokken, waarbij het accent lag op het bieden van een schaalbare virtuele omgeving en analyseroutines om aan aanbestedingsgegevens te werken en de totstandbrenging van de gegevensruimte voor e-aanbestedingen te ondersteunen.
-
maart 2021
Gemeente Casola Valsenio: Analyseren van bevolkingsverdeling en internettoegankelijkheid in Casola Valsenio om de besluitvorming te ondersteunen voor toekomstige initiatieven voor de uitrol van breedbandinfrastructuur en milieumonitoring.
-
mei 2021
Gemeente Casola Miglierina: Het analyseren van energieverbruikspatronen en het optimaliseren van de productie van hernieuwbare energie met behulp van geavanceerde data-analysetechnieken, waaronder voorspellende modellering en tijdreeksanalyse.
-
2022
De resultaten beginnen te bewijzen hoe BDTI overheden en projecten onder leiding van de publieke sector helpt om de ervaring van burgers te verbeteren, de overheid efficiënter te maken en het bedrijfsleven en de bredere economie te stimuleren door middel van big data.
-
2023
De pilots gaan door en de communicatieactiviteiten voor kennisdeling beginnen.
-
maart 2023
Er wordt een speciale BDTI-website gelanceerd met details over het BDTI-serviceaanbod, het delen van bronnen en succesvolle pilots.
-
mei 2023
Het BDTI-team organiseert webinars en workshops over datavaardigheden om datageletterdheid in de publieke sector aan te moedigen.
-
oktober 2023
Gemeente Dun Laoghaire, Dublin: Een proefproject om geïntegreerde verkeers- en evenementgegevens te benutten voor strategische stadsplanning en lokale overheden en gemeenschappen bruikbare inzichten te bieden ter ondersteuning van duurzame stedelijke mobiliteitsinitiatieven.
Het BDTI-team woont de Open and Agile Smart Cities Summit en de Europese Week van Regio's bij, presenteert de oplossing en organiseert use case-workshops.
De BDTI Kitchen Newsletter wordt gelanceerd en levert maandelijks BDTI-nieuws, evenementen en inzichten in data-analyse in de publieke sector.
-
januari 2024
GRNET en de Universiteit van Macedonië, Griekenland: GRNET en UoM lanceren een pilot om MITOS, dat gestructureerde beschrijvingen van meer dan 3.000 openbare diensten biedt, om te zetten in Linked Open Data.
Het BDTI-team is aanwezig en presenteert op OASC 2024.
BDTI Essentials online cursus wordt gelanceerd: "Een data-geïnformeerde publieke sector mogelijk maken: een inleidingscursus over BDTI Essentials”, ter bevordering van een datageletterde en innovatieve overheidssector in de hele EU.
-
februari 2024
De BDTI Kitchen Newsletter wordt gelanceerd en levert maandelijks BDTI-nieuws, evenementen en inzichten in data-analyse in de publieke sector.
-
maart 2024
BDTI-promotiemateriaal wordt vertaald in alle 24 Europese talen.
-
mei 2024
Stad Bochum, Duitsland: Een pilot om een machinaal leermodel te bouwen om een revolutie teweeg te brengen in de manier waarop de gezondheid van bomen wordt gemonitord en voorspeld in stedelijke gebieden.
Stad en Universiteit van Turku, Finland: Een gezamenlijke pilot om de analyse van verkeersstromen voor te bereiden om het openbaar vervoer te verbeteren door verschillende mobiliteitsgegevensbronnen te combineren met geodata.
-
juli 2024
BDTI Skills Studio lanceert workshops en webinars over verschillende onderwerpen van data-analyse, waardoor deelnemers praktische kennis en praktische ervaring kunnen opdoen.
De stad Napels, Italië: Een proefproject om stedenbouwkundige en mobiliteitsstrategieën te verbeteren door middel van geavanceerde analyses van gegevens over de openbare ruimte en mobiliteit.
-
oktober 2024
Het BDTI-team organiseert een workshop over hoe regio’s en steden kunnen profiteren van het hergebruik van overheidsinformatie voor innovatie tijdens de Smart Country Convention in Berlijn.
Stad van Arezzo, Italië: Een proefproject ter bevordering van datagestuurde besluitvorming om een gevoelige daling van de scores van ongevallen en gewonden in de stad te bereiken aan de hand van een grondige, overkoepelende analyse van een uitgebreide databank van gevaarlijke wegen en kruispunten in de gemeente Arezzo.
-
november 2024
Het BDTI-team organiseert tijdens de FARI-conferentie in Brussel een workshop over het belang van het hergebruik van gegevens voor de toekomst van steden en regio's.
-
januari 2025
Deelnemers aan de pilot presenteren hun casestudy's tijdens het virtuele BDTI Pilot Showcase-evenement.