1. Il sistema Single Exit Point e la strategia
SDMX in ISTAT nell’ottica dell’Open
Data
Alessio Cardacino – Laura Vignola, ISTAT
Convegno SISVP – Roma, Università Europea
Sessione “DataGov e Open Data”
Università Europea 19-20 Aprile, Roma
2. Prendere decisioni:
SISAI
il ruolo della statistica
per la conoscenza Sommario
e la governance
•Il sistema Single Exit Point (SEP)
•La SDMX Reference Infrastructure (SDMX-RI) di
Eurostat
•Il progetto Single Exit Point in ISTAT
•Add-on della SDMX-RI sviluppati in ISTAT
Università Europea 19-20 Aprile, Roma
3. Prendere decisioni:
SISAI
il ruolo della statistica
per la conoscenza Il Sistema Single Exit Point
e la governance
Il percorso di digitalizzazione della Pubblica
Amministrazione, che esprime l'esigenza di
semplificazione dei processi amministrativi e di
trasparenza nel fornire le informazioni ai cittadini, sta
trovando un veicolo di rilevante efficacia nella pratica
dell'Open Data.
Una iniziativa dell’ISTAT verso l’Open Data: il Single
Exit Point
Università Europea 19-20 Aprile, Roma
4. Prendere decisioni:
SISAI
il ruolo della statistica
per la conoscenza Il Sistema Single Exit Point (Statistical Data and Metadata
SDMX - Caratteristiche
e la governance Exchange): Standard internazionale
per la condivisione e l'interscambio di
dati e metadati statistici
Un sistema generalizzato per la diffusione dei dati del
data warehouse I.Stat in formato SDMX via Web-
Service (in una logica machine-to-machine) ed
utilizzando un unico punto di accesso.
E’ basato sulla SDMX Reference Infrastructure
(SDMX-RI) prodotta da Eurostat.
Consente il bulk download dei dati statistici di
diffusione prodotti dall’ISTAT da parte di imprese,
istituzioni ed altre organizzazioni.
Università Europea 19-20 Aprile, Roma
5. Prendere decisioni:
SISAI
il ruolo della statistica
per la conoscenza La SDMX Reference Infrastructure di Eurostat
e la governance
Infrastruttura applicativa sviluppata da Eurostat per la
diffusione dei dati in formato SDMX via web-service da
parte dei vari NSI a partire dai loro database di
diffusione basata su:
• Una mappatura generalizzata dei dataset locali
secondo i costrutti SDMX (mapping)
• L’infrastruttura si basa su un database di registro
che contiene i Metadati SDMX relativi ai dati
disponibili
Università Europea 19-20 Aprile, Roma
6. Prendere decisioni:
SISAI
il ruolo della statistica
per la conoscenza L’SDMX RI - Vantaggi
e la governance
I dati e metadati contenuti nei database «locali» non
sono modificati né duplicati ma solamente mappati
sulle DSD SDMX
Dati relativi a differenti domini statistici e provenienti
da differenti database possono essere diffusi attraverso
un unico end-point in maniera trasparente per gli
utenti finali
L’infrastruttura permette una armonizzazione dei
metadati, oltre che una armonizzazione del flusso di
lavoro (alcune funzioni sono eseguite dagli statistici,
altre dallo staff IT)
Università Europea 19-20 Aprile, Roma
7. Prendere decisioni:
Prendere decisioni:
il ruoloSISAIstatistica
ilruolo della statistica
della
perla conoscenza
per la conoscenza SEP- Architettura funzionale e tecnica
ee la governance
la governance.
SDMX Data
Collectors
Load-Balancing Server
SDMX Reference
Infrastructure (modules
developed by ESTAT)
SDMX Web service 1 SDMX Web service 2 SDMX Web service 3
Mapping Assistant
Mapping
Store DB
Dissemination
RDBMS
Università Europea 19-20 Aprile, Roma
8. Prendere decisioni:
il ruolo della statistica
per la conoscenza
Strategia SDMX in ISTAT
e la governance
Fornitura dati alle
organizzazioni
internazionali e/o
nazionali
Diffusione Machine-to-
machine
Supporto agli utenti finali
Armonizzazione dei
contenuti
9. Prendere decisioni:
il ruolo della statistica
per la conoscenza Realizzazione di Add-on
e la governance
Agevolare l’utente nell’utilizzo di SDMX
Implementare nuove funzionalità non ancora previste
nella SDMX-RI riutilizzando codice già prodotto
Consentire l’utilizzo di dati in altri ambienti quali ad
esempio Excel
Università Europea 19-20 Aprile, Roma
10. Prendere decisioni:
SISAI
il ruolo della statistica
per la conoscenza Add-on della SDMX-RI sviluppati in ISTAT
e la governance
DATI
• Applicazione desktop per il download di grossi file
di dati
• Plug-in Excel per lavorare il dati in Excel
METADATI
• Aggiornamento tramite Web Service dei metadati
strutturali
• Applicazione web per la navigazione dei metadati
strutturali
11. Prendere decisioni:
SISAI
il ruolo della statistica
per la conoscenza Il SEP nella diffusione dati dell’ISTAT
e la governance
SDMX Data
Collectors Data User
SDMX Reference
Infrastructure (modules Load-Balancing Server Desktop
developed by ESTAT) App.
WS1 WS3
WS2 WEB
GUI
SDMX Registry
(Mapping Store)
Plug-in
Mapping Assistant Excel
category
mapping
scheme
dataflows, constrains ..
classif./
concepts
codelist DSD
I.Stat
Università Europea 19-20 Aprile, Roma
12. Prendere decisioni:
il ruolo della statistica
per la conoscenza
e la governance Il «Pianeta» Single Exit Point
Sviluppo software per
utenti finali (Windows User Group SDMX-RI
client, Excel plug-in,…) (Eurostat)
Sviluppo nuove
funzionalità per il
Registry (Registry web OECD SIS-CC
GUI,Submit Structure
method,..)
Single
Infrastruttura
tecnologica
Exit Census Hub
Point
SDMX Registry
STS - OECD
Metadati strutturali dei
Mapping Store
dati aggregati
(Registry)
Diffusione MtoM Diffusione MtoM dati
dati censuari I.Stat (Banca D’Italia, JP
Morgan)
Università Europea 19-20 Aprile, Roma
13. Prendere decisioni:
il ruolo della statistica
per la conoscenza
e la governance Il SEP nell’ottica dell’Open Data
Dati accessibili da tutti (istituzioni,imprese ed anche privati
cittadini) riutilizzabili in altri contesti digitali e strutturati in modi
differenti secondo le richieste dei data consumer.
Possibilità di reperire anche i metadati tramite le medesime
modalità di accesso ai dati.
Scalabilità delle soluzioni per poter accedere ai dati (utilizzo dei
client messi a disposizione per lo scarico excel o csv o realizzazione
di software per il download e l’importazione dei dati)
Dati e metadati sempre aggiornati, senza il problema da parte degli
operatori ISTAT di dover pubblicare via internet nuovi file di dati
Università Europea 19-20 Aprile, Roma
14. Prendere decisioni:
SISAI
il ruolo della statistica
per la conoscenza Contatti
e la governance
Alessio Cardacino alcardac@istat.it
Dario Camol camol@istat.it
Andrea Stanco stanco@istat.it
Francesco Rizzo rizzo@istat.it
Laura Vignola vignola@istat.it
Università Europea 19-20 Aprile, Roma
Editor's Notes
The objectives of ESSnet on SDMX phase II are the same of those of phase I: the implementation of SDMX at international and National level; the further development of the SDMX technical standards used for data and metadata; the further development of SDMX Content-oriented Guidelines; the evaluation adaptation and further development of SDMX IT architecture and IT tools and finally the increase of SDMX capacity and knowledge at all levels. In phase II the work that will be done will concern the two last points of the objectives
The objectives of ESSnet on SDMX phase II are the same of those of phase I: the implementation of SDMX at international and National level; the further development of the SDMX technical standards used for data and metadata; the further development of SDMX Content-oriented Guidelines; the evaluation adaptation and further development of SDMX IT architecture and IT tools and finally the increase of SDMX capacity and knowledge at all levels. In phase II the work that will be done will concern the two last points of the objectives
The objectives of ESSnet on SDMX phase II are the same of those of phase I: the implementation of SDMX at international and National level; the further development of the SDMX technical standards used for data and metadata; the further development of SDMX Content-oriented Guidelines; the evaluation adaptation and further development of SDMX IT architecture and IT tools and finally the increase of SDMX capacity and knowledge at all levels. In phase II the work that will be done will concern the two last points of the objectives
The objectives of ESSnet on SDMX phase II are the same of those of phase I: the implementation of SDMX at international and National level; the further development of the SDMX technical standards used for data and metadata; the further development of SDMX Content-oriented Guidelines; the evaluation adaptation and further development of SDMX IT architecture and IT tools and finally the increase of SDMX capacity and knowledge at all levels. In phase II the work that will be done will concern the two last points of the objectives
The objectives of ESSnet on SDMX phase II are the same of those of phase I: the implementation of SDMX at international and National level; the further development of the SDMX technical standards used for data and metadata; the further development of SDMX Content-oriented Guidelines; the evaluation adaptation and further development of SDMX IT architecture and IT tools and finally the increase of SDMX capacity and knowledge at all levels. In phase II the work that will be done will concern the two last points of the objectives
The objectives of ESSnet on SDMX phase II are the same of those of phase I: the implementation of SDMX at international and National level; the further development of the SDMX technical standards used for data and metadata; the further development of SDMX Content-oriented Guidelines; the evaluation adaptation and further development of SDMX IT architecture and IT tools and finally the increase of SDMX capacity and knowledge at all levels. In phase II the work that will be done will concern the two last points of the objectives
The objectives of ESSnet on SDMX phase II are the same of those of phase I: the implementation of SDMX at international and National level; the further development of the SDMX technical standards used for data and metadata; the further development of SDMX Content-oriented Guidelines; the evaluation adaptation and further development of SDMX IT architecture and IT tools and finally the increase of SDMX capacity and knowledge at all levels. In phase II the work that will be done will concern the two last points of the objectives
The objectives of ESSnet on SDMX phase II are the same of those of phase I: the implementation of SDMX at international and National level; the further development of the SDMX technical standards used for data and metadata; the further development of SDMX Content-oriented Guidelines; the evaluation adaptation and further development of SDMX IT architecture and IT tools and finally the increase of SDMX capacity and knowledge at all levels. In phase II the work that will be done will concern the two last points of the objectives
The objectives of ESSnet on SDMX phase II are the same of those of phase I: the implementation of SDMX at international and National level; the further development of the SDMX technical standards used for data and metadata; the further development of SDMX Content-oriented Guidelines; the evaluation adaptation and further development of SDMX IT architecture and IT tools and finally the increase of SDMX capacity and knowledge at all levels. In phase II the work that will be done will concern the two last points of the objectives