Progetto di ricerca e sviluppo Monitoraggio e trasparenza per il governo del territorio. Linked data e appalti pubblici

Transcript

1 Progetto di ricerca e sviluppo Monitoraggio e trasparenza per il governo del territorio Linked data e appalti pubblici Torino, 20 febbraio 2017

2 Descrizione del Progetto L esteso patrimonio informativo a disposizione della PA non dispiega tutte le sue potenzialità rispetto alle necessità di legge e alla nuova sensibilità sociale. Il governo del territorio, e in particolare l ambito opere pubbliche, è un aggregato di particolare interesse per verificare la possibilità di un salto tecnico e culturale nella gestione dei dati a questi fini. Il progetto affronta il tema dell integrazione tra dati raccolti nelle banche dati gestite dal CSI, dati pubblicati dagli enti piemontesi in adempimento di disposizioni di legge e altri, utilizzando l'approccio linked data e tecnologie semantiche, per l elaborazione e la rappresentazione di conoscenza dei fenomeni del territorio. È stato svolto con la collaborazione dell Osservatorio Regionale dei contratti pubblici, con il contributo di società specializzate (vedi servizio ContrattiPubblici.org ). 2

3 Obiettivi Strutturare ed arricchire i dati raccolti da Osservatorio Regionale ed ANAC, al fine di migliorare la rappresentazione del contesto degli appalti pubblici, sia per gli addetti ai lavori sia per il cittadino, con maggiore trasparenza Approfondire tecniche di discovery ed analisi dei dati, per un miglior monitoraggio e per una più efficace rilevazione dei fenomeni del territorio Valutare l ampliamento dello spettro delle informazioni, collegando altri dati relativi al dominio delle imprese, della PA e statistici e studiare un modello che possa essere esteso ed eventualmente impiegato a livello nazionale 3

4 Risultati ottenuti Linked data ed altre tecnologie semantiche possono contribuire a strutturare ed arricchire la conoscenza relativa ad un dominio specifico realizzazione di un servizio prototipale, utilizzabile da parte dell'osservatorio ai fini del reporting periodico per la rappresentazione live ed online dei dati in materia di appalti pubblici, trasparenza e anticorruzione sperimentazione di nuove metodologie di esplorazione e ricerca, attraverso strumenti di interrogazione con funzionalità del web semantico sperimentazione di interoperabilità con altre banche dati, attraverso collegamenti con fonti di dati open e linked valutazioni sul miglioramento della qualità dei dati, anche attraverso la realizzazione di una banca dati terza con applicazione di correttivi, utilizzata come base per le statistiche 4

5 Possibili ricadute Favorire la valorizzazione del patrimonio informativo pubblico e facilitare comprensione, consapevolezza e condivisione sulla materia, a cittadini e operatori economici sul territorio, mediante una divulgazione chiara, oggettiva e semplice del complesso quadro dei fenomeni riferiti agli appalti pubblici Supportare più efficacemente la PA nel monitoraggio degli interventi e della spesa, anche in relazione ai sempre più articolati adempimenti di legge ed al rispetto della legalità Impiegare linked data e tecnologie semantiche (raccomandate dall'agid per l'esposizione di dati aperti) e migliorare i servizi di data analytics e discovery Utilizzare la Smart Data Platform, non solo come storage delle informazioni da trasformare, ma eventualmente anche per la gestione di linked data 5

6 Possibili ulteriori attività Estendere il modello e lo spettro delle informazioni collegate, ampliando la scala territoriale di riferimento Valutare la produzione ed esposizione di dati in formato linked, nonché l eventuale integrazione con dati europei Studiare e applicare tecniche per il miglioramento della qualità dei dati (data cleaning, machine learning) Evolvere ed estendere gli studi e le elaborazioni, focalizzando aspetti specifici come: anticorruzione e legalità (es. esplorazione fenomeni imprese, subappalti e flussi finanziari, indicatori di legalità, varianti) correlazione e impatto delle disposizioni normative sugli andamenti degli appalti decisioni, programmazione e scenari di impatto sul territorio (es. opere incompiute) Coinvolgimento di un maggior numero di stakeholder (es. MEF, DIA) 6

7 Criticità e punti di valore riscontrati Attualmente i dati considerati sono poco omogenei (per cui l ambizione è quella di scalare a livello nazionale) e non sempre attendibili (occorre trovare tecniche per migliorarne la qualità) I linked data utili sono ancora pochi (ma esistono alcuni ambiti specifici nei quali sono disponibili in formato open, es. opencup) Le competenze relative ai linked data non sono ancora molto diffuse e la documentazione disponibile è carente In compenso, utilizzare linked data consente di: fruire di dati disponibili (LOD Cloud), senza la necessità di importarli nei propri sistemi (potendoli semplicemente «interlinkare»), beneficiando della possibilità di averli sempre aggiornati alla fonte utilizzare ontologie (vocabolari, concetti e relazioni) per definire la semantica del grafo dei dati trattati ampliare il perimetro di fonti dati ed estendere le possibilità di esplorazione e estrazione di conoscenza 7

8 Materiale a supporto 8

9 Banca dati «terza» - Banca dati normalizzata - Applicazione di correttivi Gare Lotti Banca dati OsservAppalti SIMOG Bandi Anagra fiche Contratti SOAP Prog. Triennale sui dati importati - I dati alla fonte rimangono inalterati - Contiene il sottoinsieme dei dati del sistema Osservatorio che risulta necessario e sufficiente per descrivere i fenomeni e rappresentare il contesto di interesse - Può contenere in forma strutturata dati che alla fonte (SI Oss.) sono contenuti all interno di altri (es. nell oggetto)

10 Ipotesi progetto R&S LOD Synapta SIMOG SOAP LOD data visualization SmartCig OsservAppalti Piemonte trasformazione LOD - contratti pubblici HUB SDP CSI LOD cloud 10

11 Metodologie di ricerca definizione ontologia Esito Lotto Contratto CIG Procedura di gara Avviso Bando Stapp Imprese pdf Programmazione Progetti Opere CUP

12 Metodologie di ricerca definizione ontologia Esito OPEN BILANCI Lotto Contratto CIG OSS. REGP - ANAC (XML) Procedura di gara OSS. REGP OSS. REGP INDICE PA Avviso Bando Stapp Imprese pdf Programmazione INFOCAMERE - CERVED Progetti Opere CUP OSS. REGP OPEN CUP

13 Iniziative di interoperabilità e interazione con altre Banche Dati Strumenti di interrogazione per reperire e usufruire di OPEN o LINKED DATA Progetto OsservAppalti Piemonte XML 190 ISTAT Non importi perché ancora errori che rendono il dato poco attendibile

14 Linked open data (fonti open o proprietarie) OPEN BILANCI OPEN CUP AvcPass BDAP 14

15 Es. di grafo dei subappalti