UNA PIATTAFORMA PER IL MONITORAGGIO AMBIENTALE IN CLOUD Roberto Monsorno R. Monsorno

Transcript

1 Institute for Applied Remote Sensing Technology for Environmental Monitoring UNA PIATTAFORMA PER IL MONITORAGGIO AMBIENTALE IN CLOUD Roberto Monsorno 1

2 Overview Introduzione EURAC Esperienza e Futuro Ground Segment Monitoraggio Ambientale Integrato (MONALISA) Architettura: Private Upscalable Cloud Outlook 2

3 Introduzione EURAC Research European Academy of Bolzano 11 Research Institutes Institute for Applied Remote Sensing Integrated Environmental Monitoring in Mountain Regions 3

4 Ground Segment 4

5 Ground Segment Sistema di ricezione dati Antenna in banda X, dish 5,2 m (satelliti orbita polare NASA Aqua Terra Suomi NPP) 80 GB raw & Level0 Data / DAY Sistema di Archiviazione ed Elaborazione Archivi digitali in tecnologia mista NAS/SAN e Archivio LTO4 Storage servers Virtual Workstation/NRT Processing Cluster PDS modulare e scalabile Sistema di pubblicazione e disseminazione dati Basato su Eurac T SDI (WMS WPS CSW) GeoSpatal Catalog Service (Geonetwork) Automazione generazione Metadati tramite plug in technology Applicazioni WebGIS 5

6 Istituto Research RS data (satellite, airborne) and services in-situ data validation quality control engineering system integration optical, radar, ancillary data environmental measurements model creation and data integration application Risk and Vulnerability & Climate Change Receiving Station and Data Centre Land, Vegetation, Snow research on environmental dynamics in mountain regions development regional adapted geoapplications and services 6

7 Scale di monitoraggio Plot scale Landscape scale Mountain range scale Upscaling Downscaling 7

8 Monitoraggio Integrato Satellite Proximal Sensing Ground Measurements Optical RADAR MR HR VHR Modelling Validation Intgration Integrated Environmental Monitoring 8

9 Esigenze GB giornalmente ricevuti da Receiving Station EO Data provenienti da diverse fonti di fornitori: (ex. Landsat, Rapideye, Cosmo Skymed, ENVISAT; MeteoSWISS, Lidar) Storage Dati EO Remote, Proximal e Ground Sensing Necessità di scambiare dati con partners di ricerca Fornitura Dati (mappe) e servizi alla locale PA e Protezione Civile Accesso e Interrogazione del dato grezzo ed elaborato Elaborazione lunghe serie temporali Performance Elaborazione complesse e per NRT richiedono alte prestazioni 9

10 Architettura Storage Cluster eterogeneo e scalabile che combina High performance storage High capacity, low cost storage Trasferimento dato in modo trasparente Quando processo ad alte prestazioni è concluso il dato si sposta su storage freddo Un nuovo progetto che ne fa richiesta sposta il dato su storage ad alte prestazioni NO tape backup 10

11 Architettura - Performance EGPF DES DMI Processor Data Storage Wrapper Generic SDI DES Tasks HPC DMI Tape Cloud EURAC Generic Processor Framework: permette di assegnare attività di elaborazione in maniera dinamica, sfruttando tecnologie che utilizzano il calcolo parallelo (hadoop e MapReduce, MPI, Open MP, torque) Data Exchange Server multithreading task manager organizza i processi e assegna jobs a vari sottosistemi Data Management Interface: permette un facile interazione con i dati per predisporli alla fase di elaborazione, permettendo al gestione di storage distribuito e parallelo (OneFS, HDFS, Lustre) Java Based in-house developed applications 11

12 Architettura SDI ricerca, archiviazione, visione, download, e scambio di informazioni (dati) geografiche tra istituti di ricerca, PA, project partners e parti interessate 12

13 Eurac Cloud Platform 13

14 Outlook 14

15 Outlook Sentinel Data? AWS? Helix Nebula? EGI? 15

16 Footprint 16

17 Data Acquisition (Satellite Antenna or Environmental Sensors) DES Data Exchange Server WebGIS (s)ftp KML SDI EOS Data ARF Archive Facility PDS Data Exchange Server WMS WFS Metadata Catalogue OGC GML ebrim HMA RSP Test Remote Sensing Processor Node RSP RSP SNOW CSPP Suomi NPP Terascan MODIS Processor

18 Marc Zebisch 18