Calcolo scientifico all IRA

Transcript

1 Dall ultima slide dello scorso anno. Calcolo scientifico all IRA Sono ancora sufficienti le Work Station? Rischiamo di perdere il treno del Grid e del calcolo parallelo?

2 Risorse di Calcolo all IRA - 78 Sistemi Privati - 20 Pubblici, Studenti, Ospiti Su rete a 100 Mbit/s - 18 Macchine di servizio - 30 Apparati di rete (router, switch) Su rete a 1 Gbit/sec Cluster Mach-16 ( 16CPU ) Grid Computing Element ( 8 CPU )

3 Cosa sta cambiando sul mercato? Dal 1995 al 2004 : CPU da 100 MHz a 2400 MHz Network da 10 Mbit a 100 Mbit Dischi da 400 MBy a 32 Gby Dal 2004 al 2006 : CPU da 2400 MHz a 3600 MHz (< 4G ) * Network da 100 Mbit a 1 Gbit (10G) Dischi da 32 GBy a 750 Gby * Ora si punta sul Dual core e Quad core

4 Il miglior sistema per la riduzione dati astronomici (Aips & C) e.. una Work Station con tanto disco locale. Helicon (Amd 3000+) Net: 100 Mbit/s Su disco locale : 64 AipsMark Su disco di rete : 16 AipsMark. o un sistema con disco di rete? Gaia (Xeon 3.2GHz) Net: 1 Gbit/s Su disco locale : 70 AipsMark Su disco di rete : 44 AipsMark

5 Perche tanto interesse per i dischi di rete? Si possono realizzare grandi aree di lavoro (alcuni terabyte) mettendo dischi in parallelo Si puo garantire sicurezza senza raddoppiare lo spazio disco (RAID 5) e bk centralizzati Si rendono indipendente le Work-Station dalle aree di lavoro (condivisione, sostituzione) E il modo di realizzare CLUSTER di calcolo

6 Network Attachment Storage (NAS) Un sistema collegato a Luna e Terra dal 1998 ( Il Raid per gli amici) 300 GBit su rete a 100 Mbit Il nuovo sistema NAS1 su rete a 1 Gbit Primo set di 8 dsk: 1.5 TBy /iranet/home2 /iranet/virmos /DATA/NAS1_1 NAS1_6 Secondo set di 8 dsk: 2.4 TBy /iranet/xyz

7 Back_up e trasporto dati I sistemi a nastro stanno diventando obsoleti e costosi Un nastro ha capacita di Giga Conservare i DAT per lettura vecchi nastri e compatibilita con esterno. Sistema centrale di Back_up su disco per aree preziose (/home /mail servizi in genere ) Distribuire Dischi-USB ( GBy) per salvataggi & trasporto dati personali (no lavoro!!)

8 Interventi sulla rete Andare verso la rete a 1 Giga dando la priorita a : Macchine di Servizio e sistemi comuni (completato) NAS e Cluster di Calcolo (completato) Macchine pubbliche per studenti Work Station personali Si intende reralizzare una stella ottica a 1 Giga per la rete di area (condivisione del calcolo? )

9 Man di Bologna Rete complessiva Collegamenti in fibra spenta (1G, 10G)

10 Sistemi operativi Sono stati spenti tutti I sistemi Dec- Alpha Oltre ad alcune macchine HP (geo) e un paio di Mac abbiamo OS Windows e LINUX Microsoft ha annunciato Vista che sostituira Win XP. Ne parleremo tra 2 anni :-} Distribuzioni LINUX FEDORA per le Work Station (aggiornato) Scientific Linus per i server (stabile)

11 Macchine di servizio W1 Web, ftp D1 Dns, YP, Time server, dhcp, gatekeeper Iranet Samba server M1 Mail e Liste H1 Home e SW via NFS DB Cataloghi e archivi Tape-srv Nastri (e fedora repository) Server2000 Window (desktop remoto)

12 Altri sistemi comuni Gaia Calcolo, accesso e back_up C1, C2 Riserve utilizzabili x calcolo Luna Terra In via di spegnimento SPENTO Raid -300 Giga NAS - 1 Tera Back-Up In dismissione Attivo da potenziare Da acquistare

13 Cluster di Calcolo MACH - 16 AMD Athlon , 2400 MHz, Cache 512KB, Memoria 2 Giga SO: Fedora FC3 MPI: LAM Comp. Portland : speedup X 4-6 In produzione!!!! Potenziato nella memoria In acquisto unita di controllo e memoria di massa

14 Cluster di Calcolo x Grid (Progetto Inaf-Grid) 1 -- Computing Element 1 -- Storage Element 4 -- Working Nodes : 2 CPU Intel Xeon, 3.0 GHz, Cache 2048 KB, Memoria 2 Giga Nave scuola!!!! Non ancora registrato nella griglia

15 Mail e SPAM Corsa agli armamenti Grey-list Fine ira.cnr.it

16 Voice Over IP Telefonate/miniconf via rete Skype & C : soluzioni individuali OS: Win, Linux, Mac Cuffie/microfoni disponibili Conferenze Video & Chat Pc a Pc = 0 Pc a Fisso = circa 1 E/ora Pc mobile = troppo

17 Voice Over IP Come via alternativa alle telecoms Progetti GARR CNR INAF -.

18 Voice Over IP CNR: Roma Pisa Cosenza INAF: Bologna Area Arcetri Trieste Altri: Cineca ** INFN Universita Siti esteri Area di Bologna 0 Telefonata normale via telecom 2 Tenta Telefonata via IP ** radice 0039

19 Attivazione della Fibra Medicina -- Nodo Garr di Bologna Nel Maggio 2005 e stata posata una fibra ottica tra Medicina e il Radiotelescopio ( percorso di 6 Km)

20 Attivazione della Fibra Medicina -- Nodo Garr di Bologna Sul percorso tra Medicina e Bologna doveva essere messo a disposizione una coppia di fibre tra quelle della dorsale di Lepida sulla via breve 40 Km Mancanza di permessi hanno bloccato i lavori a Budrio A febbraio 2006 abbiamo ottenuto un percorso di back_up (120 Km), ma con un ripetitore a Faenza.

21 Attivazione della Fibra Medicina -- Nodo Garr di Bologna La presenza del ripetitore impedisce l uso del Jumboframes (pacchetti da 9000 bytes invece di 1500) Su percorso diretto Med-Bo velocita sostenuta di 1 Gbit/s Dopo tuning della rete su percorso Med-Jive picchi di 750 Mbit/s Su lunghe distanze impossibile mantenere velocita costanti superiori ai 400 Mbit/sec (256 Mbit per e-vlbi) Medicina una delle 6 antenne del e-vlbi europeo

22 The e-evn & Pan-European Research Network GEANT2

23 First Open Observations (March 2006) were a bit of a disaster: Cygnus X-3 was going through one of its brightest recorded flares (many Jansky) Bug in Correlator software resulted in no fringes, no useful data! Second Open Observations (April 2006) went well But Cygnus X-3 quiescent (a few mjy) First e-vlbi Target of Opportunity Observations (May 2006, Cygnus X-3), Tudose et al. (in prep). Cygnus X-3 again flaring!

24 First e-evn Astronomy Publications

25 1 Gbps 1 Gbps (2007/8) 1 Gbps (200?)

26 Premi e ricadute del e-vlbi e-vlbi project wins IDEA award: The e-vlbi project, led at JIVE, has received a prestigious award for its progress in high speed data transfer at the inaugural IDEA awards ceremony held on April 21st e-vlbi sta stimolando lo studio di piu efficienti protocolli IP e-vlbi sara una delle prime applicazioni che utilizzera gli switch ottici su scala continentale

27 EXPReS Un progetto FP6 dei membri JIVE per potenziare l infrastruttura di rete e-vlbi Richieste INAF Medicina: Apparati di trasmissione da 10 Gigabit/sec Noto: Progetto di fattibilita Secondo MARK V per E-VLBI off line SRT Apparati di trasmissione da 10 Gigabit/sec

28 Correlatore nazionale Medicina SRT Noto + Resto del mondo Correlazione hardware Correlazione software real time : richiede calcolo di un fattore superiore oppure software molto furbo Esperienza che serve per Alma Ska. 6 Novembre meeting IRA

29 Griglie Computazionali: GRID Mettere a disposizione risorse di calcolo a livello globale Chi puo usare che cosa e come Stessi problemi per accedere a IBM360 negli anni 70 Soluzioni molto simili :-} Indotto: Sistema di autenticazione (chi sei?) Nodi di calcolo (cluster di calcolo efficienti) Identico modo di operare (unico linguaggio)

30 Certificati per il Grid Costituita Registration Authority INAF-BO La RA garantisce che siete proprio Voi alla Certification Authority INFN-GARR per ottenere i certificati digitali Con i certificati potete firmare e crittografare e usare le risorse grid grid locali e globali attraverso una grid user interface ALLA PROSSIMA PUNTATA.