Remote file access sulla grid e metodi di interconnesione di rete

Transcript

1 Remote file access sulla grid e metodi di interconnesione di rete M. Donatelli, A.Ghiselli e G.Mirabelli Infn-Grid network 24 maggio 2001

2 Remote file access sulla grid Studio, progettazione e implementazione di un meccanismo trasparente alle applicazioni per accedere ai file sulla grid. I meccanismi finora implementati sono basati su: Applicazioni client server (browser, FTP..) con disponibilita anche di API. File system distribuiti tipo NFS, AFS. In questo caso tutti i nodi condividono lo stesso file system. WP7 2

3 La proposta e di potenziare le funzionalita delle primitive per l accesso al virtual file system del sistema operativo LINUX per accedere ai file appartenenti a qualunque file system locale o remoto. application Open file Virtual file system Grid file I/O Local file I/O network Server Open file Virtual file system Local file I/O WP7 3

4 Approccio architetturale FTPfs: integrazione del meccanismo del virtual file system con il protocollo FTP Studio dell architettura e delle funzionalita Caratteristiche implementative misure di efficienza di questo software GSIFTP: globus FTP con security, flussi paralleli e accesso ai parametri di flusso del TCP Studio del protocollo di trasporto Studio della implementazione della security WP7 4

5 FTP File System Progetto open source Nasce con l idea di trasferire parti di files multimediali permette di montare sul VFS delle directory FTP e di accedervi Permette di accedere ai server FTP presenti su qualunque host attraverso le system call di Linux E ancora in via di sviluppo Permette l accesso multiplo e la condivisione degli stessi file Permette di accedere ad una parte del file Supporta funzionalita semplici di scrittura lettura E compatibile con il kernel di Linux WP7 5

6 Il Network File System permette di vedere un FS esterno e di montarlo su una macchina remota come se fosse un disco locale Ottimizzato per manipolare I file system remoti Ha una struttura di tipo client/server Supporta i protocolli di rete TCP e UDP Gestisce le socket Ha dei meccanismi di caching integrati Supporta il locking dei files in scrittura La versione 3 presenta delle caratteristiche interessanti (scrittura asincrona, supporto di files molto grandi e caching con blocchi larghi ) WP7 6

7 NFS la sicurezza Possibilità di utilizzo dei meccanismi di crittografazione DES (Data Encryption Standard) Supporto completo di Kerberos 4 Autenticazione in stile Unix Supporto delle Access Control List WP7 7

8 NFS- vers. 4 (il futuro) Integrazioni di funzionalita presenti in AFS e CodaFS Da AFS prendera I meccanismi di condivisione dei files, la gestione della sicurezza e un miglioramento delle prestazioni Da CodaFS aggiungera la possibilita di lavorare bene anche con I client disconnessi WP7 8

9 NFS vs FtpFS Confronto delle possibilita di manipolazione dei files remoti attraverso FTP oppure con NFS Trasferimento di interi files Accesso alla struttura interna dei files Gestione dei permessi Analisi dei meccanismi di autenticazione tra file systems appartenenti ad host remoti WP7 9

10 Soluzione 1 Proposta di integrazione tra FtpFS e GSIFTP con estensione alla funzionalita di remote file access con i meccanismi di security di grid. WP7 10

11 Aspetti correlati da studiare (1) Utilizzo del sistema di autorizzazione di Grid (GSI) Accesso al replica manager per mappare meta-file in file logici o fisici Interconnessione di rete per avere connessioni efficienti alla velocita del Gbps. Monitoraggio delle operazioni di rete Sintassi del file: grid://node/file name WP7 11

12 Aspetti correlati da studiare (2) Analisi delle prestazioni nel trasferimento dei files tra host locali e remoti Studio dell utilizzo dei meccanismi di trasporto piu opportuni a seconda della topologia della rete Ricerca ed eventuale integrazione delle caratteristiche presenti in altri progetti di trasferimento dati Studio dell evoluzione dei protocolli attuali compatibilmente con le specifiche di comunicazione di datagrid WP7 12

13 Programma di lavoro Studio di fattibilità 6 mesi G.Mirabelli (60%), A.Ghiselli(30%), M.Donatelli (50%) Progettazione 6 mesi Implementazione 6 mesi WP7 13