ENEA-GRID: novità per l'amministrazione della cella AFS enea.it e l'utility WARC

Transcript

1 ENEA-GRID: novità per l'amministrazione della cella AFS enea.it e l'utility WARC G. Bracco

2 Contenuto Le applicazioni Web per l'amministrazione AFS, utenti e progetti Server rs2ced: applicazioni WARC e AMACA Le novità di WARC La struttura dello spazio dati AFS: volumi di backup home utenti Cenno ad uno strumento per il test di rete

3 Le applicazioni Web WARC: Web portal of the ARC Tool WARC fornisce una interfaccia Web per l'amministrazione di utenti e progetti in un ambiente basato su OpenAFS e Kerberos 5. L'applicazione è sviluppata da CASPUR in stretto legame con ENEA AMACA: AFS Memorize And Check Application AMACA è una applicazione web che fa da interfaccia ad un database storico di AFS, basato su MySQL. AMACA permette di fare controlli sulla struttura della cella AFS e fornisce anche informazioni utili per l'amministrazione: segue la presentazione di A. Rocchi Documentazione su entrambe le utility:

4 rs2ced.frascati.enea.it due applicazioni Web: WARC e AMACA

5 WARC: le novità del 2007

6 Novità WARC: host keytab (1) comandi per la gestione dei host keytab

7 In kerberos 5 il keytab file contiene l'informazione necessaria alla autenticazione e nel caso di un host keytab tale informazione si riferisce ad un nodo di calcolo o di servizio. A WARC sono state aggiunte tre opzioni per la gestione dei host keytab Create host in K5 DB Delete host in K5 DB Info Host Novità WARC: host keytab (2) I keytab file sono creati in AFS e WARC fornisce il nome del PATH in modo che l'amministratore sia in grado di accedere al keytab file. L'accesso a tale PATH in AFS è ristretto agli amministratori di AFS/WARC. Il keytab file è utile ad esempio per configurare l'accesso ssh e va installato sul host in /etc/krb5.keytab.

8 Novità WARC: opzioni K5 (1) Le opzioni per la gestione di Account e Password sono state aggiornate per Kerberos 5

9 Novità WARC: opzioni K5 (2) Con il passaggio a Kerberos 5 le opzioni di gestione di account e password sono le seguenti: Change Password Check Account Expiration Date Set Account Expiration DAte Password policies Ticket life time Password expiration Ticket renewal time Da notare che non è supportata l'opzione di lock dell'account dopo un certo numero di tentativi di autenticazione falliti.

10 Novità WARC: opzioni utente (1) nuove opzioni: Delete (Force) Set Remote Quota

11 Novità WARC: opzioni utente (2) L'opzione User Delete (Force) permette di cancellare ogni elemento appartenente all'utente (entry K5, entry PTS, mount point,...) senza nessun controllo di struttura: serve a ripristinare la situazione dopo che la creazione di una utenza non è andata a buon fine per qualunque motivo. Viene cancellato anche il volume utente user.userid. La normale cancellazione di un utente esistente deve essere fatta con l'opzione User Delete. In tal caso il volume utente NON viene cancellato ma viene rinominato d.user.userid.ptsid L'opzione Set Remote Quota permette di cambiare la quota di volumi remoti dell'utente. Si ricorda che il volume remoto corrisponde a spazio allocato su un fileserver che risiede in un sito diverso da quello del volume user.userid. Il mount point è: ~/rem/sito Il nome del volume: sito.remote.userid [~carciofo/rem/fra] [fra.remote.carciofo]

12 Novità WARC: opzioni progetti (1) gestione delle copie RO remote per i volumi dedicati ai progetti

13 Novità WARC: opzioni progetti (2) Sono state aggiunte le opzioni per la gestione delle copie Read Only di volumi dedicati a progetti: Create Remote RO Volume Delete Remote RO Volume Ovviamente dopo la creazione/rimozione di una copia RO è necessario che venga effettuato il release del volume in modo da allineare la situazione. Il release avviene utilizzando l'opzione, già disponibile: Release Project Volume Da notare che nel menu a tendina per la selezione del volume da rilasciare è stata aggiunta la dizione project root volume per selezionare il volume principale del progetto, rispetto ai volumi di sottoprogetti

14 Novità di WARC: Log File /Help Il file di Log di WARC è stato semplificato cercando di mantenere il log dei soli comandi che effettuano variazioni in AFS eliminando la traccia dei comandi di query. Su qualche finestra è adesso disponibile il tasto HELP ad es: cruser

15 Novità di WARC: mailing list Dopo la riunione di Febbraio 2007 è stata definita la mailing list sul server di posta elettronica di Frascati e gli utenti ENEA-GRID vengono iscritti automaticamente all'atto di creazione dell'utenza con WARC. Per gli utenti pregressi molti sono stati aggiunti a mano ed attualmente il totale di utenti iscritti è circa 400. Allo stesso tempo era stato creato anche gridhelp@enea.it che dovrebbe essere utilizzato per il supporto ma l'utilizzo è stato estremamente limitato.

16 La struttura dello spazio dati

17 L'organizzazione dello spazio AFS in enea.it è basata su due tipi di vista dello stesso insieme di dati, tramite un doppio sistema di mount point dei volumi AFS: una vista per siti lo spazio dati una vista per contenuti: utenti, progetti, software La vista per siti (gruppi) corrisponde alla divisione di responsabiltà amministrativa che WARC permette di implementare ed è utilizzabile anche per scopi di amministrazione [ad es. backup di sito a livello di file] 6 siti geografici: bri, bol, cas, fra, por, tri /afs/enea.it/bri/.. /afs/enea.it/bol/.. /afs/enea.it/cas/.. /afs/enea.it/fra/.. /afs/enea.it/por/.. /afs/enea.it/tri/.. La vista per contenuti fornisce una visione unitaria dello spazio dati in AFS. /afs/enea.it/user/.. /afs/enea.it/project/.. /afs/enea.it/software/...

18 Ogni sito ha 4 directory principali: /afs/enea.it/fra/ user/ remote/ arcproj/ system/ vista per siti user/ contiene le HOME degli utenti sul sito; sono i mount point dei volumi user.userid remote/ contiene il mount point di volumi sito.remote.userid dedicati ad utenti remoti; ad es. il volume fra.remote.celino; tale volume è montato anche in $HOME/rem dell'utente. arcproj/ contiene tutti i mount point dei volumi di progetto gestiti da WARC la cui copia RW è situata nel sito. system/ area dati per esigenze di sistema specifiche del sito

19 Nella directory principale della cella 4 directory sono gestite da WARC: /afs/enea.it/ user/a/, b/, c/,...,z/ backup/ user/, arcproj/ arcproj/ project/ software/ user/ backup/ arcproj/ project/ software/ contiene tutte le HOME degli utenti riuniti in sottocartelle per ogni lettera alfabetica: ad es. /afs/enea.it/usr/c/carciofo è il mount point del volume user.carciofo contiene i mount point dei volumi di backup utenti/progetti contiene i mount point di tutti i volumi di progetto gestiti con WARC contiene anche i mountpoint dei progetti WARC contiene anche i mountpoint dei progetti WARC di tipo software vista per contenuti

20 mount point dei volumi di backup /afs/enea.it/ backup/user/ backup/arcproj/ Volumi./backup/user/c/carciofo./backup/user/c/carciofo.rem/fra./backup/arcproj/minnilaps./backup/arcproj/minnilaps.lgalgb --> user.carciofo.backup --> fra.remote.carciofo.backup --> p.fra.mnlaps.backup --> p.fra.mnlaps.lgalgb.backup da notare che su tutti i file server deve essere generata la copia di backup per i volumi aventi prefisso: user.* sito.remote.* p.sito.* Nota: in AFS la navigazione di un ramo di file system di backup non segue lo stesso criterio di quello RO e questo puo' creare confusione (baco?)

21 home degli utenti Nel mese di luglio 2007 è stata fatta la modifica che ha allineato alla nuova struttura dello spazio dati anche le HOME dell'utenza vecchia Per il momento i vecchi path basati sulla struttura /afs/enea.it/vecchio_sito/unità_organizzativa/nome_utente sono ancora disponibili ma a questo punto lo schema di mount point della vecchia struttura puo' essere eliminato, previo avviso agli utenti.

22 strumento per test di rete (1) E' stato installato a Frascati sulla macchina Linux depos.frascati.enea.it un kernel che permette di utilizzare il test di rete sviluppato in ambito Internet2 NDT Network Diagnostic Tool Da qualsiasi macchina client si puo' controllare la connettività bidirezionale con depos.frascati.enea.it attraverso un applet java: oppure via linea di comando (linux): web100clt -l -n depos.frascati.enea.it >>>> Utilizza la porta:7123 <<<<

23 strumento per test di rete (2) ~%web100clt -l -n depos.frascati.enea.it Testing network path for configuration and performance problems -- Using IPv4 address Checking for Middleboxes Done checking for firewalls Done running 10s outbound test (client to server) Mb/s running 10s inbound test (server to client) Mb/s The slowest link in the end-to-end path is a 45 Mbps T3/DS3 or WiFi 11 a/g subnet Warning: Old Duplex-Mismatch condition detected. Server 'depos.frascati.enea.it' is not behind a firewall. [Connection to the ephemeral port was successful] Client is not behind a firewall. [Connection to the ephemeral port was successful]

24 strumento per test di rete (3) Web100 Detailed Analysis Web100 reports the Round trip time = msec;the Packet size = 1448 Bytes; and There were 88 packets retransmitted, 482 duplicate acks received, and 518 SACK blocks received Packets arrived out-of-order 27.48% of the time. The connection stalled 1 times due to packet loss. The connection was idle 0.22 seconds (2.20%) of the time. This connection is network limited 99.92% of the time. Excessive packet loss is impacting your performance, check the auto-negotiate function on your local PC and network switch... Il test è stato svolto 21/11/2007 campus03.trisaia.enea.it