architettura, flusso dei dati, caricamento e feedback Servizi per il Ministero dell'istruzione, dell'università e della Ricerca Andrea Mazzoni 28/06/2012
Sommario Architettura del sistema Le spedizioni La carriera dello studente Il processo di caricamento Feedback atenei Dettaglio spedizioni 2
Viene resa operativa con il D.M.9/2004 L ANS è un sistema informativo per la raccolta e l elaborazione dei dati di tutti gli studenti che hanno usufruito della riforma universitaria, attuata con il D.M.509/99 L operatività del sistema è stata raggiunta per fasi successive Settembre 2004: invio dei primi dati da parte degli atenei 31 gennaio 2005: primo caricamento 3
Raccolta dati Spedizioni Architettura ANS Atenei http://anagrafe.miur.it upload CINECA Sistemi gestionali interni dell ateneo Anagrafe Nazionale Studenti feedback 4
Richieste dati ANS Solo per il primo semestre del 2012 sono state elaborate da CINECA circa 50 richieste di dati ANS,provenienti da: MIUR: Direzione generale per l'università, lo studente e il diritto allo studio universitario, Ufficio III (Dott.sa Mazzaglia), Ufficio V (Dott.sa Marsiglia) Direzione generale per gli studi, la statistica e i sistemi informativi, Ufficio VII (Dott.ssa Barbieri) ANVUR (Dott. Ancaiani) Altri enti autorizzati MIUR Singoli Atenei Singoli Comuni Fondazione Agnelli Portale dello studente (Universitaly) 5
Le spedizioni Gli atenei inviano le informazioni attraverso spedizioni che riguardano singoli eventi della vita degli studenti per ogni anno accademico Le spedizioni attese sono suddivise in 7 tipologie Spedizione 1: Avvio carriera Spedizione 2: Titoli di studio Spedizione 3: Dettaglio debiti/crediti formativi Spedizione 4: Eventi di carriera Spedizione 5: Posizione amministrativa Spedizione 6: Ottenimento crediti/diminuzione debiti formativi Spedizione 7: Chiusura carriera 6
La carriera dello studente Avvio nuova carriera Evoluzione della carriera Variazione della posizione amministrativa Verifica della didattica Conseguimento titolo e/o uscita dal sistema Spedizioni 1, 2, 3 per ogni Anno Accademico Spedizione 7 Immatricolazioni Prosecuzione studi Rientro nel sistema dopo rinuncia Spedizione 4 Spedizione 5 Spedizione 6 Iscrizioni annuali Passaggi di corso Variazioni (sede, classe ecc,) Trasferimenti Contributi dovuti Contributi pagati Variazioni anagrafiche Borsa di studio Piano di studio Ottenimento CFU Annullamento CFU Esami Laurea Rinuncia Decadenza Decesso 7
Il processo di caricamento Gli atenei posso fare upload dei file spedizione dal sito dell osservatorio (https://osd.cineca.it) in qualsiasi momento Esiste uno scadenziario, pubblicato sull osservatorio, al quale gli atenei si devono attenere Ad ogni scadenza, tipicamente mensile, viene aggiornata la banca dati ANS prendendo, per ogni spedizione/a.a i dati più recenti inviati dagli atenei 8
ATENEI CARICAMENTO Il processo di caricamento upload Immatricolati feedback Staging Area Iscritti Crediti Trasferimenti Laureati. Principali dimensioni di analisi dei data mart: Persona Carriera Anno Accademico Didattica Data Inserimento Data Immatricolazione Data Iscrizione. Titoli Studio 9
La banca dati ANS in cifre File inviati dagli atenei: 220.000 file inviati (compresi anche i test) 294 GB Tempo di caricamento 6gg macchina (Oracle 11g r1 su AIX 6.1 HACMP) Banca dati ANS 1.260.709.464 record totali in 1.610 tabelle 164GB dati e 160GB indici Data marts 90 Atenei 11 anni accademici (2001/2002 2011/2012) ~ 4 milioni di studenti registrati ~ 79 milioni di esami registrati 10
Feedback agli atenei Dopo ogni invio di file da parte degli atenei (sia test che definitivo) vengono generati, eventualmente, report di feedback contenenti: Sintesi degli errori con la tipologia dell errore (bloccante/non bloccante), descrizione e numerosità Dettaglio degli errori con la riga, la descrizione e il codice fiscale che ha prodotto l errore. 11
Report degli errori Report di sintesi Report di dettaglio 12
Le fasi di controllo L ateneo raccoglie i dati per le varie spedizioni in file ogni file identifica un ateneo, una spedizione e un anno accademico L invio viene effettuato attraverso l osservatorio (osd.cineca.it) in formato TXT oppure XML Upload Fase 1 Viene effettuato un controllo sintattico, su ogni campo di ogni record Vengono eventualmente generati i report di sintesi e dettaglio errori (ERR1) Sui record che hanno superano la fase 1 vengono effettuati una serie di controlli semantici e di coerenza con i dati degli altri atenei Vengono eventualmente generati i report di sintesi e dettaglio errori (ERR2) Fase 2 13
Esempi errori Errore fase 1: Il formato del codice fiscale non è corretto in spedizione 1, campo CODICE_FISCALE: Si è inserito MZZNDR78D06C1O1W ma la 13 à, la 14 à e la 15 à cifra deve essere numerica. Errore fase 2: Non è possibile inserire il trasferimento, perché lo studente non risulta iscritto presso l Ateneo di provenienza indicato in spedizione 4: Nel caso di un trasferimento, che risulti effettuato da un Ateneo diverso, rispetto a quello cui è legata l ultima iscrizione dello studente. L errore è tipicamente da attribuire all Ateneo di provenienza, che non ha provveduto ad inviare l iscrizione 14
Errori fase 1 File spediti da inizio 2010 contenenti almeno un errore bloccante, 15.053: 2.244 file (il 15% del totale) sono stati mantenuti inalterati per un tempo superiore ai 90gg. Di questi 1.299 file (il 9% del totale) sono stati mantenuti inalterati per un tempo superiore ai 120gg. Dettaglio per spedizione: Spedizione Media gg Max gg Numero file 1 169 469 374 2 222 497 192 3 196 469 428 4 175 469 478 5 158 371 24 6 192 497 548 7 191 448 200 15
Errori fase 2 File spediti da inizio 2010 contenenti almeno un errore bloccante, 28.299: 4.428 file (il 16% del totale) sono stati mantenuti inalterati per un tempo superiore ai 90gg. Di questi 2.740 file (il 10% del totale) sono stati mantenuti inalterati per un tempo superiore ai 120gg. Dettaglio per spedizione: Spedizione Media gg Max gg Numero file 1 163 448 60 2 204 518 619 3 195 490 746 4 178 490 939 5 193 518 473 6 199 497 833 7 180 490 758 16
Documenti Sul sito Osservatorio sono scaricabili i seguenti documenti: (ver. 1.22): Guida completa con la descrizione dei campi di ogni spedizione, i tracciati record in formato TXT e XML, schema degli invii ecc. : Sito Osservatorio (ver. 1.0): Guida alle funzionalità del sito Errori e Warning (ver. 1.20): Elenco dettagliato di tutti gli errori (bloccanti e non) sia di fase1 che di fase2 17
Andrea Mazzoni a.mazzoni@cineca.it +39 051 617 861 18
DETTAGLIO SPEDIZIONI 19
Spedizione 1 Avvio carriera Ingresso (IN): per gli ingressi nel sistema universitario post 509/99 Avvio nuova carriera (AC): per gli studenti che attivano una nuova carriera nel sistema Avvio nuova carriera con anagrafica (IS): casi particolari Codice fiscale evento Evento Data Evento Codice fiscale Sesso Comune nascita Data nascita Stato nascita Data prima immatricolazione Anno prima immatricolazione Cittadinanza Stato di residenza Comune residenza Tipo ingresso Chiave corso Esito test ingresso CFU validi per il corso Debiti accertati Anno iscrizione corso Lavoratore Impegno Piano studi individuale Borsa di studio Esenzione Esonero totale o parziale Contributi dovuti Contributi pagati Interventi di supporto Descrizione interventi supporto Titolo di studio diploma Istituto diploma Anno diploma Votazione diploma Nazione diploma Vecchio Evento 20
Spedizione 2 Titoli di studio Titoli di scuola media superiore (DS) Titoli di livello universitario o post universitario (UN) Codice fiscale evento Evento Data Evento Titolo di studio diploma Istituto diploma Anno diploma Votazione diploma Nazione diploma Titolo universitario Data titolo universitario Anno titolo universitario Votazione universitaria Istituto universitario Nazione conseguimento titolo Classe del titolo Flag utilizzo titolo Chiave corso 21
Spedizione 3 Dettaglio Debiti / Crediti formativi Certificazione CFU o debiti in ingresso ad un corso di studio (DC) Codice fiscale evento Evento Data Evento Chiave corso Valore Tipologia valore Settore scientifico/disciplinare Ambito disciplinare Codice esame di partenza 1 Codice esame di partenza 2 Codice esame di partenza 3 Codice esame di partenza 4 Codice esame di arrivo 22
Spedizione 4 Eventi di carriera Iscrizione annuale (IA): Sospensione (SO) Passaggio di corso Passaggio di corso (PC): Variazione di ordinamento(po): Variazione curriculum (VC) Variazione sede (VS) Variazione classe (VI) Trasferimento in uscita (TU) Trasferimento in ingresso (TI) Ricognizione (RI) Codice fiscale evento Evento Data Evento Chiave corso Esito test ingresso CFU validi per il corso Debiti accertati Anno iscrizione corso Lavoratore Impegno Piano studi individuale Borsa di studio Esenzione Esonero totale o parziale Contributi dovuti Contributi pagati Interventi di supporto Descrizione interventi supporto Chiave corso uscita Ateneo di provenienza Ateneo di destinazione Motivo sospensione 23
Spedizione 5 Posizione Amministrativa Posizione amministrativa (PA) Dati anagrafici variabili (DA) Codice fiscale evento Evento Data Evento Cittadinanza Stato di residenza Comune residenza Chiave corso Anno iscrizione corso Lavoratore Impegno Piano studi individuale Borsa di studio Esenzione Esonero totale o parziale Contributi dovuti Contributi pagati Interventi di supporto Descrizione interventi supporto Data fine sospensione 24
Spedizione 6 Dati ottenimento Crediti Formativi o diminuzione debiti Ottenimento CFU o diminuzione debiti (CD) Annullamento CFU o reintroduzione debiti (AN) Codice fiscale evento Evento Data Evento Chiave corso Anno solare Settore scientifico/disciplinare Ambito disciplinare Tipologia valore CFU del corso CFU università CFU altre istituzioni italiane CFU altre istituzioni straniere CFU stage CFU validi per il corso Codice esame Voto Tipo attività Ore 25
Spedizione 7 Chiusura carriera Chiusura carriera (CC) Codice fiscale evento Evento Data Evento Chiave corso Motivazione chiusura Anno accademico di conseguimento titolo Votazione finale Tipologia prova finale 26
La normativa DM 509/99 Art 11 comma 9: Per l'elaborazione di valutazioni statistiche omogenee sulle carriere degli studenti universitari, il Ministro, con propri decreti, individua i dati essenziali che devono essere presenti nei sistemi informativi sulle carriere degli studenti di tutte le università. DM 30 Maggio 2001 Art 1: I sistemi informativi delle Università devono registrare e rendere disponibili per il loro invio all'anagrafe Nazionale degli Studenti Universitari i dati sulle carriere degli studenti riportati negli artt.2 e 3 Legge 11 Luglio 2003, n. 170 Art1-bis. Istituisce l Anagrafe nazionale degli studenti e dei laureati delle università DM 30 Aprile 2004 n.9 Art1: i sistemi informativi delle Università, per ogni studente che è iscritto ai corsi di studio di cui al D.M. n. 509/99, devono registrare e rendere disponibili per il loro periodico invio telematico all Anagrafe stessa i dati riportati all allegato 1 che fa parte integrante del presente decreto Art3: Il CINECA, nell ambito dei servizi che il Consorzio medesimo, ai sensi dell art. 3 del proprio Statuto, presta al complesso delle Università italiane e al MIUR, fornirà il necessario supporto per progettare, realizzare e gestire il sistema informativo di che trattasi. 27
Campi ministeriali 28