Talend Open Studio. Esperienze di utilizzo di ETL in DCSC. Andrea Libratore e Daniele Frongia (DCSC/A)



Documenti analoghi
APPENDICE 7 AL CAPITOLATO TECNICO

RRF Reply Reporting Framework

Risorsa N Aree Tecnologiche: ETL (Exp. 15 anni) DataWareHouse (Exp. 10 anni) Business Intelligence (Exp. 10 anni) Big Data (Exp.

Misura delle prestazioni dei processi aziendali con sistemi di integrazione dati open source

Risorsa N DATI ANAGRAFICI: FORMAZIONE E CORSI: ISTRUZIONE E CERTIFICAZIONI: LINGUE STRANIERE: COMPETENZE INFORMATICHE:

Risorsa N Business Object (Exp. 5 anni) Datastage (Exp. 5 anni) ETL (Exp. 5 anni) Oracle ODI (Exp. 4 anni) Oracle OBIEE (Exp.

Business Intelligence. strumento per gli Open Data

Risorsa N DATI ANAGRAFICI: FORMAZIONE E CORSI: ISTRUZIONE E CERTIFICAZIONI: LINGUE STRANIERE: COMPETENZE INFORMATICHE: Nato nel : 1968

OLAP Evolus Suite. Analsysis and Reporting per tutte le Imprese

La suite Pentaho Community Edition

Velocizzare l'esecuzione di Joomla! con Zend Server Community Edition

Velocizzare l'esecuzione di Joomla! con Zend Server Community Edition

Requisiti tecnici di BusinessObjects Planning XI Release 2

PROFILI ALLEGATO A. Profili professionali

ANALISI COMPARATIVA DEGLI STRUMENTI DI BUSINESS INTELLIGENCE PER PMI

L ESPERIENZA ITCAM IN UBI BANCA. Raffaele Vaccari Coordinatore Monitoraggio Sistemi Distribuiti Area IT Operations

ALLEGATO TECNICO. Piattaforme supportate dalle Suite DeltaDator P.A.

Risorsa N Nel 06/2001: Corso di operatore avanzato (Siebel, Sql, Unix e Visual Basic)

Riccardo Paganelli Analisi, Reporting, Dashboard, Scorecard per prendere le migliori decisioni: Cognos 8 BI

ANDREA BARRESI SISTEMI INFORMATIVI OPEN

BI OPENSOURCE: UNA COMMUNITY PER L'ENTERPRISE. Sergio Ramazzina. Riservato telecamera

Riccardo Dutto, Paolo Garza Politecnico di Torino. Riccardo Dutto, Paolo Garza Politecnico di Torino

REGIONE BASILICATA UFFICIO S. I. R. S.

AICA - Workshop 01/03/2011

SISTEMA INFORMATIVO DIREZIONE E CONTROLLO

Risorsa N Diploma di Tecnico Industriale indirizzo Telecomunicazioni

SQL Server Integration Services. Integration Services Project

Sistemi avanzati di gestione dei Sistemi Informativi

Innovazione su misura

COMPANY PROFILE. Mediamind srl Rovigo (Italy) Dicembre 2009

Risorsa N DATI ANAGRAFICI: FORMAZIONE E CORSI: ISTRUZIONE E CERTIFICAZIONI: LINGUE STRANIERE: COMPETENZE INFORMATICHE:

Risorsa N DATI ANAGRAFICI: FORMAZIONE E CORSI: ISTRUZIONE E CERTIFICAZIONI: LINGUE STRANIERE: Nato nel : 1968

Agenda. DBS01 Reports for your app: Reporting Services pros and cons. Gestione del ciclo di vita di un report ARCHITETTURA REPORTING SERVICES

Professional Planner 2011

Organizzazione tecnico-informatica Ing. Fabio Binotto

DATA WAREHOUSING CON JASPERSOFT BI SUITE

La problematica della migrazione. Enrico Gulfi Servizio Organizzazione e Informatica Città di Lugano

Roberto Moretti. Nazionalità: italiana Data di nascita: Luogo di nascita: Bologna Patente: B

La Business Intelligence Open Source. Padova, 30 Maggio 2006

Realizzazione del nuovo cruscotto direzionale per il monitoraggio della gestione aziendale

Gestire l informazione in un ottica innovativa. Enrico Durango Manager of Information Management Software Sales - IBM Italia

Data Warehousing. Esercitazione 1

Risorsa N Italiano Ottimo Inglese Ottimo

Formato europeo per il curriculum vitae

OFFERTE EURES NELL INFORMATICA

CORSO I.F.T.S TECNICHE PER LA PROGETTAZIONE E LA GESTIONE DI DATABASE

ALLEGATO 8.1 DESCRIZIONE PROFILI PROFESSIONALI

SQL Server BI Development Studio

Risorsa N Diploma di Ragioniere Perito Commerciale e Programmatore. Inglese Buono Francese Scolastico

Data warehouse Introduzione

Modulo Gestione Interventi Tecnici. Il prezioso assistente che mancava alla tua impresa.

ORACLE BUSINESS INTELLIGENCE STANDARD EDITION ONE A WORLD CLASS PERFORMANCE

Architetture Informatiche. Dal Mainframe al Personal Computer

Architetture Informatiche. Dal Mainframe al Personal Computer

Cos è Infinity Project

Sistema operativo. Processore Memoria. Risoluzione dello schermo Browser Internet. Microsoft Internet Explorer versione 6 o superiore

Risorsa N Nel 2011: Corso Project Management di progetti ICT (Sciaky Europe) Nel 2010: Corso Partner Decysion

Solution For Electronic Data Interchange. EDIJSuite. La soluzione per l interscambio dei dati in formato elettronico

SQL Server Introduzione all uso di SQL Server e utilizzo delle opzioni Olap. Dutto Riccardo - SQL Server 2005.

Pentaho: una soluzione Open per la progettazione e sviluppo di Data Warehouse

Aprile 2013 LA SOLUZIONE EXPERTEE EEDG ENTERPRISE DATA GOVERNANCE

Sommario. Oracle Database 10g (laboratorio) Grid computing. Oracle Database 10g. Concetti. Installazione Oracle Database 10g

Progetti Big Data nell ambito delle Analisi Fiscali

F O R M A T O E U R O P E O

ANNESSO 5 AL CAPITOLATO SPECIALE D APPALTO PROFILI PROFESSIONALI

CostPerform: il software che segna l'evoluzione da Activity Based Costing (ABC) a Performance Based Costing (PBC) a Bus

ACG Vision4 Service Bus V 1.3.0

LA TECHNOLOGY TRANSFER PRESENTA ROMA OTTOBRE 2010 RESIDENZA DI RIPETTA - VIA DI RIPETTA, 231

Applicazione: Share - Sistema per la gestione strutturata di documenti

SQL Server Integration Services. SQL Server 2005: ETL - 1. Integration Services Project

Risorsa N DATI ANAGRAFICI: FORMAZIONE E CORSI: ISTRUZIONE E CERTIFICAZIONI: LINGUE STRANIERE: COMPETENZE INFORMATICHE:

Oracle Business Intelligence Suite

Mail: UNI EN ISO 9001:2008

Professional Planner 2008

L'infrastruttura tecnologica Oracle Workflow alla base del progetto di Valutazione di Impatto Ambientale

Kirey Re.Search 2.0. Piattaforma di ricerca Open Source

IB Connector. Architettura

Tecnologie abilitanti per la GeoBusiness Intelligence e gli open data: la suite di prodotti StatPortal

FORMATO EUROPEO PER IL

Integrazione di Maximo Asset Management con Tablet e disegni CAD

Risorsa N Dal 09/2010 al 08/2011: Corso Cisco CCNA Networking Associate Dal 07/2014 al 08/2014: Corso Cisco CCNA Security Networking Associate

IBM InfoSphere Information Server: trasformare e distribuire i dati

OPERA21. Open Source ed Eclipse in progetti di R&S (sezione MOSIPS)

Il Business Performance Management & QlikView

Indice Introduzione Elementi di base dei database Il linguaggio SQL (Structured Query Language)

N.E.A.T. ( Neutral Environment Application Tools )

APPENDICE 5 AL CAPITOLATO TECNICO

Esperto informatico e Tutor E.C.D.L. e M.O.S. D.C.S. Diffusione Corsi Specializzati Corso Secondigliano, 166, Napoli

un occhio al passato per il tuo business futuro

Integrazione dei processi aziendali Sistemi ERP e CRM. Alice Pavarani

TYPO3 in azione con l infrastruttura ZEND: affidabilità e sicurezza. Mauro Lorenzutti CTO di Webformat srl mauro.lorenzutti@webformat.

29 Novembre 2012 Open Source: un opportunità per far evolvere l ICT nelle imprese

APPENDICE 4 AL CAPITOLATO TECNICO. Descrizione dei profili professionali e template del CV

Risorsa N Access (Exp. 2 anni) Oracle (Exp. 1 anno) Sql Server (Exp. 1 anno) MySql (Exp. 1 anno) DB2 (Exp. 1 anno)

idw INTELLIGENT DATA WAREHOUSE

ORDINE DEGLI ATTUARI

I Sistemi Operativi. Confronto Windows MAC OS X Linux

Thematica Software Technologies

SOLUZIONI INFORMATICHE PER L INDUSTRIA

Transcript:

Talend Open Studio Esperienze di utilizzo di ETL in DCSC Andrea Libratore e Daniele Frongia (DCSC/A)

Esperienze di utilizzo di ETL in DCSC Diffusione di Talend in Istat DCMT

Esperienze di utilizzo di ETL in DCSC Una panoramica sui competitor di Talend (1/3) Informatica PowerCenter - Standard Edition con poche funzionalità - Performance non eccellenti - Necessità di ETL Server IBM Information Server ex IBM WebSphere DataStage ex Ascential - Motore e linguaggio proprietari - Necessità di ETL Server - Metadati gestiti con un altro tool IBM (MetaStage) IBM DB2 Enterprise Edition - Costi elevati t38

Diapositiva 3 t38 posizione logo: 21,90-18 tabanell; 21/03/2006

Esperienze di utilizzo di ETL in DCSC Una panoramica sui competitor di Talend (2/3) Microsoft SQL Server Integration Services - Costi elevati - Nessuna visibilità del codice prodotto - Orientato a prodotti/linguaggi/s.o. Microsoft Business Objects Data Integrator - Fa meglio altre cose: integrazione di dati finalizzata ad analisi in ambiente BO - Metadati gestiti con un Metadata Manager esterno t47

Diapositiva 4 t47 posizione logo: 21,90-18 tabanell; 21/03/2006

Esperienze di utilizzo di ETL in DCSC Una panoramica sui competitor di Talend (3/3) Oracle Warehouse Builder - Le funzionalità più interessanti sono costose e richiedono Oracle 10g Enterprise Edition - Dialoga poco col mondo non Oracle Pentaho Data Integrator (Kettle) - Marc Russel s Benchmark t39

Diapositiva 5 t39 posizione logo: 21,90-18 tabanell; 21/03/2006

Esperienze di utilizzo di ETL in DCSC Talend vs IBM DataStage Talend Open Studio Java project / v2.0.0m3 IBM WebSphere DataStage v7.5 Configurazione: Windows XP SP2, 2GB RAM Intel DualCore T2400 @1.83GHz 6.03 secondi 23.87 secondi Test: Flusso dati caricati: 1.000.000 di record Formato dell input: testo, csv Formato dell output: testo, csv, XML ETL: filtro, aggregazione, ordinamento

Esperienze di utilizzo di ETL in DCSC Open Talend Studio t41

Diapositiva 7 t41 posizione logo: 21,90-18 tabanell; 21/03/2006

Esperienze di utilizzo di ETL in DCSC VOI NON SIETE QUI ERP/CRM Finanza Caricamenti Data Warehouse Caricamenti di Data Mart Caricamenti di applicazioni OLAP OLAP Produzione Data Mart Budgeting File di dati esterni Data Warehouse Data Mart

Esperienze di utilizzo di ETL in DCSC Open Talend Studio in DCSC Rilevazione sulle contrattazioni e conflitti di lavoro (Andrea Libratore e Rosaria Occulto) Rilevazione sul movimento turistico (Andrea Libratore e Daniele Frongia) Job generalizzabile orientato alle rilevazioni Istat (Andrea Libratore) Test su usabilità Creazione di un job (XLS > MySQL) in meno di 20 minuti t42

Diapositiva 9 t42 posizione logo: 21,90-18 tabanell; 21/03/2006

Titolo del convegno anche su più righe anche su più righe Job generalizzabile

Titolo del convegno anche su più righe anche su più righe Open Talend Studio, la versione Enterprise Talend Open Studio Business Modeler Job Designer Metadata Manager Talend Integration Suite - Enterprise Edition Grid Conductor CPU Balancer Talend Integration Suite - Professional Edition Distant Run Job Conductor Advanced Activity Monitoring Dashboard Talend Integration Suite - Team Edition Advanced Studio Shared Repository Job Conductor Activity Monitoring Console Enterprise Teamwork Single User Open Source Subscription GPL

Esperienze di utilizzo di ETL in DCSC Open Talend Studio in Istat? DWH e Business Intelligence CHECK (CONISTAT) ETL per le rilevazioni t44

Diapositiva 12 t44 posizione logo: 21,90-18 tabanell; 21/03/2006

Conclusioni Strumento utile e meritevole di approfondimento Censimento dei problemi aperti http://segnalazionit.blogspot.com/ Talend sul Web