talend open studio for big data (powered by apache hadoop)

11
HUG France #1 - 15 Mars 2012 Intégrer Hadoop dans votre SI via un outil graphique open source Ce support est mis à disposition selon les termes de la Licence Creative Commons Attribution - Pas d’Utilisation Commerciale - Pas de Modification 2.0 France. - http://creativecommons.org/licenses/by-nc-nd/2.0/fr/

Upload: hadoop-user-group-france

Post on 18-Nov-2014

3.073 views

Category:

Technology


5 download

DESCRIPTION

Talend explique pourquoi est-ce qu'ils ont fait le choix d'Hadoop pour supporter leur jobs ETL distribués et hautement performants

TRANSCRIPT

Page 1: Talend Open Studio for Big Data (powered by Apache Hadoop)

HUG France #1 - 15 Mars 2012

Intégrer Hadoop dans votre SI via un outil graphique open source

Ce support est mis à disposition selon les termes de la Licence Creative Commons Attribution - Pas d’Utilisation Commerciale - Pas de Modification 2.0 France. - http://creativecommons.org/licenses/by-nc-nd/2.0/fr/

Page 2: Talend Open Studio for Big Data (powered by Apache Hadoop)

Ce support est mis à disposition selon les termes de la Licence Creative Commons Attribution - Pas d’Utilisation Commerciale - Pas de Modification 2.0 France. - http://creativecommons.org/licenses/by-nc-nd/2.0/fr/

Cédric Carbone

CTO

Board Member

Board Member

Interests:#DataIntegration #ETL #DataQuality #MDM #ESB #BigData #Hadoop

Contact:ccarbone_at_talend.com @carbone

Page 3: Talend Open Studio for Big Data (powered by Apache Hadoop)

What’s Map/Reduce?

Ce support est mis à disposition selon les termes de la Licence Creative Commons Attribution - Pas d’Utilisation Commerciale - Pas de Modification 2.0 France. - http://creativecommons.org/licenses/by-nc-nd/2.0/fr/

Page 4: Talend Open Studio for Big Data (powered by Apache Hadoop)

VisionDemocratize de·moc·ra·tize Verb /di’mäkrə,tīz/

1. Introduce a democratic system or democratic principles

2. Action taken by a group of people

3. Make (something) accessible to everyone

Page 5: Talend Open Studio for Big Data (powered by Apache Hadoop)

Talend Open Studio for Big Data

Ce support est mis à disposition selon les termes de la Licence Creative Commons Attribution - Pas d’Utilisation Commerciale - Pas de Modification 2.0 France. - http://creativecommons.org/licenses/by-nc-nd/2.0/fr/

Page 6: Talend Open Studio for Big Data (powered by Apache Hadoop)

Ce support est mis à disposition selon les termes de la Licence Creative Commons Attribution - Pas d’Utilisation Commerciale - Pas de Modification 2.0 France. - http://creativecommons.org/licenses/by-nc-nd/2.0/fr/

Page 7: Talend Open Studio for Big Data (powered by Apache Hadoop)

Extraction/Loading from/to

Ce support est mis à disposition selon les termes de la Licence Creative Commons Attribution - Pas d’Utilisation Commerciale - Pas de Modification 2.0 France. - http://creativecommons.org/licenses/by-nc-nd/2.0/fr/

http://www.screencast.com/users/rdubois.contact/folders/HadoopIntegrationWithTalend/media/24f53512-a059-401c-bff3-4b5af140a7c9

Page 8: Talend Open Studio for Big Data (powered by Apache Hadoop)

Transformation thanks Pig

Ce support est mis à disposition selon les termes de la Licence Creative Commons Attribution - Pas d’Utilisation Commerciale - Pas de Modification 2.0 France. - http://creativecommons.org/licenses/by-nc-nd/2.0/fr/

http://www.screencast.com/users/rdubois.contact/folders/HadoopIntegrationWithTalend/media/24f53512-a059-401c-bff3-4b5af140a7c9

http://www.screencast.com/users/rdubois.contact/folders/HadoopIntegrationWithTalend/media/6dd80814-d6d3-44d0-bbda-aeb01646eede

Page 9: Talend Open Studio for Big Data (powered by Apache Hadoop)

Others connectors: Sqoop, Hbase, Hive

Ce support est mis à disposition selon les termes de la Licence Creative Commons Attribution - Pas d’Utilisation Commerciale - Pas de Modification 2.0 France. - http://creativecommons.org/licenses/by-nc-nd/2.0/fr/

Page 10: Talend Open Studio for Big Data (powered by Apache Hadoop)

What’s new in the 5.1 release (GA in May) ?

Ce support est mis à disposition selon les termes de la Licence Creative Commons Attribution - Pas d’Utilisation Commerciale - Pas de Modification 2.0 France. - http://creativecommons.org/licenses/by-nc-nd/2.0/fr/

Talend Open Studio for Big Data 5.1:

Support last version of Apache Hadoop, HDP, CDH, MapR…

Support Oozie (provisionning and scheduling)

Support Kerberos for HDFS

Move Hadoop in OSGi with feature ready for Apache Karaf and Apache Talend Runtime

OSGi bundles for Hadoop Core (annotation, auth et common)

OSGi bundles for Hadoop HDFS, Hive, MapReduce and ZooKeeper

Enhancement for previous OSGi bundles (register OSGi services thanks blueprint…)

Thanks OSGi services, create Karaf command and Mbeans for Karaf to manage Hadoop

Page 11: Talend Open Studio for Big Data (powered by Apache Hadoop)

Ce support est mis à disposition selon les termes de la Licence Creative Commons Attribution - Pas d’Utilisation Commerciale - Pas de Modification 2.0 France. - http://creativecommons.org/licenses/by-nc-nd/2.0/fr/

#1 HUG France 15 Mars 2012

Merci pour votre attention et venez nous rencontrez pour la 3e mi-temps !