Upload
hadoop-user-group-france
View
3.074
Download
5
Embed Size (px)
DESCRIPTION
Talend explique pourquoi est-ce qu'ils ont fait le choix d'Hadoop pour supporter leur jobs ETL distribués et hautement performants
Citation preview
HUG France #1 - 15 Mars 2012
Intégrer Hadoop dans votre SI via un outil graphique open source
Ce support est mis à disposition selon les termes de la Licence Creative Commons Attribution - Pas d’Utilisation Commerciale - Pas de Modification 2.0 France. - http://creativecommons.org/licenses/by-nc-nd/2.0/fr/
Ce support est mis à disposition selon les termes de la Licence Creative Commons Attribution - Pas d’Utilisation Commerciale - Pas de Modification 2.0 France. - http://creativecommons.org/licenses/by-nc-nd/2.0/fr/
Cédric Carbone
CTO
Board Member
Board Member
Interests:#DataIntegration #ETL #DataQuality #MDM #ESB #BigData #Hadoop
Contact:ccarbone_at_talend.com @carbone
What’s Map/Reduce?
Ce support est mis à disposition selon les termes de la Licence Creative Commons Attribution - Pas d’Utilisation Commerciale - Pas de Modification 2.0 France. - http://creativecommons.org/licenses/by-nc-nd/2.0/fr/
VisionDemocratize de·moc·ra·tize Verb /di’mäkrə,tīz/
1. Introduce a democratic system or democratic principles
2. Action taken by a group of people
3. Make (something) accessible to everyone
Talend Open Studio for Big Data
Ce support est mis à disposition selon les termes de la Licence Creative Commons Attribution - Pas d’Utilisation Commerciale - Pas de Modification 2.0 France. - http://creativecommons.org/licenses/by-nc-nd/2.0/fr/
Ce support est mis à disposition selon les termes de la Licence Creative Commons Attribution - Pas d’Utilisation Commerciale - Pas de Modification 2.0 France. - http://creativecommons.org/licenses/by-nc-nd/2.0/fr/
Extraction/Loading from/to
Ce support est mis à disposition selon les termes de la Licence Creative Commons Attribution - Pas d’Utilisation Commerciale - Pas de Modification 2.0 France. - http://creativecommons.org/licenses/by-nc-nd/2.0/fr/
http://www.screencast.com/users/rdubois.contact/folders/HadoopIntegrationWithTalend/media/24f53512-a059-401c-bff3-4b5af140a7c9
Transformation thanks Pig
Ce support est mis à disposition selon les termes de la Licence Creative Commons Attribution - Pas d’Utilisation Commerciale - Pas de Modification 2.0 France. - http://creativecommons.org/licenses/by-nc-nd/2.0/fr/
http://www.screencast.com/users/rdubois.contact/folders/HadoopIntegrationWithTalend/media/24f53512-a059-401c-bff3-4b5af140a7c9
http://www.screencast.com/users/rdubois.contact/folders/HadoopIntegrationWithTalend/media/6dd80814-d6d3-44d0-bbda-aeb01646eede
Others connectors: Sqoop, Hbase, Hive
Ce support est mis à disposition selon les termes de la Licence Creative Commons Attribution - Pas d’Utilisation Commerciale - Pas de Modification 2.0 France. - http://creativecommons.org/licenses/by-nc-nd/2.0/fr/
What’s new in the 5.1 release (GA in May) ?
Ce support est mis à disposition selon les termes de la Licence Creative Commons Attribution - Pas d’Utilisation Commerciale - Pas de Modification 2.0 France. - http://creativecommons.org/licenses/by-nc-nd/2.0/fr/
Talend Open Studio for Big Data 5.1:
Support last version of Apache Hadoop, HDP, CDH, MapR…
Support Oozie (provisionning and scheduling)
Support Kerberos for HDFS
Move Hadoop in OSGi with feature ready for Apache Karaf and Apache Talend Runtime
OSGi bundles for Hadoop Core (annotation, auth et common)
OSGi bundles for Hadoop HDFS, Hive, MapReduce and ZooKeeper
Enhancement for previous OSGi bundles (register OSGi services thanks blueprint…)
Thanks OSGi services, create Karaf command and Mbeans for Karaf to manage Hadoop
Ce support est mis à disposition selon les termes de la Licence Creative Commons Attribution - Pas d’Utilisation Commerciale - Pas de Modification 2.0 France. - http://creativecommons.org/licenses/by-nc-nd/2.0/fr/
#1 HUG France 15 Mars 2012
Merci pour votre attention et venez nous rencontrez pour la 3e mi-temps !