Menu Recherche Panier
(...)
Vous êtes ici : Accueil > Formation Hadoop Cloudera/Hortonworks pour développeurs
Technique

Formation Hadoop Cloudera/Hortonworks pour développeurs

Développement de solutions Hadoop Cloudera/Hortonworks

Initialement proposé par Google qui devait faire face à un volume croissant de données à analyser et fournir aux internautes des résultats de recherche pertinents, MapReduce, combiné à d’autres publications telles que Google File System et BigTable, est à l’origine de Hadoop. Confronté à des problèmes similaires à ceux rencontrés par la firme de Mountain View, Doug Cutting, alors chez Yahoo !, lance au milieu des années 2000, sous forme de projet de la fondation Apache, le Framework Hadoop. Devant le succès rencontré par sa solution, il rejoint Cloudera qui propose alors sa propre distribution d’Hadoop, la plus utilisée à ce jour. Outre un support sur le produit, la société propose également une suite d’outils permettant des traitements temps réel de très gros volumes de données.

Objectifs de cette formation

Hadoop Cloudera/Hortonworks pour développeurs
  • Pouvoir effectuer une étude en profondeur dans les développements des applications Hadoop 2.0
  • Apprendre à définir et à développer des applications MapReduce (Yarn), Hive et Pig efficaces et pertinentes avec Hadoop 2.0
  • Être en mesure d'exploiter toute la puissance d’Hadoop 2.0 pour manipulation, analyse et exécution des calculs sur leur cluster Hadoop

Public

  • Développeurs qui développeront, maintiendront et optimiseront des applications pour Hadoop

Pré-requis

Programme détaillé

Introduction

  • Présentation générale d’Hadoop
  • Exemples d’utilisation dans différents secteurs
  • Historique et chiffres clés : Quand parle-t-on de Big Data ?

HDFS : Interfaçage avec Java

  • Le système de fichier Hadoop Distributed File System (HDFS)
  • Lecture et écriture sur le HDFS
  • Manipulation des types de fichier SequenceFile
  • Qu’est-ce que le DistributedCache et comment partager les références ?

MapReduce/Yarn : Principe et développement Java

  • Le paradigme MapReduce et l’utilisation à travers Yarn
  • Implémentation de problématiques réelles avec le paradigme MapReduce
  • Implémentation de problématiques plus complexes
  • Utilisation des combinateurs et partitionners
  • Les bonnes pratiques pour le développement des applications MapReduce

Manipulation des données avec un Query Language et Java

  • Présentation et fonctionnement de HBase, Hive et PIG
  • HBase et Hive : JDBC et requêtes
  • Extension du HiveQL avec des fonctionnalités développées : UDF (User-Defined Functions)
  • Pig : développement et intégration avec Java
  • Extension de Pig avec des fonctionnalités développées : UDF (User-Defined Functions)

Les plus de cette formation

Hadoop Cloudera/Hortonworks pour développeurs
  • La formation est constituée d’apports théoriques, d’exercices pratiques, de réflexions et de retours d’expérience.
  • La formation est animée par un formateur-consultant expert en Big Data.

Informations

  • Durée : 3 jours (21h)
  • Tarif : 2 140 € HT
  • Réf. : BD502
  • Option(s)
    • Repas Paris : 69 € HT


Dates des sessions

Bon à savoir...


= une réponse possible
= plusieurs réponses possibles

Vous n'avez pas répondu à toutes les questions !
Vous avez % de bonnes réponses, vous pouvez donc suivre cette formation.
Vous avez % de bonnes réponses.
Nous vous invitons à contacter nos Conseillers Formation au 0825 07 6000 afin qu'ils vous orientent vers une formation plus adaptée à vos connaissances.