Objectifs

Cette formation Hadoop – Cloudera pour architectes et administrateurs vous permettra de savoir :

• Comment élaborer une architecture Hadoop
• Comment Hadoop Distributed File System (HDFS) et YARN/MapReduce fonctionnent
• Comment exploiter et gérer un cluster Hadoop
• Comment configurer Hadoop et ses outils
• Comment mettre en œuvre un cluster Hadoop
• Comment gérer la maintenance des nœuds dans un cluster
• Comment déplacer et gérer les données dans un cluster
• Comment administrer un cluster Hadoop

Public

Cette formation Hadoop - Cloudera pour architectes et administrateurs est destinée aux administrateurs systèmes et aux personnes qui gèrent et maintiennent les clusters Apache Hadoop en production ou qui évoluent dans un environnement de développement.

Prérequis

Cette formation Hadoop - Cloudera pour architectes et administrateurs nécessite de savoir naviguer et modifier des fichiers dans Linux. Une connaissance préliminaire d’Hadoop n’est pas exigée.

Programme

INTRODUCTION

• Présentation générale d’Hadoop
• Exemples d’utilisation dans différents secteurs
• Historique et chiffres clés : Quand parle-t-on de Big Data ?
• Les possibilités d’implantation de l’infrastructure et les coûts associés

L’ECOSYSTEME D’HADOOP

• Le système de fichier HDFS
• Le paradigme MapReduce et l’utilisation à travers YARN
• Le garant des informations : Zookeeper
• Le système de stockage de la donnée basé sur le socle : HBase
• La présentation de l’architecture globale : où installer les services ?
• La définition du dimensionnement pour un cluster Hadoop
• Les particularités de MapR

INSTALLATION DU SOCLE D’HADOOP

• Installation et configuration manuelle pas-à-pas sur plusieurs machines de : HDFS, YARN, Zookeeper, HBase

MANIPULATION DES DONNEES DANS UN CLUSTER HADOOP

• Architecture, Objectif et fonctionnement de : Hue, Hive, Pig, Oozie, Sqoop, Flume, Spark
• Mise en pratique sur les différents outils

EXPLOITATION D’UN CLUSTER HADOOP

• Architecture, objectif et fonctionnement du Manager : MapR Control System
• Mise en pratique

CONCEPTS D’ARCHITECTURE COMPLEXE

• Architecture en rack : les avantages et fonctionnement et paramétrage du rack awareness
• Scalabilité et performances : le Namenode Federation
• High Availability des serveurs maitres
• Utilisation des snapshots : sauvegarde et restauration

Moyens et Méthodes Pédagogiques

• La formation est constituée d’apports théoriques, d’exercices pratiques et de réflexions
• Un poste par stagiaire
• Formateur Expert
• Remise d’une documentation pédagogique papier ou numérique pendant le stage

Validation des acquis

• Auto évaluation des acquis par le stagiaire via un questionnaire en fin de formation
• Attestation de fin de stage remise avec la facture