Hadoop : Dployer du Big Data

Formation Informatique / SGBD et Aide la dcision / Big Data

OBJECTIFS

Comprendre le Big Data et ses enjeux

Savoir dployer Hadoop et son cosystme
Comprendre HDFS, MapReduce
Structurer les donnes avec HBase
crire des requtes avec HiveQL
Lancer une analyse avec Pig

PUBLIC

A retenir
Dure : 4 jours soit 28h.
Rf. HADOOP

Administrateurs systmes

PRE-REQUIS
Connaissances en administration systme, prfrablement Java

Dates des sessions

PROGRAMME
Introduction au Big Data
Qu'est-ce que le BigData?
Source des donnes:l'homme, la machine
La problmatique de taille
Position de Hadoopdans le paysage
Introduction Hadoop
L'origine du projet
Le systme de fichiers HDFS
Comprendrel'algorithme MapReduce
L'environnement d'Hadoop: HBase,ZooKeeper, Hive, Pig
L'API YARN

Cette
formation est
galement
propose en
formule
INTRA-ENTREPRISE.
Inclus dans cette formation

Mettre Hadoop en place: HDFS

Du mode autonome au mode compltement distribu encluster
Pr-requis, distributions Hadoop
Cluster Hadoop:NameNode, ResourceManager, DataNode, NodeManager
Les fichiers deconfiguration
Oprations de base sur le cluster HDFS:formatage, dmarrage, arrt
Atelier pratique: installer Hadoop sur 2 nuds, formateret manipuler HDFS
Travailler avec MapReduce

Coaching Aprs-COURS
Pendant 30 jours, votre formateur
sera disponible pour vous aider.
CERTyou s'engage dans la ralisation
de vos objectifs.

L'intrt de MapReduce
Mappers, reducers, paralllisme etindpendance des traitements
Entres, sorties
Soumission d'unjob Hadoop
Atelier pratique: excuter une tche via MapReduce,avec sortie dans HDFS
Une base de donnes distribue: HBase
L'accs alatoire, temps rel, lecture-criture au BigData
Fonctionnalits de HBase, NoSQL
Pr-requis,configuration
Manipulation via le shell HBase
Atelier pratique: mettre en place HBase sur Hadoop, creret manipuler une table
Et pourquoi pas un peu de SQL avec Hive?
Prsentation de Hive
Grer le schma: bases, tables,vues, partitions

CERTYOU, 37 rue des Mathurins, 75008 PARIS - SAS au capital de 10 000 Euros
Tl : 01 42 93 52 72 - Fax : 01 70 72 02 72 - contact@certyou.com - www.certyou.com
RCS de Paris n 804 509 461- TVA intracommunautaire FR03 804509461 - APE 8559A
Dclaration dactivit enregistre sous le N 11 75 52524 75 auprs du prfet de rgion dIle-de-France

Votre garantie 100%

SATISFACTION
Notre engagement 100% satisfaction
vous garantit la plus grande qualit
de formation.

Hadoop : Dployer du Big Data

Formation Informatique / SGBD et Aide la dcision / Big Data

Manipulation des donnes, requtes etmap-reduce avec HiveQL

Audits et journal d'erreurs
Atelier pratique: chargement de donnes massives dansHive, requtes
Analyser les donnes avec Pig
Prsentation, installation du projet Apache Pig
Excutions dePig en local, en mode map-reduce
Scripter pour Pig
Le langagePig Latin
Manipulations de donnes et stockage avec Pig
Atelier pratique: crire un script contenant du PigLatin pour une tche simple, et l'excuter en local, puis en
modemap reduce.
Aller plus loin avec Hadoop
Grer les logs et l'audit de tches Hadoop
Dcouvrir MRUnitpour les test unitaires dans Hadoop
Dbogage enlocal
Surveillance des perfomances
Atelier pratique: mise en place d'un job MapReduce pluscomplexe avec traces et tests unitaires

CERTYOU, 37 rue des Mathurins, 75008 PARIS - SAS au capital de 10 000 Euros
Tl : 01 42 93 52 72 - Fax : 01 70 72 02 72 - contact@certyou.com - www.certyou.com
RCS de Paris n 804 509 461- TVA intracommunautaire FR03 804509461 - APE 8559A
Dclaration dactivit enregistre sous le N 11 75 52524 75 auprs du prfet de rgion dIle-de-France