Formation Big Data : Architecture et Technologies

Objectif

• Découvrir les concepts et les enjeux liés à Hadoop
• Comprendre le fonctionnement de la plateforme et de ses composants
• Installer la plateforme et la gérer
• Optimiser la plateforme
• Comprendre l’écosystème technologique nécessaire pour réaliser un projet Big data
• Importer et exporter les données 
• Définir l’architecture de base pour le montage d’un projet Big Data

Public Cible

Cette formation s'adresse aux collaborateurs, aux administrateurs de Systèmes d'Informations et managers desirant se former dans le domaine en super croissance du big Data.

Programme de la Formation

Journée 1

• Présentation du Business Intelligence
• Problèmes liés à l’évolution exponentielle des données
• Apport du Big Data et les cinq V
• Présentation de l’écosystème Hadoop
• Fonctionnement du stockage distribué HDFS

Pause

Fonctionnement du traitement distribué avec MAPREDUCE V2

Travaux pratiques : Manipulation des commandes HDFS

Travaux pratique : Lancement d’un Job MAPREDUCE V2

Exercices pratiques

Journée 2

• Notion de bases de données NoSQL
• Architecture fonctionnelle de HBASE
• Les requêtes HBASE

Pause

• Notion du Datawarehouse
• Architecture fonctionnelle de HIVE
• Le langage Hive QL

Travaux pratiques: Manipulation des requêtes HBASE

Travaux pratiques: Manipulation des requêtes HiveQL

Exercices pratiques

Journée 3

• Transfert de données depuis et vers une base de données relationnelle
• Fonctionnement de Sqoop
• Les Commandes Sqoop

Pause

• Les traitements en temps réel
• Fonctionnement de Flume

Travaux pratiques: Transfère de données via Sqoop

Travaux pratiques: Manipulation de Flume pour un traitement en temps réel

Exercices pratiques

Journée 4

• Réalisation d'un projet réel
• Extraction, stockage et analyse des données d'un site d'annonces connu au Maroc

Pause

• Réalisation pratique : Création d'un cluster de trois machine et installation des services Hadoop
• Récapitulation et discussion libre