Nos domaines de formation :

Formation Big Data, introduction à la plateforme Hadoop et à son écosystème
E-learning

Stage pratique
100% à distance
Durée : 1 heure 21 mn
Réf : 4TX
Prix  2018 : 33 € H.T.
  • Programme
  • Participants / Prérequis
Programme

Cette vidéo a pour objectif de vous présenter le Big Data en général et plus spécifiquement la plateforme Hadoop et ses concepts clés, afin de comprendre son fonctionnement et ses possibilités. Après avoir défini les notions de NoSQL et de Big Data, nous lancerons l'installation d'un environnement Hadoop. Celui-ci étant complexe et composé de nombreuses couches, nous utiliserons les distributions Hadoop comme Hortonworks, MapR et Cloudera. Puis, nous introduirons le paradigme Map Reduce qui permettra de réaliser des algorithmes de calcul distribué. Nous l'illustrerons par un exemple simple en Java. Nous détaillerons, ensuite, les concepts principaux autour du stockage et du traitement des données dans Hadoop. Nous les mettrons en pratique par des exemples simples illustrant la théorie. Enfin, nous terminerons en étudiant une collection d'outils basés sur Hadoop et leurs différentes possibilités et utilités. Nous évoquerons entre autres la base NoSQL d'Hadoop : HBase, les outils de traitement Pig, Hive et Spark.

PROGRAMME DE FORMATION

Origines d'Hadoop

  • Qu'est-ce que le NoSQL ?
  • Définition du Big Data
  • Histoire d'Hadoop

Installation d'un environnement Hadoop de base

  • Écosystème complexe
  • Distributions Hadoop
  • Introduction à CDH : Cloudera Hadoop
  • Démarrage d'une QuickStart VM

Stockage de fichiers : HDFS

  • Présentation de l'HDFS
  • Manipulation de fichiers en ligne de commande

Paradigme MapReduce

  • Principe général
  • Fonction Map
  • Fonction Reduce

Développement d'un premier MapReduce

  • Mapper
  • Reducer
  • Lanceur
  • Lancement de votre premier MapReduce
  • Combineur

Écosystème Hadoop

  • Hbase
  • Hive
  • Pig
  • Zookeeper
  • Sqoop
  • Oozie
  • Flume
  • Kafka
  • Spark
Participants / Prérequis

» Participants

Cette vidéo de formation s'adresse à tous les informaticiens qui veulent avoir un premier aperçu d'Hadoop.

» Prérequis

Aucune connaissance particulière.
Intra / sur-mesure
Programme standard     Programme sur-mesure
Oui / Non

Vos coordonnées