Bigdata
IT Informatique et Technique
Formation Hadoop : développement avec MapReduce

Connaissances préalables pour suivre cette formation Bigdata :

• Connaissance d'un langage de programmation objet comme Java

Public de cette formation Bigdata :

• Chefs de projets, développeurs, et toute personne souhaitant comprendre les techniques de développement avec MapReduce dans l'environnement Hadoop

Objectifs de cette formation Bigdata :

• Connaître les principes du framework Hadoop et savoir utiliser la technologie MapReduce pour paralléliser des calculs sur des volumes importants de données



Méthodes pédagogiques de cette formation Bigdata :

• 6 à 12 personnes maximum par cours, 1 poste de travail par stagiaire
• Remise d’une documentation pédagogique papier ou numérique pendant le stage
• La formation est constituée d’apports théoriques, d’exercices pratiques et de réflexions

Formateur de cette formation Bigdata :

• Consultant-formateur expert Bigdata

Méthodes d'évaluation des acquis de cette formation Bigdata :

• Auto-évaluation des acquis par le stagiaire via un questionnaire
• Attestation de fin de stage adressée avec la facture

Contenu détaillé de cette formation Hadoop : développement avec MapReduce :


     Introduction

    • Les fonctionnalités du framework Hadoop
    • Le projet et les modules : Hadoop Common, HDFS, YARN, MapReduce

     MapReduce

    • Principe et objectifs du modèle de programmation MapReduce
    • Fonctions map() et reduce()
    • Couples (clés, valeurs)
    • Implémentation par le framework Hadoop
    • Etude de la collection d'exemples
    • Rédaction d'un premier programme et exécution avec Hadoop

     Programmation

    • Les interfaces principales : mapper, reducer, partitioner, reporter, outputcollector
    • Format des entrées et sorties d'un job MapReduce : InputFormat et OutputFormat
    • Configuration des jobs avec jobconf
    • Interaction avec le JobTracker par JobClient

     Optimisation

    • Gestion de la mémoire, des accès disque
    • Utilisation de la JVM
    • Mise en œuvre du cache distribué

     Sécurité

    • Configuration des ACLs
    • Gestion de l'authentification


INTER INTRA Classe virtuelle

Produit : Formation Bigdata

Code du stage : PYCB014

Certification(s) Préparée(s) : Non

Durée de la formation : 2 jours

Prix (HT) : 1130 €

PDF
Plan de cours PDF
Bulletin
Bulletin d'inscription
Prochaines sessions
Nous consulter par mail
Tél: 01 71 19 70 30
Autres formations
Haut de page