Hadoop | Développement Mixte : présentiel / à distance

Dernière mise à jour : 21/12/2023

Bannière visuelle de présentation de la formation

Présentation

Pour faire face à un volume croissant de données à analyser, et fournir aux internautes des résultats de recherche pertinents, le framework Hadoop voit le jour au milieu des années 2000.

Devant le succès rencontré par la solution, Hadoop passera chez Cloudera qui créera alors la distribution Hadoop la plus utilisée à ce jour.

Informations éligibilité financement Actions Collectives

Formation pouvant être prise en charge à 100% dans le cadre des Actions Collectives.

Pour en bénéficier, contactez-nous à hello.institute@docaposte.fr et complétez votre inscription sur campusAtlas. 

https://www.docaposteinstitute.com/wp-content/uploads/2023/08/Eligible-actions-co-1.png

 

Objectifs

  • Conna√ģtre les diff√©rents √©l√©ments de l'√©cosyst√®me Hadoop et leurs r√īles respectifs.
  • Comprendre l'architecture des applicatifs Hadoop.
  • Comprendre les apports et cas d'usage des solutions Hadoop.

Programme

Architecture Hadoop

  • Histoire de Hadoop - Facebook, Dynamo, Yahoo, Google
  • Le noyau Hadoop
  • Architecture YARN, Hadoop 2.0

 

Système de fichiers distribués Hadoop (HDFS)

  • Clusters HDFS - NameNodes, DataNodes et clients
  • M√©tadonn√©es
  • Administration en ligne

 

MapReduce

  • Traitement et g√©n√©ration de grands ensembles de donn√©es
  • Fonctions Map
  • Programmation de MapReduce √† l'aide de SQL / Bash / Python
  • Traitement parall√®le
  • Failover

 

Entreposage de données avec Hive

  • Synth√©tisation des donn√©es
  • Requ√™tes ad-hoc
  • Analyser de grands ensembles de donn√©es
  • HiveQL (langage de requ√™te de type SQL)
  • Int√©gration avec les bases de donn√©es SQL
  • Analyse des n-grammes

 

Traitement parallèle avec Pig

  • √Čvaluation parall√®le
  • Interface du langage de requ√™te
  • Alg√®bre relationnelle

 

Extraction de données avec Mahout

  • Regroupement ou Clustering
  • Classification
  • Filtrage collaboratif par lots

 

Recherche avec Elastic Search

  • Concepts de recherche Elastic
  • Installation, importation des donn√©es
  • D√©monstration de l'API, exemples de requ√™tes

 

Stockage de données structurées avec HBase

  • Big Data : √©chelle de taille d'un grand ensemble de donn√©es.
  • Optimiser l'acc√®s en lecture/√©criture en temps r√©el

 

Base de données multi-master Cassandra

  • Le mod√®le de donn√©es de Cassandra
  • Coh√©rence √©ventuelle
  • Quand utiliser Cassandra

 

Redis

  • Mod√®le de donn√©es Redis
  • Quand utiliser Redis

 

MongoDB

  • Mod√®le de donn√©es MongoDB
  • Installation de MongoDB
  • Quand utiliser MongoDB

 

Kafka

  • L'architecture de Kafka
  • Installation
  • Exemple d'utilisation
  • Quand utiliser Kafka

 

Architecture Lambda

  • Concept
  • Hadoop + Int√©gration du traitement des flux
  • Exemples d'architecture

 

Big Data dans le Cloud

(Si le temps le permet)

  • Amazon Web Services
  • Concepts : mod√®le de paiement √† l'utilisation
  • Amazone S3, EC2, EMR
  • Plateforme Google Cloud
  • Google Big Query

Public visé

  • D√©veloppeurs de logiciels,
  • Administrateurs de bases de donn√©es,
  • Analystes BI,
  • Architectes logiciels,
  • Chefs de projet.

Modalités pédagogiques

Docaposte Institute propose plusieurs dispositifs pédagogiques adaptés aux apprenants :

 

  • Formation en pr√©sentiel
    • En groupe (inter-entreprises ou intra-entreprise)
    • En individuel (monitorat)
    • En journ√©e ou en cours du soir (sur demande sp√©cifique)
  • Formation en distanciel
    • Distanciel synchrone
    • Distanciel asynchrone

Prérequis

  • Avoir des connaissances en mati√®re de d√©veloppement d'applications d'entreprise, d'int√©gration de syst√®mes commerciaux et/ou de conception, d'interrogation et de rapports de bases de donn√©es.

Moyens et supports pédagogiques

  • ¬∑¬†¬†¬†¬†¬†¬† Apports¬†des connaissances communes.
  • ¬∑¬†¬†¬†¬†¬†¬† Mises en situation sur le th√®me de la formation¬†et des cas concrets.
  • ¬∑¬†¬†¬†¬†¬†¬† M√©thodologie d'apprentissage attractive, interactive et participative.
  • ¬∑¬†¬†¬†¬†¬†¬† Equilibre th√©orie / pratique : 60 % / 40 %.
  • ¬∑¬†¬†¬†¬†¬†¬† Supports de cours fournis au format papier et/ou num√©rique.
  • ¬∑¬†¬†¬†¬†¬†¬† Ressources documentaires en ligne et r√©f√©rences mises √† disposition par le formateur.
  • ¬∑¬†¬†¬†¬†¬†¬† Pour les formations en pr√©sentiel dans les locaux mis¬†√† disposition, les apprenants¬†sont accueillis dans une salle de cours √©quip√©e d'un r√©seau Wi-Fi, d'un tableau blanc ou paperboard. Un ordinateur avec les logiciels appropri√©s est mis √† disposition (le cas √©ch√©ant).
  • ¬†

Modalités d'évaluation et de suivi

En amont de la formation

·       Recueil des besoins des apprenants afin de disposer des informations essentielles au bon déroulé de la formation (profil, niveau, attentes particulières...).

·       Auto-positionnement des apprenants afin de mesurer le niveau de départ.

Tout au long de la formation

¬∑¬†¬†¬†¬†¬†¬† √Čvaluation continue des acquis avec¬†des questions orales, des exercices, des QCM, des cas pratiques ou mises en situation...

A la fin de la formation

·       Auto-positionnement des apprenants afin de mesurer l'acquisition des compétences.

·       Evaluation par le formateur des compétences acquises par les apprenants.

·       Questionnaire de satisfaction à chaud afin de recueillir la satisfaction des apprenants à l'issue de la formation.

·       Questionnaire de satisfaction à froid afin d'évaluer les apports ancrés de la formation et leurs mises en application au quotidien.

Accessibilité

Nos formations peuvent être adaptées à certaines conditions de handicap. Nous contacter pour toute information et demande spécifique.

M'inscrire à la formation

Valider la pré-inscription
  • Cat√©gorie : Technologies
    Sous-Catégorie : Cloud
  • Dur√©e : 21h
  • Prix : 1 890 ‚ā¨ HT
    Prix INTRA : Nous consulter
  • R√©f√©rence : MOD_2023564
  • Satisfaction :
    ‚ėÖ‚ėÖ‚ėÖ‚ėÖ‚ėÖ
    ‚ėÖ‚ėÖ‚ėÖ‚ėÖ‚ėÖ
  • T√©l√©charger le programme

Inscription possible jusqu'à 10 jours avant démarrage formation

Prochaines Sessions

  • D√©sol√©, cette formation n'est pas programm√©e pour le moment.

    Si vous êtes responsable formation, vous pouvez faire une requête pour l'organiser en INTRA dans votre entreprise.

Dans la même catégorie

Catalogue de formation propulsé par Dendreo,
Plateforme dédiée pour les OF