Cette formation couvre l'installation et l'estimation des ressources nécessaires pour une infrastructure, incluant l'allocation des shards, le déploiement, et le paramétrage des ressources. Elle aborde également la surveillance, la maintenance, et la sécurité des clusters, ainsi que l'optimisation des performances et la réplication entre clusters.
Objectifs
Apprendre à mettre en place la stack ELK
Dimensionner les éléments matériels
Surveiller Elasticsearch
Administrer la plateforme dans différentes configurations
Public visé
Administrateurs système et réseaux, SRE, devops, développeurs ...
Prérequis
Connaissance des fondamentaux du système d'exploitation Linux
Ligne de commande et commandes de base
Une connexion internet, idéalement accès SSH sur internet est nécessaire.
Programme
Installer & estimer les ressources nécessaires d'infrastructure
Allocation des shards, commandes et philosophie :
Déploiement classique
Déploiement multi data tiers
Rôles des nœuds
Savoir expliquer les allocations effectuées
Recovery: Quand et comment les contrôler
Explications du routing des requêtes de recherche et d'indexation
Nœuds master et voting configuration
Paramétrage de la mémoire
Paramétrage du disque
Paramétrage réseau
Paramétrage CPU
Avertissement sur la virtualisation
Recette de dimensionnement
Usage API pour lister les fonctionnalités X-Pack actives
Monitorer & réagir
API Cluster Health, Cluster stats/state, Node infos/stats, Index _stats
APIs équivalentes avec l'API _cat
Connaître les tâches en attente de traitement sur le cluster (pendingtasks)
Connaître les threads les plus actifs d'un nœud (hot threads)
Monitorer les fonctionnalités du stack
Monitorer la mémoire utilisée
Monitorer les file handles utilisés
Monitorer l'occupation disque
Monitorer la bande passante et connexions réseau
Surveiller les indicateurs de performance : charge de travail des threads, performances d'indexation/recherche et surveillance des requêtes "lentes"
Monitorer à l'aide des journaux applicatifs Elasticsearch
Alerter sur la base des données de monitoring
Maintenance
Mécanismes du Recovery
Se mettre à l'échelle : ajouter ou retirer un nœud
Opérations de maintenance : redémarrer un nœud ou un cluster complet
Ré-indexer des données
Prévenir les arrêts de services : Aliases et Rollover API
Cas particulier d'usage des indices : les DataStreams
Sauvegarder et restaurer des indices
Fonctionnalité de sauvegarde automatisée (Snapshot Lifecycle Management ou SLM)
Fonctionnalité de gestion du cycle de vie des indices (Index Lifecycle Management ou ILM)
Utiliser l'API de dépréciation
Préparer une montée de version
Monter de version
Sécurité
Périmètre et vue d'ensemble
Filtrer les flux réseau
Limiter les fonctionnalités de scripting
Chiffrer les données sur disque ou échangées sur le réseau
Authentifier les utilisateurs avec X-Pack security
Authentifier les utilisateurs avec un reverse proxy
Autorisations d'accès aux ressources
Cross Cluster Replication (CCR)
Réplications entres clusters distants unidirectionnelles ou bidirectionnelles pour permettre différents cas d'usage :
Une architecture capable un retour rapide à la normale après désastre
Une architecture de mise à proximité données
Une architecture de centralisation de la supervision
Optimisation & Performance
Indexer plus rapidement :
Bulk API
Refresh interval
Optimisations des mappings
Rechercher plus efficacement :
Contextes de filtres, de post filters, opérateurs "exact matches" et caches
Pièges des opérateurs wildcard ou des mappings parent/child
Agréger and trier plus efficacement : doc_values et fielddata
Diagnostiquer le calcul de score, ou les erreurs
Profiler ses recherches pour comprendre les temps de réponse
Matériel & Infrastructure :
Penser aux capacités de gestion des data tiers d'Elasticsearch
Pas d'ingestion sans nœud dédié à cette activité
Dissocier les clusters pour les spécialiser dans des tâches données (supervision vs métier)
Modalités pédagogiques
Docaposte Institute propose plusieurs dispositifs pédagogiques adaptés aux apprenants :
Formation en présentiel
En groupe (inter-entreprises ou intra-entreprise)
En individuel (monitorat)
En journée ou en cours du soir (sur demande spécifique)
Formation en distanciel
Distanciel synchrone
Distanciel asynchrone
Moyens et supports pédagogiques
Apports des connaissances communes.
Mises en situation sur le thème de la formation et des cas concrets.
Méthodologie d'apprentissage attractive, interactive et participative.
Equilibre théorie / pratique : 60 % / 40 %.
Supports de cours fournis au format papier et/ou numérique.
Ressources documentaires en ligne et références mises à disposition par le formateur.
Pour les formations en présentiel dans les locaux mis à disposition, les apprenants sont accueillis dans une salle de cours équipée d'un réseau Wi-Fi, d'un tableau blanc ou paperboard. Un ordinateur avec les logiciels appropriés est mis à disposition (le cas échéant).
Modalités d'évaluation et de suivi
En amont de la formation
Recueil des besoins des apprenants afin de disposer des informations essentielles au bon déroulé de la formation (profil, niveau, attentes particulières...).
Auto-positionnement des apprenants afin de mesurer le niveau de départ.
Tout au long de la formation
Évaluation continue des acquis avec des questions orales, des exercices, des QCM, des cas pratiques ou mises en situation...
A la fin de la formation
Auto-positionnement des apprenants afin de mesurer l'acquisition des compétences.
Evaluation par le formateur des compétences acquises par les apprenants.
Questionnaire de satisfaction à chaud afin de recueillir la satisfaction des apprenants à l'issue de la formation.
Questionnaire de satisfaction à froid afin d'évaluer les apports ancrés de la formation et leurs mises en application au quotidien.
Informations sur l'admission
Nous consulter.
Modalités d'admission
Admission sans disposition particulière
Accessibilité
Nos formations peuvent être adaptées à certaines conditions de handicap. Nous contacter pour toute information et demande spécifique.
Si vous êtes en situation de handicap, contactez-nous avant le début de votre formation pour que nous puissions vous orienter efficacement et vous accueillir dans les meilleures conditions.
Inscription possible jusqu'à 10 jours avant le démarrage de la formation
Session sélectionnée
COMPLÈTE
Prochaines Sessions
Cette formation n'est pas programmée pour le moment.