Recherche avancée
Par formation
Par date
Par ville
logo HUB Formation
Organisme de Formation
aux Technologies et métiers de L'informatique
La pédagogie au service de la technologie
Accueil > Domaines > Bases de données > ElasticStack pour développeurs et analystes

ElasticStack pour développeurs et analystes

ELK pour développeurs et analystes

elasticsearch

Objectifs

  • Comprendre le fonctionnement et les apports d'Elasticsearch dans le traitement de données
  • Savoir le mettre en oeuvre, analyser les données, programmer des requêtes et créer des rapports et tableaux de bord avec kibana.

Public

  • Architectes techniques, ingénieurs système, administrateurs.

Prérequis

  • Connaissances générales des systèmes d'information et des systèmes d'exploitation (Linux ou Windows).
  • Les travaux pratiques sont réalisés sur Linux.
  • Connaissance d'un langage de programmation structuré.

Programme de la formation

Introduction

  • Présentation ElasticSearch, fonctionnalités, licence
  • Nouveautés de la version 2.0
  • Positionnement d'Elasticsearch et des produits complémentaires : Shield, Watcher, Marvel, Kibana, Logstash, Beats
  • Principe : base technique Lucene et apports d'ElasticSearch
  • Fonctionnement distribué

Installation et configuration

  • Prérequis techniques.
  • Utilisation de l'interface Marvel.
  • Premiers pas dans la console Sense.

Format et stockage des données

  • Format des données.
  • Conversion au format JSON des données à traiter.
  • Structure des données.
  • Stockage, indexation
  • Terminologie Elasticsearch : notions de document, type, index
  • Métadonnées : _index, _type, _ID
  • Choix de l'identifiant par l'application avec l'API index, ou genération automatique d'un identifiant..
  • Indexation inversée.

Outils d'interrogation

  • Java API avec "Node client" et "Transport client"
  • API RESTful en HTTP
  • Exemples de requêtes simples et plus complexes : recherche de «phrases», extraction de plusieurs documents, etc ..
  • Notion de pertinence du résultat : «score»
  • Requêtes avec Search Lite et avec Query DSL (domain-specific language)
  • Utilisation de 'filtre' pour affiner des requêtes.
  • Autres clients : Perl, Python, Ruby, etc...
  • Aggrégation de résultats.

Mises à jour

  • Fonctionnement d'Elasticsearch pour les ajouts, modifications, suppression.
  • Notion de version affectée par Elasticsearch.
  • L'API bulk pour les traitements groupés.
  • Réalisation de scripts avec groovy

Gestion des accès concurrents

  • Utilisation du numéro de version.
  • Gestion par l'application : différentes méthodes selon les contraintes fonctionnelles.
  • Utilisation d'un numéro de version externe.

Kibana présentation

  • Fonctionnalités : recherche, visualisation, création de tableaux de bord et graphiques à partir des données fournies par Elacticsearch

Mise en oeuvre

  • Installation, configuration du mapping avec Elasticsearch.
  • Paramétrage dans le fichier kibana.yml
  • Mapping automatique ou manuel.
  • Configuration des indexes à explorer.
  • Visualisation et sauvegarde de graphiques,
  • étude des différents types de graphiques disponibles,
  • création de tableaux de bord et rapports à partir des graphiques.

Méthode pédagogique

Chaque participant travaille sur un poste informatique qui lui est dédié. Un support de cours lui est remis soit en début soit en fin de cours. La théorie est complétée par des cas pratiques ou exercices corrigés et discutés avec le formateur. Le formateur projette une présentation pour animer la formation et reste disponible pour répondre à toutes les questions.

Méthode d'évaluation

Tout au long de la formation, les exercices et mises en situation permettent de valider et contrôler les acquis du stagiaire. En fin de formation, le stagiaire complète un QCM d'auto-évaluation.