Recherche avancée
Par formation
Par date
Par ville
logo HUB Formation
Organisme de Formation
aux Technologies et métiers de L'informatique
La pédagogie au service de la technologie
Accueil > éditeurs > Talend > Talend OpenStudio intégration de données

Talend OpenStudio intégration de données

talend

Objectifs

  • savoir créer des jobs dans l'application ETL Talend, et les optimiser par l'utilisation des contextes.
  • savoir exécuter les jobs et en suivre l'exécution par l'utilisation de statistiques.

Public

  • développeurs
  • chefs de projet
  • toute personne souhaitant utiliser Talend OpenStudio pour le traitement de données

Prérequis

  • maîtrise des SGBDR et de SQL
  • la connaissance de la programmation en Java serait utile

Programme de la formation

Introduction

  • Rappels sur les solutions ETL.
  • Présentation Talend OpenStudio : installation, configuration des préférences utilisateurs.
  • Documentation.
  • Concevoir des jobs simples avec Talend OpenStudio.

Modélisation

  • Présentation des outils : Business Modeler, JobDesigner
  • Mise en oeuvre des principales connexions.
  • Intégration de fichiers XML et CSV
  • Etude des composants de transformation.
  • Analyse du code et exécution des jobs.

Optimisation des jobs

  • Utilisation des métadonnées, import/export, propagation sur les jobs, configuration de connexions réutilisables
  • Stockage des variables de contexte dans les fichiers .properties et .ini

Liens avec les bases de données

  • Présentation des bases de données supportées
  • Opérations sur les tables,
  • Connexion à un schéma de bases de données
  • Gestion des transactions
  • Utilisation de SQLBuilder pour créer des requêtes

BigData

  • But, présentation des composants BigData,
  • Connexion HDFS, mappage et stockage HDFS
  • Aggregation MapReduce.
  • Jointure Pig
  • Couplage Cassandra.

Traitement de données multi-sources

  • Le composant tMap
  • Mise en oeuvre : création de jointures, transformations à l'aide des variables, expressions et jointures, qualification des données à l'aide de filtres,
  • Génération de sorties multiples
  • Extensions : décomposition de jobs, mise en oeuvre du tRunJob,
  • debugging, analyse des statistiques d'exécution,
  • reporting avec jJasperOutput

 

Méthode pédagogique

Chaque participant travaille sur un poste informatique qui lui est dédié. Un support de cours lui est remis soit en début soit en fin de cours. La théorie est complétée par des cas pratiques ou exercices corrigés et discutés avec le formateur. Le formateur projette une présentation pour animer la formation et reste disponible pour répondre à toutes les questions.

Méthode d'évaluation

Tout au long de la formation, les exercices et mises en situation permettent de valider et contrôler les acquis du stagiaire. En fin de formation, le stagiaire complète un QCM d'auto-évaluation.