Description
Talend ETL offre la possibilité d’enrichir facilement ses fonctionnalités grâce à l’ajout de nouveaux composants, permettant ainsi la conception de processus de traitement de données complexes. Cette formation vise à maîtriser les fonctionnalités avancées de Talend Open Studio afin de concevoir et déployer des flux de données performants, fiables et optimisés.
À qui s'adresse cette formation ?
Pour qui ?
Cette formation s’adresse aux développeurs, data engineers, consultants BI et administrateurs de données ayant déjà des bases en intégration de données ou en utilisation de Talend Open Studio. Elle est également destinée aux professionnels souhaitant automatiser, optimiser et fiabiliser des flux de données complexes dans un environnement d’entreprise.
Prérequis
Aucun
Les objectifs de la formation
Maîtriser les composants avancés de TOS Savoir intégrer du Java dans les jobs Talend Savoir créer des composants personnalisés Savoir optimiser les performances des jobs Talend Savoir debugger et déployer des jobs en production Connaître la communauté autour de Talend et savoir interagir avec elle
Programme de la formation
- Introduction
- Présentation de Talend Open Studio.
- Rappel des principes des ETL.
- Installation de TOS.
- Utilisation avancée de Talend
- Gestion des contextes et leur utilisation dans les jobs
- Mise en œuvre de transformations de données complexes
- Manipulation de flux de données au format XML
- Utilisation des composants ELT (Extract, Load, Transform)
- Exploitation des expressions régulières pour le traitement des données
- Exercice pratique : association d’un groupe de contextes à un job
- Exercice pratique : utilisation de composants de transformation
- Exercice pratique : génération de fichiers XML à partir de fichiers plats
- Exercice pratique : utilisation des composants ELT avec MySQL
- Java et création de composants
- Présentation des principes d’implémentation en Java dans Talend
- Consultation du code Java généré par un job
- Utilisation des composants Java de Talend
- Utilisation et création de routines
- Étude de l’anatomie et création d’un composant personnalisé
- Exportation d’un composant dans la palette Talend
- Internationalisation des composants développés
- Exercice pratique : utilisation de tMemorizeRows, tJavaFlex et tJava
- Exercice pratique : création et utilisation d’une routine dans un job
- Exercice pratique : développement d’un premier composant
- Modification des fichiers javajet pour étendre les fonctionnalités
- Optimisation des performances et debugging
- Monitorer la performance des jobs.
- Mettre en place son propre système de journalisation.
- Optimiser la performance des jobs.
- Debugging.
- Modifier à chaud les variables en mémoire.
- Exercice: Ajouter des composants de monitoring à un job, mettre en place son système de logs, utiliser les buffers.
- Déploiement en production
- Lancer un job hors de TOS.
- Programmer l'exécution d'un job sous Windows.
- Programmer l'exécution d'un job sous Linux.
- Talend Enterprise et la TAC.
- Exercice: Exporter le premier job créé hors de TOS, planifier l'exécution du job exporté via la planificateur de tâches Windows.
- Pour aller plus loin
- Bonnes pratiques de développement.
- Créer un plug-in Eclipse.
- Intégrer dans Talend Open Studio un plug-in Eclipse.
- Présentation de Talend ESB.
- Présentation de Talend Big Data.
- Exercice: Mutualisation des connexions, utilisation des Rollback.
- Conclusion
- Présentation des ressources sur Talend.
- Valoriser son développement au sein de la communauté Talend.
