Camptocamp – Formations

Talend Data Integration : traitement de données

Les extensions spatiales sont des solutions d’intégration de données, spécialisées dans la manipulation d’informations géographiques, basées sur la solution Talend DI et couplées aux bibliothèques JAVA GeoTools et JTS.

L’utilisation d’un ETL (Extract Transform Load) rend de grands services pour la manipulation et le traitement de données attributaires et/ou géographiques complexes. Toutes les opérations s’effectuent via une interface graphique conviviale.

Une API JAVA permet également d’étendre les contrôles existants pour développer des traitements métiers spécifiques.

OBJECTIFS

  • Appréhender le mode de fonctionnement d’un ETL : Talend DI
  • Connaître les fonctionnalités, spécificités et limites des extensions spatiales
  • Manipuler des données géographiques dans Talend DI
  • Implémenter, debugger et déployer des Jobs

DURÉE

  • 3 jours (21 heures)

PRINCIPAUX PUBLICS VISÉS

  • Développeurs SIG
  • Responsables SIG

PRÉ-REQUIS

  • Bonnes connaissances en géomatique

VALIDATION VISÉE

  • Attestation de formation

PROGRAMME INDICATIF

  • Présentation de Talend DI et des extensions spatiales
  • Installation de Talend DI
    • Talend
    • Extensions spatiales
    • Installation avancée (GDAL)
    • Mise à jour / Upgrade
  • Introduction à la manipulation de données dans Talend
  • Mise en place de jobs
    • L’interface
    • La configuration
    • Un job simple
  • Présentation des composants
    • Présentation générale des composants de Talend
    • Présentation des composants géographiques
  • Les expressions
    • Simple (concaténation, traitement de champs)
    • Changement de type
    • Fonctions topologiques
    • Fonctions personnalisées
  • Métadonnées et contexte exécution
    • Métadonnées de connexion
    • Métadonnées de structure de données
    • Gestion des contextes d’exécution
  • Mise en place de jobs
    • Génération de jeux de données
    • Comprendre les schémas et méta-données
    • Gérer les accès aux fichiers et aux bases de données (shapefiles, Mif/Mid, csv, xls….)
    • Utiliser les composants géographiques pour transformer ces données (calculs d’aires, de zones tampons, de convexhull, de centroids, d’enveloppes, recherche de voisin…)
  • Debugging et log
    • Débugger rapidement avec le tLogRow
    • Gestion des logs (fichiers, base de données)
  • Export des jobs
    • Ligne de commande
    • Mode web
  • Pratique sur un projet interne à mettre en oeuvre
    • Contexte du projet (présentation par les stagiaires)
    • Modélisation des processus
    • Structuration des jobs, gestion des contextes et des logs

MOYENS TECHNIQUES ET PÉDAGOGIQUES

MOYENS D’ENCADREMENT

  • Formations réalisées par un intégrateur de données

RÉFÉRENCES

  • Agence de l’eau Adour Garonne (FR)
  • Ville de Châtellerault (FR)
  • Parc naturel régional de Lorraine (FR)
  • Pays Viennois (FR)
  • DREAL Occitanie
  • Parc des Cévennes

DATES PRÉVUES

Des dates supplémentaires pourront être programmées selon les demandes (Lausanne, Paris, Toulouse ou Chambéry).

TARIF

  • Sur demande
  • Défiscalisé si formation conventionnée

FORMATIONS COMPLÉMENTAIRES

Cette formation peut être accompagnée de la formation sur Geotools et GDAL/OGR.

Réservation et contact

formation@camptocamp.com