Suivre le Vendée Globe 2024 depuis un SIG - Partie 2#
Date de publication initiale : 18 décembre 2024
Résumé de la Partie 1#
Dans le premier article, que je vous invite à consulter si ce n'est pas déjà fait, avant de lire celui-ci, nous avions abordé les étapes techniques nécessaires à l'exploitation du tableur Excel officiel des pointages émis par l'organisation. Le but était de construire des données SIG à partir de ceux-ci qui sont publiés toutes les quatre heures. Pour cela je vous avais présenté une série de script Python qui permet le téléchargement automatisé des fichiers Excel, leur nettoyage, préparation des données, la conversion des coordonnées DMS en degrés décimaux, ainsi que la création des géométries pour tracer les points et les trajectoires des bateaux.
Dans cette seconde partie, nous allons voir les suites que j'ai apportées à ce projet.
Spoiler : CI/CD et cartographie web.
Mise en musique de la construction des données SIG dans un pipeline de CI/CD#
C'est quoi la CI/CD ?
La CI/CD (Intégration Continue et Déploiement Continu) est une méthodologie utilisée dans le développement logiciel pour automatiser le cycle de vie des applications. Elle permet de tester, intégrer et déployer du code de manière régulière grâce à des pipelines automatisés.
Le pipeline#
Pour automatiser la génération des données SIG présentée dans le premier article, j'ai opté pour la mise en place d'un pipeline CI/CD.
Les fichiers Excel officiels étant publiés sur une base régulière, le processus de téléchargement, nettoyage et conversion en formats SIG (GeoJSON et GeoPackage) est planifié.
Grâce à ce système, j’ai pu garantir une actualisation continue et fiable des données géographiques sans intervention manuelle, tout en rendant les résultats immédiatement exploitables dans des outils cartographiques, ouvrant de nouvelles possibilités.
Dans mes activités professionnelles, j'utilise plus la CI/CD de GitLab que celle de GitHub, c'était donc pour moi un peu une découverte, mais j'ai réussi à m'en sortir en regardant des pipelines existants et en consultant la documentation.
Ce pipeline se trouve dans le fichier .github/workflows/pointages.yml du projet GitHub.
Sans rentrer dans une explication détaillée de ce code, globalement ce pipeline exécute trois "jobs", qu'on pourrait appeler trois étapes.
generate: ce job installe les dépendances Python puis exécute les scripts qui permettent de télécharger les tableurs Excel des pointages pour les convertir en données SIG. En somme, ce qui est décrit dans l'article précédent.release: ce second job publie les données SIG dans une release GitHub, cette partie est détaillée plus tard dans l'article.update-files: ce dernier job commit et push les données SIG dans le projet afin d'avoir une URL fixe pour les utiliser dans l'application web. Ce job est amené à disparaitre pour être intégré au job de déploiement de l'application web dans GitHub Pages.
En haut du pipeline, on peut voir ce format de morceau de code.
C'est dans cette partie qu'est planifiée l'automatisation, il s'agit d'un cron, pour plus d'informations sur cette syntaxe, je trouve cette documentation bien faite. Ici le script s'exécute chaque jour à 3h30, 7h30, 11h30...
Attention sur l'heure
Les heures qu'on indique sont des heures GMT 0 (heure de Greenwich) dans mon exemple il y a donc un décalage de +1h avec l'heure de Paris (GMT+1).
Release automatique#
C'est quoi une release ?
Une release est le terme pour désigner la publication d'une version d’un projet informatique. Sur les plateformes de forge logicielle comme GitLab et GitHub entre autres, elle sont liées généralement liées à une étiquette apposée sur un commit (git tag) et enrichies d'une description des changements (release notes) et de fichiers livrés : artefacts générés par la CI/CD, exécutables, binaires, données etc.
Chaque fois que le pipeline est exécuté, les dernières données écrasent les précédentes. Plus précisément, la dernière release est supprimée, et une nouvelle portant le même nom (latest) est créée. Il n'y a donc qu'une seule release des données disponible à cette adresse. Tous les quatre heures, vous pouvez ainsi télécharger les dernières données d'avancement de la course.
L'intérêt est donc de pouvoir récupérer les données sans avoir à cloner le projet, installer les dépendances et lancer les scripts pour construire les données, c'est la magie de la CI qui s'occupe de tout ça !
Interroger directement la release depuis QGIS#
Vous pouvez même charger ces données directement dans QGIS sans avoir à télécharger le fichier manuellement.
Pour cela dans votre QGIS rendez-vous dans le menu Couche puis Ajouter une couche et enfin Ajouter une couche vecteur
Dans la fenêtre qui s'affiche, dans le champ Jeux de données vectorielles vous pouvez coller une URL de fichier qui provient de la release.
On va donc y mettre l'URL du fichier latest_data.gpkg qui contient la couche des pointages et celle des trajectoires.
Après un temps de chargement (le temps que QGIS télécharge le fichier dans le cache) les données vont apparaître.
Ou plus simplement, télécharger et ouvrir le projet QGIS :
Visualiseur cartographique web#
Cette carte est basée sur les données générées par la CI, ce n'est donc pas du temps réel, mais un aperçu du dernier pointage. Les données sont donc automatiquement mises à jour toutes les 4h, là encore, c'est la magie de la CI qui permet ça.
Transparence sur le développement
Le développement web n'étant pas mon domaine de prédilection même si j'ai acquis les bases il y a quelques années lors de la formation au master SIGAT. Je me suis donc aidé de l'intelligence artificielle pour le développement de la partie JavaScript et CSS comme indiqué dans le readme.
D'un point de vue technique, elle se base sur Maplibre, il s'agit d'une bibliothèque JavaScript open-source de cartographie web permettant de créer des cartes interactives personnalisées à partir de données géospatiales.
Par défaut aucune trace n'est affichée, il faut alors cliquer sur les concurrents de votre choix dans la barre de gauche (ils sont classés dans l'ordre de leur position en course), ou bien cliquer sur le bouton Tout afficher.
Au survol d'une trace, un popup avec le temps apparait et des informations complémentaires en haut à gauche, tel que le cap et la vitesse.
Cette application web est encore en phase de développement, j'aimerais encore l'améliorer. Par exemple, actuellement, dans la petite fenêtre qui s'affiche au survol, en haut à gauche, tous les attributs ne sont pas affichés. Comme énoncé plus haut, j'aimerais aussi ne plus lire les données en dur dans le dépôt GitHub, mais j'aimerais tout gérer dans le pipeline de déploiement de la GitHub Pages.
Accéder à la cartographie web du Vendée Globe 2024 
À suivre donc !
Auteur·ice#
Florent FOUGÈRES#
Géographe et Géomaticien de formation issu du Master SIGAT, j'ai commencé ma carrière professionnelle en tant que Géomaticien dans un bureau d'études. Désormais, je travaille chez Oslandia en tant que développeur SIG. Je blog ici sur mon temps libre, sans lien avec mon employeur.
Passionné de géographie, de sport et d'informatique, j'aime jouer avec les données géographiques (open source si possible) pour les traiter et les représenter.
Licence Beerware #
Ce contenu est sous licence Beerware (Révision 42).
Les médias d'illustration sont potentiellement soumis à d'autres conditions d'utilisation.
Réutiliser, citer l'article
Tant que vous conservez cette licence :
- vous pouvez faire ce que vous voulez de ce contenu
- si vous rencontrez l'auteur/e un jour et que vous pensez que ce contenu vaut le coup, vous pouvez lui payer un coup en retour
Citer cet article :
"Suivre le Vendée Globe 2024 depuis un SIG - Partie 2" publié par Florent FOUGÈRES sur Geotribu - Source : https://geotribu.fr/articles/2024/2024-12-18_vendee_globe_donnees_sig_partie2/
Commentaires
Une version minimale de la syntaxe markdown est acceptée pour la mise en forme des commentaires.
Propulsé par Isso.
Ce contenu est sous licence Beerware 