Aller au contenu

Furious Ducks - Workflow CI/CD industrialisé

Conception d'un workflow CI/CD complet basé sur Docker pour industrialiser la production d'une agence digitale fictive de 45 collaborateurs : pipelines automatisés (build, tests, sécurité, déploiement) sur trois environnements, monitoring, backups et transition vers l'Agile Scrum. Projet de fin d'année, livré avec sa propre infrastructure déployée pour la soutenance.

Docker Jenkins GitLab CE Traefik Harbor SonarQube Prometheus Grafana Loki Restic

Contexte

Second volet du projet de fin d'année mené au sein de l'agence fictive "Furious Ducks", cette fois côté organisation interne plutôt que côté client.

Le constat de départ : une agence de 45 collaborateurs qui a grandi plus vite que ses pratiques de production. Sans versionning centralisé, sans backups automatisés et sans tests, chaque mise en production manuelle concentre un risque d'erreur humaine, et les anomalies ne remontent qu'une fois en production. La direction a confié à l'équipe une mission en deux volets : faire évoluer la méthodologie de gestion de projet (du cycle en V vers l'Agile Scrum) et concevoir un workflow de production industrialisé, entièrement basé sur Docker, capable de couvrir tous les projets de l'agence quelle qu'en soit la nature.

En tant que Développeur Lead, j'ai conçu l'architecture du workflow et justifié l'ensemble des choix techniques. Le projet [Thé Tip Top](/projects/furious-ducks-thetiptop) a servi de projet pilote pour éprouver ce workflow dans des conditions réelles avant sa généralisation à l'agence.

Ce que fait l'application

  • Pipeline CI/CD automatisé de bout en bout :
  • Déclenchement automatique à chaque push/merge via webhooks GitLab
  • Build des images Docker, tests (unitaires, intégration, E2E), scans qualité et sécurité
  • Publication versionnée des artefacts dans un registre centralisé
  • Déploiement automatique en DEV, contrôlé en PREPROD, validé manuellement en PROD
  • Trois environnements strictement séparés (DEV / PREPROD / PROD) avec parité de configuration entre PREPROD et PROD
  • Sécurité intégrée au pipeline (DevSecOps) : scan de vulnérabilités des images, audit des dépendances, détection de secrets
  • Monitoring et alerting proactifs sur l'ensemble des services
  • Sauvegardes automatisées avec politique de rétention Grandfather-Father-Son
  • Transition méthodologique du cycle en V vers l'Agile Scrum, articulée avec le rythme des pipelines

Décisions techniques

Reverse proxy - Traefik
  • Point d'entrée unique du workflow : routage automatique vers les conteneurs (SCM, CI, registry, monitoring) via labels Docker Compose
  • HTTPS systématique avec certificats Let's Encrypt auto-renouvelés, séparation par sous-domaines dédiés (ci., git., registry., monitor.)
  • Middlewares d'authentification et de limitation de débit sur les routes sensibles
SCM - GitLab Community Edition
  • Dépôt central de code, pipelines-as-code et fichiers de configuration ("source of truth" de l'agence)
  • Stratégie GitFlow (main, develop, feature/*, release/*, hotfix/*), branches protégées, Merge Request obligatoire avec au moins une approbation
  • Conventional Commits et Semantic Versioning pour la traçabilité et la génération automatique de changelogs
Orchestration CI - Jenkins
  • Pipelines définis en Jenkinsfile versionnés dans chaque dépôt (Pipeline as Code)
  • Credentials gérés via le Jenkins Credentials Store avec rotation trimestrielle
  • Shared Libraries pour standardiser les étapes communes entre projets sans duplication
  • RBAC à trois rôles : admin CI, mainteneur, développeur
Registry Docker - Harbor
  • Stockage centralisé, signature et scan de vulnérabilités de toutes les images produites
  • Promotion d'une image identique de DEV vers PREPROD puis PROD, sans reconstruction, garantissant la reproductibilité des déploiements
  • Convention de tagging app:version, app:commitSHA, avec politique de rétention et garbage collection
Qualité et sécurité (DevSecOps)
  • SonarQube Community Edition avec quality gates bloquants (couverture minimale, zéro vulnérabilité critique, duplication < 3%)
  • K6 pour les tests de charge en PREPROD avant toute promotion en production
  • Trivy (scan des images), Semgrep (analyse statique SAST) et Gitleaks (détection de secrets, hook pre-commit) intégrés directement dans les pipelines
  • Gestion stricte des secrets : Jenkins Credentials Store pour les secrets CI/CD, credentials distincts par environnement, aucun secret versionné dans Git
Monitoring - Prometheus, Grafana, Loki
  • Prometheus pour la collecte de métriques (CPU, RAM, disque, latence, taux d'erreur)
  • Grafana pour les dashboards standardisés et l'alerting basé sur les symptômes (plutôt que sur les causes)
  • Loki pour l'agrégation et l'interrogation centralisée des logs de l'ensemble des services
Backups - Restic & MinIO
  • Sauvegarde des données, configurations et volumes Docker via Restic, vers un stockage objet S3-compatible MinIO
  • Politique de rétention Grandfather-Father-Son (quotidienne sur 7 jours, hebdomadaire sur 4 semaines, mensuelle sur 6 mois, annuelle sur 2 ans)

Workflow

Le workflow standardise la chaîne de production pour tous les projets de l'agence (sites vitrines, applications web, API, mobile) sans imposer de technologie unique :

1. DEV : intégration continue et tests automatisés à chaque push 2. PREPROD : validation fonctionnelle et technique, recette et tests de charge K6, environnement au plus proche de la production 3. PROD : promotion de l'image Docker validée en PREPROD, sans reconstruction, avec validation humaine

La méthodologie Agile Scrum structure le rythme des sprints, chaque sprint donnant lieu à des livraisons testées et intégrées automatiquement, tandis que le workflow CI/CD automatise et sécurise la chaîne technique correspondante.

Monitoring

La supervision proactive remplace une exploitation jusque-là réactive (incidents découverts en premier par le client) :

• Prometheus / Grafana pour les métriques techniques et applicatives, avec alerting sur les symptômes (latence, taux d'erreur, saturation) • Loki pour la journalisation centralisée • Vérification d'intégrité hebdomadaire des sauvegardes et test de restauration documenté