Caribbean AI Association
Retour aux archives
Dominique / Document de travail

Effet des nuages sur l’évaluation des systèmes de détection des dégâts cycloniques en Dominique

Analyse de sensibilité par paroisse après le passage de l’ouragan Maria en 2017

Auteur principal · Adrian Dunkley   |   2026-11-20   |   v1.0

En termes simples

Après Maria, les nuages cachaient 1 166 bâtiments cartographiés. Plus de la moitié se trouvaient à Saint Patrick. [1]

Un logiciel qui déclarerait tous les bâtiments visibles endommagés retrouverait trois étiquettes sur quatre. Il se tromperait sur chaque bâtiment sans marque de dégâts. Pour le tester, il faut compter les deux types d’erreurs et indiquer les endroits où les nuages cachent la réponse.

Structures cartographiées masquées par les nuages

% des structures cartographiées
St Andrew0.74
St David1.44
St George0.35
St John0.26
St Joseph1.85
St Luke0.49
St Mark8.25
St Patrick13.34
St Paul4.75
St Peter0.63
Chaque proportion utilise l’inventaire de sa paroisse comme dénominateur. La même valeur donne la largeur de l’intervalle de la part signalée, en points de pourcentage. Source [1].

Étapes de l’analyse

  1. Compter les structures
  2. Isoler les structures visibles
  3. Encadrer les étiquettes inconnues
  4. Comparer les paroisses
Lire l’étude complète

Les nuages peuvent masquer des lacunes locales dans une carte des dégâts. À partir des dix paroisses de la carte publiée en octobre 2017 par UNOSAT et Copernicus, nous avons étudié la couverture des données de référence pour la vision par ordinateur. Les images couvraient 37 368 des 38 534 structures cartographiées. Parmi les 1 166 structures hors de la zone visible, 636 se trouvaient à Saint Patrick. À étiquettes visibles constantes, la part des structures susceptibles d’être signalées pour dégâts va de 73,46 % à 76,49 % sur l’île. À Saint Patrick, l’intervalle atteint 13,34 points. Ces bornes concernent les étiquettes de l’inventaire. La mesure des dégâts matériels exigerait des inspections sur place. [1]

Question de recherche

Dans quelle mesure les structures invisibles peuvent-elles modifier la proportion marquée pour dégâts possibles ? Où ces lacunes pèsent-elles le plus dans un test de classification d’images ?

Données et méthodes

Pour chaque paroisse, nous avons relevé l’effectif de l’inventaire, les structures visibles et celles signalées pour dégâts possibles sur la carte du 18 octobre 2017. UNOSAT a combiné son interprétation avec celle de Copernicus à partir d’images de plusieurs dates. Chaque contour correspond à une structure cartographiée. Pour cette analyse, une structure visible porte ou non une marque de dégâts possibles. L’étiquette des structures cachées reste inconnue. [1]

Avec N structures cartographiées, V visibles et A signalées, la proportion signalée parmi les visibles vaut A/V. Sur tout l’inventaire, elle se situe entre A/N et (A + N − V)/N. La première borne ne marque aucune structure cachée, la seconde les marque toutes. Nous avons additionné les effectifs avant de calculer les bornes pour l’île. Aucune hypothèse sur la localisation des dégâts sous les nuages n’est nécessaire.

Résultats

La carte signale 28 309 structures sur 37 368 visibles. Un système qui signalerait toutes les structures visibles serait en accord avec la carte dans 75,76 % des cas. Il ne reconnaîtrait aucune des 9 059 structures visibles sans marque. Ce score de référence ne demande aucun entraînement. [1]

Saint Patrick regroupe 54,55 % des structures cachées. La part signalée y atteint 72,99 % parmi les visibles. Les bornes pour l’inventaire entier sont de 63,26 % et 76,59 %. Saint Mark présente le deuxième intervalle le plus large, à 8,25 points. Saint John présente le plus étroit, à 0,26 point. Arrondir chaque borne séparément peut modifier la largeur affichée de 0,01 point. [1]

Discussion

Pour évaluer un classificateur, il convient de publier la couverture de chaque paroisse et les erreurs séparées pour les structures visibles avec et sans marque. Un système qui prédit des dégâts partout peut obtenir un score élevé. Il faut une autre image ou une visite sur place pour attribuer une étiquette de référence aux structures cachées. L’étude xBD distingue aussi les indices visibles sur image des constatations sur place. [2]

Limites

Les bornes tiennent fixes les étiquettes visibles et l’inventaire de 2017. Elles laissent de côté les bâtiments absents, les erreurs cartographiques, les écarts entre dates de prise de vue et les dégâts sous les toits. Lors de sa publication, l’évaluation était préliminaire et n’avait pas été validée sur le terrain. Les décomptes par paroisse ne contiennent pas de prédictions individuelles d’un modèle. Ils ne permettent de déterminer ni sa sensibilité ni l’état d’un bâtiment précis. [1]

Reproduire l’analyse

Relever dans la source [1] les trois effectifs de chaque paroisse.

Soustraire l’effectif visible de l’inventaire pour obtenir l’effectif masqué. Diviser par l’inventaire et multiplier par 100 pour obtenir le chiffre du graphique.

Pour la borne basse, diviser l’effectif signalé par l’inventaire. Pour la borne haute, ajouter l’effectif masqué au numérateur. Refaire le calcul avec les totaux des colonnes.

Tableau de données
ParoisseStructures cartographiéesStructures visiblesStructures signalées pour dégâts possibles
Saint Andrew621061645505
Saint David396739103357
Saint George878887575691
Saint John339833892246
Saint Joseph401039363269
Saint Luke820816590
Saint Mark1043957597
Saint Patrick476841323016
Saint Paul457043533218
Saint Peter960954820

Références

  1. UNITAR–UNOSAT and Copernicus (2017). Buildings Damage Assessment & Related Density in Dominica: Analysis by Parish, 18 October, version 1.0. Parish table.
  2. Gupta et al. (2019). Creating xBD: A Dataset for Assessing Building Damage from Satellite Imagery. CVPR Workshops.

Crédits des données · UNITAR–UNOSAT / Copernicus, 18 October 2017. Parish totals; CAIA calculations. Source map: CC BY-NC 3.0.

Télécharger les données et le code d’analyse (ZIP)

Document de travail · Vérification interne · Comment nous vérifions les études