Analyse vidéo géolocalisée et mesure des distances entre objets

Thu, 01 Jan 2026 00:00:00 +0000

Contexte

Les sites industriels sont souvent couverts par des caméras fixes dont les images ne sont consultées qu’après un incident et ne produisent aucune donnée exploitable. L’objectif était de transformer les caméras existantes, ainsi que des prises de vue ponctuelles par drone, en instrument de mesure : pour chaque objet détecté, une position en latitude/longitude et des distances métriques plutôt qu’une boîte en pixels.

La difficulté tient à trois raisons. Une caméra unique ne donne pas de profondeur, si bien que l’échelle de la scène doit être inférée. La méthode de géoréférencement habituelle, une homographie du plan du sol, suppose un sol plat et échoue silencieusement pour les objets surélevés ou les terrains irréguliers. Enfin, la vidéo haute résolution est coûteuse à traiter, et le raccourci courant consistant à réduire l’image à 640 px élimine le détail géométrique dont dépendent les positions au sol.

Approche

flowchart TB
 A["Source vidéo
fichier · RTSP · séquence drone (jusqu'à 3840×2160)"] --> B["Détecteur d'objets en résolution native
détection · segmentation · pose · OBB"]
 A --> C["Modèle de profondeur monoculaire métrique
carte de profondeur"]
 B --> D["Suivi multi-objets
modèle de mouvement + association"]
 B --> E["Profondeur par objet
pixels du masque, rejet des aberrants"]
 C --> E
 E --> F["Lancer de rayon
rayon pixel + profondeur métrique + pose caméra"]
 F --> G["Position WGS84
MNT optionnel pour l'altitude du sol"]
 E --> H["Distances 3D
entre masques · le long des trajectoires"]
 D --> H
 G --> I["Stockage SQLite
détections · pistes · trajectoires GPS"]
 H --> I
 I --> J["Analyses
zones · flux · superposition sur orthophoto"]

Méthodes

Détection. Un détecteur de la famille YOLO, en plusieurs tailles de modèle, dans quatre modes (détection, segmentation, pose, boîtes orientées). L’inférence s’exécute en résolution native, sans imgsz imposé. La segmentation est le mode par défaut, car les masques fournissent des échantillons de profondeur plus propres que les boîtes. Les poids PyTorch, ONNX, TensorRT et CoreML sont acceptés (CUDA et Apple MPS).
Profondeur monoculaire. Un modèle de profondeur monoculaire métrique prédit une carte de profondeur, rééchantillonnée à la taille de l’image. La profondeur de chaque objet est une estimation robuste sur les pixels de son masque, après rejet des valeurs aberrantes. Une étape de validation compare la profondeur prédite à des zones de référence dont la distance est connue, afin de détecter une dérive de calibration.
Géolocalisation par lancer de rayon. Un rayon est lancé depuis le centre de la caméra à travers le pixel de l’objet et arrêté à la profondeur métrique de celui-ci. Le point obtenu est converti du repère caméra vers un repère local Nord-Est-Bas, puis en WGS84. Contrairement à une homographie, cette méthode ne suppose pas un sol plat. Un MNT optionnel fournit l’altitude du sol. Les positions peuvent être superposées à une orthophoto géoréférencée pour un contrôle visuel.
Suivi. Un module de suivi multi-objets sur mesure, avec un modèle de mouvement, une association tenant compte de la confiance et une étape de fusion des pistes qui relie les fragments selon des seuils d’intervalle, de cap et de vitesse. Lorsque la profondeur est disponible, chaque piste conserve une trajectoire 3D, dont sont déduites la distance parcourue et la vitesse en m/s.
Distances entre objets. Fonction consolidée ultérieurement dans une bibliothèque de vision réutilisable. Deux objets segmentés sont rétroprojetés en 3D, et la distance minimale point à point est retournée. Des masques qui se chevauchent sont considérés comme en contact. Une simulation de Monte-Carlo perturbe la profondeur, la focale et les positions des pixels pour fournir un écart-type et un intervalle à 95 %. L’appartenance à une zone repose sur la part du masque située dans la zone, avec hystérésis, plutôt que sur un test du point central.
Ingénierie. La configuration permet une répartition sur deux GPU (détection sur un périphérique, estimation de la profondeur sur l’autre), la découverte et l’enregistrement de flux RTSP, ainsi que le traitement de plusieurs caméras en parallèle.

Résultats

Mesures effectuées sur une seule NVIDIA RTX 5090. Le banc d’essai de détection ne couvre que la détection et le suivi, profondeur désactivée.

Configuration	Vidéo	Débit	Sortie
Plus gros détecteur, batch 1	3840×2160, 50 fps, 3 301 images	5,1 fps	320 217 détections, 1 941 pistes
Plus petit détecteur, batch 1	3840×2160, 50 fps	13,0 fps	158 989 détections, 908 pistes
Plus gros détecteur, batch 1	2304×1296, 15 fps, 5 000 images	17,9 fps	73 502 détections, 2 706 pistes
Plus petit détecteur, batch 1	2304×1296, 15 fps	39,0 fps	51 890 détections, 1 499 pistes
Chaîne complète (détection + profondeur + suivi + stockage)	2304×1296, 300 images	2,02 fps	12,3 détections par image

Sur l’exécution de la chaîne complète, l’estimation de la profondeur a pris 117,6 s sur 148,3 s au total (environ 80 %), et la détection 20,9 s. Le goulot d’étranglement est l’estimation de la profondeur, et non le détecteur. Sur des vidéos 4K, le plus gros détecteur tourne environ dix fois plus lentement que le temps réel. Cela convient à l’usage visé, à savoir l’analyse d’archives enregistrées et non l’alerte en direct.

Limites & suite

Aucune précision de géolocalisation n’a encore été mesurée par rapport à une vérité terrain levée. L’étape de lancer de rayon a été ajoutée après les mesures de temps ci-dessus ; son coût n’y est donc pas inclus.
L’échelle métrique dépend du modèle de profondeur ainsi que de la pose et des paramètres intrinsèques de la caméra. Les erreurs d’inclinaison ou de focale se répercutent directement sur les positions au sol.
Le modèle de profondeur prédit à sa propre résolution interne : le détail fin de la profondeur reste limité, même lorsque la détection s’exécute en 4K.
Suite : une étude de précision avec des cibles levées au GNSS, le profilage de la répartition sur deux GPU, et la mesure de la justesse des intervalles de distance Monte-Carlo sur des objets à écartements connus.

Stack technique

Python · PyTorch · OpenCV · NumPy · SciPy · pyproj · rasterio · SQLite · CUDA · Apple MPS