Une analyse du contexte
Le LVLM distingue une recharge normale d'une attaque. Sur les scènes testées, l'usage normal d'une borne n'a pas déclenché d'alerte.
Une vidéosurveillance qui analyse ce qu'elle filme et qui alerte en cas de coupe de câble ou de dégradation d'une borne de recharge.
Le problème
Une borne hors service coûte cher à réparer et pénalise les utilisateurs. La vidéosurveillance classique enregistre, mais personne ne regarde les images en direct, et la détection de mouvement génère beaucoup de fausses alertes.
L'approche
Un mini-PC branché sur les caméras IP existantes détecte et suit les personnes sur place. Seules les scènes suspectes sont envoyées à un LVLM, qui regarde le contexte (capuche, absence de véhicule, câble manipulé, coffre ouvert…) et explique sa décision.
Il n'y a pas de caméra à remplacer.
Pipeline
Flux RTSP H.264 / H.265, multi-caméras, ajout à chaud.
YOLO26 fine-tuné + suivi d'identité BoT-SORT avec ReID.
Polygones autour des bornes, nouvelle personne, minuterie, anti-doublon.
Visages floutés sur site avant tout envoi (YuNet).
Gemini ou Mistral : description, verdict et score de fiabilité en JSON.
Capture marquée « ALERTE » dans l'interface de supervision.
Pourquoi c'est différent
Le LVLM distingue une recharge normale d'une attaque. Sur les scènes testées, l'usage normal d'une borne n'a pas déclenché d'alerte.
YOLO26s entraîné sur des jeux de données fusionnés et remappés vers 10 classes propres à la sécurité des bornes.
Les visages sont floutés sur place avant tout envoi. Mistral peut être utilisé comme alternative européenne.
Détection automatique du mode nuit / infrarouge et adaptation de la capture.
Choix du modèle et consignes d'analyse modifiables depuis l'interface, caméra par caméra.
Compatible caméras IP RTSP. Un mini-PC Edge sur site (Apple Silicon ou AMD64) fait le travail.
Feuille de route
Stack