Det nye værktøj er designet til at hjælpe operatører med at sætte alarmer i kontekst og fokusere på det, der virkelig betyder noget. Løsningen automatiserer videogennemgang, filtrerer falske alarmer fra og kan ifølge de første resultater reducere operatørernes “alarmtræthed” med op til 30 %. En betaversion blev præsenteret på Smart City Expo World Congress i Barcelona tidligere på måneden, og den fulde version forventes frigivet senere i år.

Hurtigere overblik over mere video

Dagens videosystemer indsamler enorme mængder data, men gennemgangen af optagelser er stadig tidskrævende og i høj grad manuel. Milestones nye XProtect-plugin adresserer denne udfordring ved at udnytte generativ AI til automatisk at opsummere, sætte i kontekst og validere videoindhold i realtid.

Det hjælper teams med at reagere hurtigere, håndtere video mere effektivt og reducere træthed forårsaget af gentagne alarmer.

De vigtigste funktioner omfatter:

• Automatiske hændelsesrapporter: Udvalgte videoklip omdannes straks til hændelsesresuméer og strukturerede rapporter, hvilket reducerer den tid operatørerne bruger på dokumentation
• Hændelsesvalidering: Plug-innet kan konfigureres til at analysere bevægelseshændelser og validere alarmer, så falske positiver reduceres og alarmhåndteringen forbedres. Denne funktion er fuldt integreret i XProtects regelmotor
• Kontekstuelle bogmærkeresuméer: Bogmærkede optagelser opsummeres automatisk med naturlig sprogoutput, så man hurtigt kan danne sig et overblik uden at gennemse hvert klip manuelt.

Plug-innet integreres direkte med XProtects regelmotor og kan implementeres både lokalt (on-premises) og i skyen, hvilket giver fleksibilitet i forhold til overholdelse og udrulning.

Bygget på etisk AI og trænet på virkelige data

Den nye løsning er baseret på Milestones Hafnia Vision Language Model (VLM), der er trænet på 75.000 timers etisk indsamlet, virkeligt videomateriale fra enten Europa eller USA.

Dataforberedelsen håndteres med Nvidia Cosmos Curator, og modellen kan køre enten i skyen eller i regionale datacentre drevet af Nvidia-teknologi.

Den anvender Nvidia Cosmos Reason VLM, hvilket gør den til en af de mest avancerede og lovmedholdelige video-AI-platforme i branchen.

Thomas Jensen, CEO for Milestone Systems, siger:

- Med dette nye XProtect-plugin gør vi avanceret videointelligens tilgængelig for byer, organisationer og operatører overalt, der administrerer trafiksystemer – og hjælper dem med at opnå nye niveauer af effektivitet, sikkerhed og indsigt.

- XProtect-brugere får adgang til førende generative AI-funktioner, og vores partnere kan bygge videre på disse nye muligheder. Det markerer et afgørende skridt i vores mission om at transformere, hvordan verden håndterer og lærer af visuelle data – ansvarligt og i stor skala.

Byer som Genova (Italien) og Dubuque (Iowa, USA) er blandt de første, der tester de nye funktioner for at forbedre deres trafikstyring gennem avanceret videoanalyse.

Fremmer innovation i økosystemet med VLM-as-a-Service

Ifølge Milestone er dette plugin kun begyndelsen:

Virksomheden introducerer også en VLM-as-a-Service via API’er, som gør det muligt for udviklere, integratorer og partnere at bygge deres egne generative AI-løsninger – uanset hvilket videoovervågningssystem de bruger.