Multimodální fúze senzorů C-UAS: Zvýšení situační informovanosti při detekci cílů

Proč multi-modální fúze senzorů v C-UAS

Systémy Counter-UAS (C-UAS) čelí heterogenním hrozbám od mikro-UAV s malým radarovým průřezem po rychlé FPV platformy s nízkou tepelnou stopou a adaptivními rádiovými systémy. Jednotlivé senzory jsou vždy omezeny vlastním „oknem reality“ (např. radar – vynikající dosah, slabá klasifikace; EO/IR – dobrá identifikace, citlivost na počasí; RF – detekce aktivní rádiové komunikace, slepota při tichém režimu). Multi-modální fúze kombinuje komplementární zdroje informací pro spolehlivou detekci, sledování, klasifikaci a rozhodování o protiopatřeních v různých prostředích (městská zástavba, letiště, kritická infrastruktura).

Senzorický ekosystém: modality a jejich silné/slabé stránky

  • Primární radar (X/S/K pásmo): široké pokrytí, schopnost měření rychlosti (Doppler), odolnost vůči světelným podmínkám; citlivost na clutter, omezení při malém RCS a nízkých výškách.
  • Pasivní RF/ESM: detekce, klasifikace a lokalizace rádiových emisí (C2 linky, FPV video, telemetrie); slepota vůči tichým platformám nebo záznamovým letům bez vysílání.
  • EO/IR kamery: vizuální identifikace, klasifikace typů UAV, potvrzení kontaktu; závislost na počasí, kouř/vlhkost, omezení v noci (EO) a při vysokém slunci (IR saturace).
  • Akustické/seismické senzory: nízká cena, detekce blízkosti s typickou signaturou motorů a vrtulí; citlivost na hluk a vítr, účinný dosah desítky až stovky metrů.
  • Sekundární/kooperativní zdroje: ADS-B/Mode-S, U-space/Remote ID, Wi-Fi/Bluetooth fingerprinting, data ze sítě terénních senzorů (barikády, ploty).
  • Lidar a multistatické radary: přesná poloha na krátkou vzdálenost, vhodné pro finální navedení efektoru; omezený dosah a náklady.

Úrovně fúze: od dat k rozhodnutí

  • Úroveň snímků (raw data level): spojování dopplerových kubů, spektrogramů či obrazových tenzorů; náročné na šířku pásma a synchronizaci, nejvyšší teoretický výkon.
  • Úroveň detekcí (feature/measurement level): fúze bodových měření (dosah, azimut, elevace, rychlost, RSSI, bearing-only) přes filtry a asociaci; nejčastější kompromis.
  • Úroveň tras (track-to-track): konsolidace lokálních tras z více uzlů; nižší datový tok, řešení korelace a biasů.
  • Úroveň rozhodnutí: hlasování a logika pravidel/pravděpodobností nad výstupy třídičů a trackerů (např. „ROE – Rules of Engagement“).

Kalibrace, časování a registrace senzorů

  • Prostorová registrace: odhad rigidních transformací mezi senzory (EO-to-radar, orientace RF pole). Nutná geometrická kalibrace (intrinsic/extrinsic) a mapování do jednotného georeferenčního rámce (WGS-84/UTM).
  • Časová synchronizace: PTP/NTP, GNSS PPS; kompenzace latencí (sensor-to-bus-to-fusion) a časové značky s jitterem.
  • Bias a drift: odhad systematických chyb (bearing bias RF, kompas, boresight EO) jako součást stavu filtru (augmentovaný stav).

Detekce a segmentace cílů v jednotlivých modalitách

  • Radar: CFAR (CA/GO/SO-CFAR), mapování hot-cells, odstranění pozadí (STAP), mikrodoppler signatury vrtulí pro odlišení ptactva.
  • RF: spektrální a časovo-frekvenční analýzy, modulace/struktura rámců, fingerprinting protokolů (OFDM, analog FPV), TDOA/DF pro geolokaci.
  • EO/IR: detektory objektů (anchor-free/anchor-based), multi-scale pyramidy, termální kontrasty vrtulí/motorů; optický tok na krátké vzdálenosti.
  • Akustické: gammatónové banky, MFCC, korpusy zvuků vrtulí, beamforming pro průnik směrovosti.

Asociace měření a multi-target sledování

V prostředí s clutterem a roji je data association rozhodující. Používají se:

  • Gating a assignment: eliptické gatingy dle inovační kovariance, Nearest Neighbor (NN), Probabilistic Data Association (PDA/JPDA).
  • Hypotézové trackery: Multiple Hypothesis Tracking (MHT), Multi-Bernoulli/PHD/CPHD filtry pro hustotní přístupy.
  • Filtry: Kalman/Extended/Unscented, Interacting Multiple Model (IMM) pro přepínání režimů (rovinný let, manévr, klesání), Particle Filter pro bearing-only.
  • Track management: logika birth/confirmation/death, skórovací pravidla (N-out-of-M), fúzní „track score“ s penalizací falešných poplachů.

Multimodální klasifikace a identifikace

  • Feature-level fúze: spojení RF fingerprintů, mikrodoppleru a vizuálních deskriptorů do společného embeddingu.
  • Decision-level fúze: bayesovské kombinování posteriorů (na úrovni cílových tříd: UAV/PTÁK/PLAST), kalibrace pravděpodobností (Platt/Isotonic).
  • Učení: self-supervised pro redukci anotací, domain adaptation pro přenos mezi lokalitami, open-set recognition pro nové typy UAV.

Architektury C-UAS: centralizovaná, distribuovaná a hierarchická fúze

  • Centralizovaná: všechny senzory do jednoho fúzního uzlu; vysoká kvalita, vyšší nároky na propustnost a SPOF.
  • Distribuovaná: lokální trackery a track-to-track fúze; nižší datový tok, nutnost korelace a řešení závislostí měření.
  • Hierarchická edge-to-cloud: předzpracování a detekce na okraji (edge GPU/FPGA), centrální multi-senzorová korelace a C2; messaging DDS/MQTT/ROS 2 s QoS.

Měření výkonu: detekce, sledování, klasifikace

Oblast Metrika Popis Cílové pásmo
Detekce PD, FAR, ROC/PR Pravděpodobnost detekce vs. falešné poplachy PD > 0,9 při FAR < 10−5/gate/s
Sledování OSPA, MOTA/MOTP Přesnost polohy a konzistence tras OSPA < 25 m na 1 km, MOTA > 0,8
Latence E2E delay Senzor → fúze → C2 → efektor < 300 ms (krátký dosah)
Klasifikace F1/AUROC Rozlišení UAV vs. pták vs. jiné F1 > 0,9

Robustnost vůči protiopatřením a rušení

  • RF ticho a frequency hopping cíle: kombinace pasivního RF s radar/EO, použití časově-prostorové koherence.
  • GNSS spoofing/jamming v prostředí: necitlivé metriky (bearing-only, mikrodoppler), robustní časování (PPS-less režimy, relativní hodiny).
  • Optické maskování: IR spektrum, polarizační filtry, temporal-difference detekce.
  • Adverzariální ML: odolné architektury (ensemble, randomized smoothing), monitoring driftu a confidence skóre.

Geo-fúze a využití mapových podkladů

  • 3D mapy a DEM: maskování horských hřebenů pro radar, viditelnost optiky, bezletové zóny.
  • Semantika prostoru: koridory letišť, průmyslové zóny, migrační trasy ptáků – redukce falešných poplachů.
  • Počasí: integrace větru/deště/opylení do priorit detekce a plánování efektorů.

Fúzní algoritmy: pravděpodobnostní a pravidlové přístupy

  • Bayesovská fúze: kombinace likelihoodů s váhami podle kvality (SNR, viditelnost, meteo), Dempster-Shafer pro neúplné informace.
  • Grafické modely: faktografické grafy pro spojování modalit a prostorově-časových závislostí.
  • Pravidlové systémy/ROE: deterministické prahy (např. „RF+Radar+EO potvrzeno = autorizace eskalace“), auditovatelnost.

Integrace do C2 a rozhodování o efektorech

  • Stavy cíle: DETEKOVÁNO → SLEDOVÁNO → KLASIFIKOVÁNO → ZHODNOCENO JAKO HROZBA → MOŽNÉ ZASAHNOUT.
  • Efektory: soft-kill (RF jamming, link-interdiction), navádění EO/IR gimbalu, hard-kill (kinetické/nezabíjející) podle ROE a legislativy.
  • Prioritizace: multi-objective skórování (blízkost k chráněné zóně, rychlost, směr, klasifikace typu).

Využití rojových a formációvých indikátorů

  • Koherence pohybu: skupinový směr/rychlost, párové vzdálenosti, spektra manévrů.
  • RF korelace: sdílené kanály, synchronizované bursty; většinou signál na command & control úrovni.
  • Fúzní „swarm score“: agregovaná míra rojového chování pro eskalaci reakce.

Testování, V&V a metodiky hodnocení

  • Simulace a HIL: syntetické radarové kuby, RF kanály s vícestazností, fotorealistické EO/IR scénáře; validace na reálných záznamech.
  • Kampaně sběru dat: různé typy UAV, trajektorie, meteo, terény; anotace synchronizovaná napříč modalitami.
  • Reprodukce a audit: verzování datasetů, lineage modelů, konzervativní baseline.

Kybebezpečnost fúzního řetězce

  • Integrita telemetrie: podpisy/šifrování na lince sensor→edge→fusion; ochrana proti hijackingu a data poisoning.
  • Hardening uzlů: minimalizovaný OS, lockdown portů, certifikace bootu, nejnižší potřebná oprávnění.
  • Zero-trust v síti: segmentace, mTLS, rotace klíčů, SIEM korelace.

Provozní scénáře nasazení

  • Letiště: radar + EO/IR věž + RF/RemoteID; nízká latence, vysoká přesnost třídění ptactva vs. UAV.
  • Městská centra: pasivní RF + EO na střechách, doplněno krátkodobým radarem; vysoký clutter.
  • Kritická infrastruktura: perimetrické akustické pole + radarové sektory + RF triangulace; odolnost vůči počasí.

Dobře nastavené prahy a adaptivní politiky

  1. Normalizovat skóre podle kvality zdroje (SNR, meteo, vzdálenost, úhel náběhu).
  2. Uplatnit hysterézi a time-consistency (N-z-M potvrzení) před eskalací stavu cíle.
  3. Adaptivní prahy podle denní doby, migrace ptactva a lokálního ruchu.

Typické úskalí a jak se jim vyhnout

  • Chybné zarovnání: malé boresight chyby způsobí velké fúzní chyby na dálku; průběžná autokalibrace.
  • Přetížení linky: raw-level fúze bez edge předzpracování; řešení: lokální detekce a komprese.
  • Model drift: sezónnost akustiky, nové RF protokoly; kontinuální učení s kontrolou kvality.
  • Přehnaná reliance na jednu modalitu: sensor dropout musí mít definované degradační módy.

Referenční fúzní pipeline (ilustrativní)

  1. Edge detekce: CFAR (radar), RF signalizer, EO detekce objektů – export měření s časem a kovariancí.
  2. Fúzní uzel: asociace (JPDA), filtrování (IMM-EKF/UKF), správa tras, výpočet „threat score“.
  3. Klasifikace: multimodální embeddingy a rozhodovací fúze (Bayes/ensemble) s kalibrací pravděpodobností.
  4. C2 rozhraní: vizualizace tras, alarmy, ROE automatizmus, logování pro audit a školení.

Organizační a legislativní aspekty

  • Pravidla nasaz