Fúze senzorů v C-UAS: multimodální detekce a sledování cílových objektů

Proč multi-modální fúze senzorů v C-UAS

Counter-UAS (C-UAS) systémy čelí heterogenním hrozbám od mikro-UAV s malým radarovým průřezem po rychlé FPV platformy s nízkou tepelnou stopou a adaptivními rádii. Jednotlivé senzory jsou vždy omezeny vlastním „oknem reality“ (např. radar – vynikající dosah, slabá klasifikace; EO/IR – dobrá identifikace, citlivost na počasí; RF – detekce aktivní rádiové komunikace, slepota v tichém režimu). Multi-modální fúze kombinuje komplementární zdroje informací pro spolehlivou detekci, sledování, klasifikaci a rozhodování o protiopatřeních v různých prostředích (městská zástavba, letiště, kritická infrastruktura).

Senzorický ekosystém: modality a jejich silné/slabé stránky

  • Primární radar (X/S/K pásmo): široké pokrytí, schopnost měření rychlosti (Doppler), odolnost vůči světelným podmínkám; citlivost na clutter, omezení u malých RCS a nízkých výšek.
  • Pasivní RF/ESM: detekce, klasifikace a lokalizace rádiových emisí (C2 linky, FPV video, telemetrie); slepota vůči tichým platformám nebo záznamovým letům bez vysílání.
  • EO/IR kamery: vizuální identifikace, klasifikace typů UAV, potvrzení kontaktu; závislost na počasí, kouř/vlhkost, omezení v noci (EO) a při silném slunečním záření (IR saturace).
  • Akustické/seismické senzory: nízká cena, detekce blízkosti s typickou signaturou motorů a vrtulí; citlivost na hluk a vítr, efektivní dosah desítky až stovky metrů.
  • Sekundární/kooperativní zdroje: ADS-B/Mode-S, U-space/Remote ID, Wi-Fi/Bluetooth fingerprinting, data ze sítě terénních senzorů (zábrany, ploty).
  • Lidar a multistatické radary: přesná poloha na krátkou vzdálenost, vhodné pro finální navedení efektoru; limitovaný dosah a náklady.

Úrovně fúze: od dat k rozhodnutí

  • Úroveň surových dat (raw data level): slučování dopplerových kubů, spektrogramů či obrazových tensorů; náročné na šířku pásma a synchronizaci, nejvyšší teoretický výkon.
  • Úroveň detekcí (feature/measurement level): fúze bodových měření (vzdálenost, azimut, elevace, rychlost, RSSI, bearing-only) přes filtry a asociaci; nejběžnější kompromis.
  • Úroveň tras (track-to-track): konsolidace lokálních tras z více uzlů; menší datový tok, řešení korelace a biasů.
  • Úroveň rozhodnutí: hlasování a logika pravidel/pravděpodobností nad výstupy klasifikátorů a trackerů (např. „ROE – pravidla nasazení“).

Kalibrace, časování a registrace senzorů

  • Prostorová registrace: odhad rigidních transformací mezi senzory (EO-to-radar, orientace RF pole). Nutná geometrická kalibrace (intrinsic/extrinsic) a mapování do jednotného georeferenčního rámce (WGS-84/UTM).
  • Časová synchronizace: PTP/NTP, GNSS PPS; kompenzace latencí (sensor-to-bus-to-fusion) a časové značky s jitterem.
  • Bias a drift: odhad systematických chyb (bearing bias RF, kompas, boresight EO) jako součást stavu filtru (augmentovaný stav).

Detekce a segmentace cílů v jednotlivých modalitách

  • Radar: CFAR (CA/GO/SO-CFAR), mapování hot-cells, odstranění pozadí (STAP), mikrodoppler signatury vrtulí pro rozlišení ptactva.
  • RF: spektrální a časově-frekvenční analýzy, modulace/struktura rámců, fingerprinting protokolů (OFDM, analog FPV), TDOA/DF pro geolokaci.
  • EO/IR: detektory objektů (anchor-free/anchor-based), víceúrovňové pyramidy, termální kontrasty vrtulí/motorů; optický tok na krátké vzdálenosti.
  • Akustické: gammatonové banky, MFCC, korpusy zvuků vrtulí, beamforming pro průnik směrovosti.

Asociace měření a multi-target sledování

V prostředí s clutterem a roji je data association rozhodující. Používají se:

  • Gating a přiřazení: eliptické gatingy podle inovační kovariance, Nearest Neighbor (NN), Probabilistic Data Association (PDA/JPDA).
  • Hypotézové trackery: Multiple Hypothesis Tracking (MHT), Multi-Bernoulli/PHD/CPHD filtry pro hustotní přístupy.
  • Filtry: Kalman/Extended/Unscented, Interacting Multiple Model (IMM) pro přepínání režimů (rovinný let, manévr, klesání), Particle Filter pro bearing-only.
  • Správa stop: logika birth/confirmation/death, skórovací pravidla (N-out-of-M), fúzní „track score“ s penalizací falešných poplachů.

Multimodální klasifikace a identifikace

  • Fúze na úrovni vlastností: slučování RF fingerprintů, mikrodoppleru a vizuálních deskriptorů do společného embeddingu.
  • Fúze na úrovni rozhodnutí: Bayesovské kombinování posteriorů (na úrovni cílových tříd: UAV/PTÁK/PLAST), kalibrace pravděpodobností (Platt/Isotonic).
  • Učení: self-supervised pro redukci anotací, domain adaptation na přenos mezi lokalitami, open-set recognition pro nové typy UAV.

Architektury C-UAS: centralizovaná, distribuovaná a hierarchická fúze

  • Centralizovaná: všechny senzory do jednoho fúzního uzlu; vysoká kvalita, vyšší nároky na propustnost a SPOF.
  • Distribuovaná: lokální trackery a track-to-track fúze; nižší datový tok, nutnost korelace a řešení závislostí měření.
  • Hierarchická edge-to-cloud: předspracování a detekce na okraji (edge GPU/FPGA), centrální multi-senzorová korelace a C2; messaging DDS/MQTT/ROS 2 s QoS.

Měření výkonu: detekce, sledování, klasifikace

Oblast Metrika Popis Cílové pásmo
Detekce PD, FAR, ROC/PR Pravděpodobnost detekce vs. falešné poplachy PD > 0,9 při FAR < 10−5/gate/s
Sledování OSPA, MOTA/MOTP Přesnost polohy a konzistence stop OSPA < 25 m na 1 km, MOTA > 0,8
Latence E2E delay Senzor→fúze→C2→efektor < 300 ms (krátký dosah)
Klasifikace F1/AUROC Rozlišení UAV vs. pták vs. jiné F1 > 0,9

Robustnost vůči protiopatřením a rušení

  • RF ticho a frequency hopping cíle: kombinace pasivního RF s radar/EO, využití časově-prostorové koherence.
  • GNSS spoofing/jamming v prostředí: necitlivé metriky (bearing-only, mikrodoppler), robustní časování (PPS-less režimy, relativní hodiny).
  • Optické maskování: IR spektrum, polarizační filtry, temporal-difference detekce.
  • Adverzariální ML: odolné architektury (ensemble, randomized smoothing), monitoring driftu a confidence skóre.

Geo-fúze a využití mapových podkladů

  • 3D mapy a DEM: maskování horských hřebenů pro radar, viditelnost optiky, bezletové zóny.
  • Semantika prostoru: koridory letišť, průmyslové zóny, ptactvo migrační trasy – redukce falešných poplachů.
  • Počasí: integrace větru/deště/mlhy do priorit detekce a plánování efektorů.

Fúzní algoritmy: pravděpodobnostní a pravidlové přístupy

  • Bayesovská fúze: kombinace likelihoodů s váhami podle kvality (SNR, viditelnost, meteo), Dempster-Shafer pro neúplné informace.
  • Grafické modely: faktografické grafy pro spojování modalit a prostorově-časových závislostí.
  • Pravidlové systémy/ROE: deterministické prahy (např. „RF+Radar+EO potvrzeno = autorizace eskalace“), auditovatelnost.

Integrace do C2 a rozhodování o efektorech

  • Stavy cíle: DETECTED → TRACKED → CLASSIFIED → THREAT-ASSESSED → ENGAGEABLE.
  • Efektory: soft-kill (RF jamming, link-interdiction), navádění EO/IR gimbalu, hard-kill (kinetické/nezabíjející) dle ROE a legislativy.
  • Prioritizace: multi-objetive scoring (blízkost k chráněné zóně, rychlost, směr, klasifikace typu).

Využití rojových a formaciových indikátorů

  • Koherence pohybu: skupinový směr/rychlost, párové vzdálenosti, spektra manévrů.
  • RF korelace: sdílené kanály, synchronizované bursty; převážně signál na command & control úrovni.
  • Fúzní „swarm score“: agregovaná míra rojového chování pro eskalaci reakce.

Testování, V&V a metodiky hodnocení

  • Simulace a HIL: syntetické radarové kuby, RF kanály s vícestěžností, fotorealistické EO/IR scénáře; validace na reálných záznamech.
  • Kampaně sběru dat: různé typy UAV, trajektorie, meteo, terény; anotace synchronizovaná napříč modalitami.
  • Reprodukce a audit: verzování datasetů, lineage modelů, konzervativní baseline.

Kyberbezpečnost fúzního řetězce

  • Integrita telemetrie: podpisy/šifrování na lince sensor→edge→fusion; ochrana proti hijackingu a data poisoning.
  • Hardening uzlů: minimal OS, lockdown portů, atestace bootu, nejméně nutná oprávnění.
  • Zero-trust v síti: segmentace, mTLS, rotace klíčů, SIEM korelace.

Provozní scénáře nasazení

  • Letiště: radar + EO/IR věž + RF/RemoteID; nízká latence, vysoká přesnost třídění ptactva vs. UAV.
  • Městská centra: pasivní RF + EO na střechách, doplněné krátkodobým radarem; vysoká míra clutteru.
  • Kritická infrastruktura: perimetrické akustické pole + radarové sektory + RF triangulace; odolnost vůči počasí.

Dobře nastavené prahy a adaptivní politiky

  1. Normalizovat skóre podle kvality zdroje (SNR, meteo, vzdálenost, úhel náběhu).
  2. Uplatnit hysterézi a time-consistency (N-z-M potvrzení) před eskalací stavu cíle.
  3. Adaptivní prahy podle denní doby, ptáčí migrace a lokálního ruchu.

Typická úskalí a jak se jim vyhnout

  • Nesprávná registrace: malé boresight chyby způsobí velké fúzní chyby na dálku; průběžná autokalibrace.
  • Přetížení linky: raw-level fúze bez edge předzpracování; řešení: lokální detekce a komprese.
  • Model drift: sezónnost akustiky, nové RF protokoly; kontinuální učení s kontrolou kvality.
  • Přehnané spoléhání na jednu modalitu: sensor dropout musí mít definované degradační módy.

Referenční fúzní pipeline (ilustrativní)

  1. Edge detekce: CFAR (radar), RF signalizer, EO detekce objektů – export měření s časem a kovariancí.
  2. Fúzní uzel: asociace (JPDA), filtrování (IMM-EKF/UKF), správa stop, výpočet „threat score“.
  3. Klasifikace: multimodální embeddingy a rozhodovací fúze (Bayes/ensemble) s kalibrací pravděpodobností.
  4. C2 rozhraní: vizualizace stop, alarmy, ROE automatismus, logování pro audit a trénink.

Organizační a legislativní aspekty

  • Pravidla nasazení: