Proč multi-modální fúze senzorů v C-UAS
Counter-UAS (C-UAS) systémy čelí heterogenním hrozbám od mikro-UAV s malým radarovým průřezem po rychlé FPV platformy s nízkou tepelnou stopou a adaptivními rádii. Jednotlivé senzory jsou vždy limitovány vlastním „oknem reality“ (např. radar – výborný dosah, slabá klasifikace; EO/IR – dobrá identifikace, citlivost na počasí; RF – detekce aktivní rádiové provozu, slepota v tichém režimu). Multi-modální fúze kombinuje komplementární zdroje informací pro spolehlivou detekci, sledování, klasifikaci a rozhodování o protiopatřeních v různých prostředích (městská zástavba, letiště, kritická infrastruktura).
Senzorický ekosystém: modality a jejich silné/slabé stránky
- Primární radar (X/S/K-pásmo): široké pokrytí, schopnost měření rychlosti (Doppler), odolnost vůči světelným podmínkám; citlivost na clutter, omezení při malém RCS a nízkých výškách.
- Pasivní RF/ESM: detekce, klasifikace a lokalizace rádiových emisí (C2 linky, FPV video, telemetrie); slepé na tiché platformy nebo zaznamenávací lety bez vysílání.
- EO/IR kamery: vizuální identifikace, klasifikace typů UAV, potvrzení kontaktu; závislost na počasí, kouř/vlhkost, omezení v noci (EO) a při silném slunci (IR saturace).
- Akustické/Seismické: nízká cena, detekce blízkosti s typickou signaturou motorů a vrtulí; citlivost na hluk a vítr, efektivní dosah desítky až stovky metrů.
- Secondary/kooperativní zdroje: ADS-B/Mode-S, U-space/Remote ID, Wi-Fi/Bluetooth fingerprinting, údaje ze sítě terénních senzorů (bariéry, ploty).
- Lidar a multistatické radary: přesná poloha na krátkou vzdálenost, vhodné pro finální navedení efektoru; omezený dosah a náklady.
Úrovně fúze: od dat k rozhodnutí
- Úroveň snímků (raw data level): spojování dopplerových kubů, spektrogramů či obrazových tenzorů; náročné na šířku pásma a synchronizaci, nejvyšší teoretický výkon.
- Úroveň detekcí (feature/measurement level): fúze bodových měření (range, azimut, elevace, rychlost, RSSI, bearing-only) přes filtry a asociaci; nejběžnější kompromis.
- Úroveň tras (track-to-track): konsolidace lokálních tras z více uzlů; menší datový tok, řešení korelace a biasů.
- Úroveň rozhodnutí: hlasování a logika pravidel/pravděpodobností nad výstupy třídicích modulů a trackerů (např. „ROE – Rules of Engagement“).
Kalibrace, časování a registrace senzorů
- Prostorová registrace: odhad rigidních transformací mezi senzory (EO-to-radar, RF-array orientace). Nutná geometrická kalibrace (intrinsic/extrinsic) a mapování na jednotný georeferenční rámec (WGS-84/UTM).
- Časová synchronizace: PTP/NTP, GNSS PPS; kompenzace latencí (sensor-to-bus-to-fusion) a časové značky s jitterem.
- Bias a drift: odhad systematických chyb (bearing bias RF, kompas, boresight EO) jako součást stavu filtru (augmentovaný stav).
Detekce a segmentace cílů v jednotlivých modalitách
- Radar: CFAR (CA/GO/SO-CFAR), mapování hot-cells, odstranění pozadí (STAP), mikrodopplerové signatury vrtulí pro rozlišení ptactva.
- RF: spektrální a časově-frekvenční analýzy, modulace/struktura rámců, fingerprinting protokolů (OFDM, analog FPV), TDOA/DF pro geolokaci.
- EO/IR: detektory objektů (anchor-free/anchor-based), multi-scale pyramidy, termální kontrasty vrtulí/motorů; optický tok na krátké vzdálenosti.
- Akustické: gammatónové banky, MFCC, korpusy zvuků vrtulí, beamforming pro průnik směrovosti.
Asociace měření a multi-target sledování
V prostředí s clutterem a roji je data association rozhodující. Používají se:
- Gating a assignment: eliptické gatingy podle inovační kovariance, Nearest Neighbor (NN), Probabilistic Data Association (PDA/JPDA).
- Hypotézové trackery: Multiple Hypothesis Tracking (MHT), Multi-Bernoulli/PHD/CPHD filtry pro hustotní přístupy.
- Filtry: Kalman/Extended/Unscented, Interacting Multiple Model (IMM) pro přepínání režimů (rovinný let, manévr, klesání), Particle Filter pro bearing-only.
- Řízení tras: logika birth/confirmation/death, skórovací pravidla (N-out-of-M), fúzní „track score“ s penalizací falešných poplachů.
Multimodální klasifikace a identifikace
- Feature-level fúze: spojování RF fingerprintů, mikrodoppleru a vizuálních deskriptorů do společného embeddingu.
- Decision-level fúze: Bayesovské kombinování posteriorů (na úrovni cílových tříd: UAV/PTÁK/PLAST), kalibrace pravděpodobností (Platt/Isotonic).
- Učení: self-supervised pro redukci anotací, domain adaptation na přenos mezi lokalitami, open-set recognition pro nové typy UAV.
Architektury C-UAS: centralizovaná, distribuovaná a hierarchická fúze
- Centralizovaná: všechny senzory do jednoho fúzního uzlu; vysoká kvalita, vyšší nároky na propustnost a SPOF.
- Distribuovaná: lokální trackery a track-to-track fúze; nižší datový tok, nutnost korelace a řešení závislostí měření.
- Hierarchická edge-to-cloud: předzpracování a detekce na okraji (edge GPU/FPGA), centrální multi-senzorová korelace a C2; messaging DDS/MQTT/ROS 2 s QoS.
Měření výkonu: detekce, sledování, klasifikace
| Oblast | Metrika | Popis | Cílové pásmo |
|---|---|---|---|
| Detekce | PD, FAR, ROC/PR | Pravděpodobnost detekce vs. falešné poplachy | PD > 0,9 při FAR < 10−5/gate/s |
| Sledování | OSPA, MOTA/MOTP | Přesnost polohy a konzistence tras | OSPA < 25 m na 1 km, MOTA > 0,8 |
| Latence | E2E delay | Senzor→fúze→C2→efektor | < 300 ms (krátký dosah) |
| Klasifikace | F1/AUROC | Rozlišení UAV vs. pták vs. jiné | F1 > 0,9 |
Robustnost vůči protiopatřením a rušení
- RF ticho a frequency hopping cíle: kombinace pasivního RF s radar/EO, používání časově-prostorové koherence.
- GNSS spoofing/jamming v prostředí: necitlivé metriky (bearing-only, mikrodoppler), robustní časování (PPS-less režimy, relativní hodiny).
- Optické maskování: IR spektrum, polarizační filtry, temporal-difference detekce.
- Adverzariální ML: odolné architektury (ensemble, randomized smoothing), monitoring driftu a confidence skóre.
Geo-fúze a využití mapových podkladů
- 3D mapy a DEM: maskování horských hřebenů pro radar, viditelnost optiky, bezletové zóny.
- Semantika prostoru: koridory letišť, průmyslové zóny, ptačí migrační trasy – redukce falešných poplachů.
- Počasí: integrace větru/deště/mlhy do priorit detekce a plánování efektorů.
Fúzní algoritmy: pravděpodobnostní a pravidlové přístupy
- Bayesovská fúze: kombinace likelihoodů s váhami podle kvality (SNR, viditelnost, meteo), Dempster-Shafer pro neúplné informace.
- Grafické modely: faktografické grafy pro spojování modalit a prostorově-časových závislostí.
- Pravidlové systémy/ROE: deterministické prahy (např. „RF+Radar+EO potvrzeno = autorizace eskalace“), auditovatelnost.
Integrace do C2 a rozhodování o efektorech
- Stavy cíle: DETECTED → TRACKED → CLASSIFIED → THREAT-ASSESSED → ENGAGEABLE.
- Efektory: soft-kill (RF jamming, link-interdiction), navádění EO/IR gimbalu, hard-kill (kinetické/nezabíjející) dle ROE a legislativy.
- Prioritizace: multi-objetive scoring (blízkost k chráněné zóně, rychlost, směr, klasifikace typu).
Využití rojových a formací indikátorů
- Koherence pohybu: skupinový směr/rychlost, párové vzdálenosti, spektra manévrů.
- RF korelace: sdílené kanály, synchronizované bursty; většinou signál na command & control úrovni.
- Fúzní „swarm score“: agregovaná míra rojového chování pro eskalaci reakce.
Testování, V&V a metodiky hodnocení
- Simulace a HIL: syntetické radarové kuby, RF kanály s vícestostností, fotorealistické EO/IR scénáře; validace na reálných záznamech.
- Kampaně sběru dat: různé typy UAV, trajektorie, meteo, terény; anotace synchronizovaná napříč modalitami.
- Reprodukce a audit: verzování datasetů, lineage modelů, konzervativní baseline.
Kyberbezpečnost fúzního řetězce
- Integrita telemetrie: podpisy/šifrování na lince sensor→edge→fusion; ochrana proti hijackingu a data poisoning.
- Hardening uzlů: minimal OS, lockdown portů, atestace bootu, nejnižší nutná oprávnění.
- Zero-trust v síti: segmentace, mTLS, rotace klíčů, SIEM korelace.
Provozní scénáře nasazení
- Letiště: radar + EO/IR věž + RF/RemoteID; nízká latence, vysoká přesnost třídění ptactva vs. UAV.
- Městská centra: pasivní RF + EO na střechách, doplněné krátkodobým radarem; vysoká míra clutteru.
- Kritická infrastruktura: perimetrické akustické pole + radarové sektory + RF triangulace; odolnost vůči počasí.
Dobře nastavené prahy a adaptivní politiky
- Normalizovat skóre podle kvality zdroje (SNR, meteo, vzdálenost, úhel náběhu).
- Uplatnit hysterézi a time-consistency (N-z-M potvrzení) před eskalací stavu cíle.
- Adaptivní prahy podle denní doby, ptačí migrace a lokálního ruchu.
Typické úskalí a jak se jim vyhnout
- Nesprávná registrace: malé boresight chyby způsobují velké fúzní chyby na dálku; průběžná autokalibrace.
- Přetížení linky: raw-level fúze bez edge předzpracování; řešení: lokální detekce a komprese.
- Model drift: sezónnost akustiky, nové RF protokoly; kontinuální učení s kontrolou kvality.
- Přehnané spoléhání se na jednu modalitu: sensor dropout musí mít definované degradační módy.
Referenční fúzní pipeline (ilustrativní)
- Edge detekce: CFAR (radar), RF signalizér, EO detekce objektů – export měření s časem a kovariancí.
- Fúzní uzel: asociace (JPDA), filtrování (IMM-EKF/UKF), řízení tras, výpočet „threat score“.
- Klasifikace: multimodální embeddingy a rozhodovací fúze (Bayes/ensemble) s kalibrací pravděpodobností.
- C2 rozhraní: vizualizace tras, alarmy, ROE automatizmus, logování pro audit a výcvik.
Organizační a legislativní aspekty
- Pravidla nasazení: jasné hranice mezi detekcí, sledováním a použitím efektorů, dohled nad zásahy.
- <



























