Metody a metriky post-mortem analýzy kampaní

Proč dělat post-mortem kampaně i když tržby rostly

Tržby jsou pouze vrcholem ledovce. Post-mortem kampaně má ukázat inkrementální hodnotu, dopady na marži a reputaci, dlouhodobý vliv na loajalitu a provoz, ale také rizika (např. stížnosti na zavádějící slevy). Cílem je zjistit, zda kampaň přinesla udržitelný efekt za přijatelných nákladů a bez porušení pravidel.

Struktura post-mortem dokumentu

  1. Kontext: cíl, cílové segmenty, rozpočet, období, kreativy, pravidla slev.
  2. Metodika měření: jaký design důkazu byl použit (holdout, geo-split, PSA control…).
  3. Výsledky: inkrementální tržby a marže, dopady na zákaznickou zkušenost, provoz a značku.
  4. Rizika & incidenty: stížnosti na dark pattern, chyby v cenách, logistické zpoždění.
  5. Doporučení: co zopakovat, co změnit, co vypnout; návrh guardrailů.

Metodika: bez „důkazu“ není post-mortem

  • Holdout / geo-split: část návštěvníků/území bez zásahu (kontrola) – zlatý standard pro odhad inkrementality.
  • PSA control: kontrolní kreativa bez slevy (např. edukace), aby bylo možné oddělit efekt přítomnosti banneru od efektu slevy.
  • Predregistrace metrik: definujte KPI, „stop“ podmínky a způsob atribuce před začátkem kampaně.
  • Bayes/bootstrapping intervaly: reportujte intervaly spolehlivosti, nikoli pouze bodové odhady.

Finanční metriky nad rámec tržeb

Metrika Popis Proč je důležitá
Inkrementální marže (IM) (Tržby – COGS – náklady slev – doprava – provize) v testu vs. kontrole Odděluje „objemy“ od skutečného zisku
Cost of Discount (CoD) Rozdíl mezi běžnou cenou a akční × kusy Největší „skrytý“ náklad kampaně
Payback okres (dny) Čas potřebný, než kohorta pokryje CoD + média z hrubé marže Udržitelnost a cash-flow
Kanibalizace % prodejů, které by nastaly bez kampaně Snižuje inkrementální přínos
Mix efekt Změna podílu marginálně odlišných SKU Může zvýšit tržby a snížit marži

Efekt na zákaznické chování a loajalitu

  • Retention lift: rozdíl v opakovaném nákupu (30/90/180 dní) vs. kontrola.
  • CLV/LTV delta: očištěno o CoD a vrátky; porovnání kohort s/bez kupónu.
  • Price-seeking habituation: nárůst podílu objednávek se slevou při dalších nákupech.
  • Cross-sell halo: dodatečné položky v košíku, které nebyly v akci.

Zákaznická zkušenost a důvěra (anti-dark patterns)

  • Complaint Rate: stížnosti na „sleva neplatí“, „jiná cena v košíku“, „umělý timer“.
  • Unsubscribe/opt-out spiky: odhlášení z e-mailu/SMS po kampani; signál ztráty důvěry.
  • NPS důvěry / CSAT po nákupu: odděleně od celkového NPS.
  • Return & chargeback delta: nárůsty ve vrácených objednávkách/chargebackech vs. baseline.
  • Accessibility debt: nárůst chyb ve formulářích či rage kliků kvůli novým bannerům.

Provozní metriky: náklady a kapacity

  • On-time delivery (OTD): % zásilek doručených v slíbeném okně; korelace s negativními recenzemi.
  • Pick-pack lead time: změna doby vychystání při špičce kampaně.
  • Backlog supportu: počet ticketů a průměrná doba vyřízení; nejčastější témata.
  • Fraud & abuse: duplicity účtů kvůli „welcome“ kódům, sdílení interních kupónů.
  • Stav zásob: kolik dní zásob se skutečně rozpohybovalo vs. pouze „přelévání“ mezi SKU.

Kanálové a technické metriky

  • Deliverability: spam score, bounce rate, doménová reputace po kampani.
  • Výkon webu: změna LCP/TBT/CLS po nasazení promo skriptů; vliv na konverzi.
  • Kontrola atribuce: porovnání MTA vs. MMM vs. experimentální efekt.
  • SEO/brand signály: změny brandového vyhledávání, CTR na organiku, indexace promo LP po expiraci.

Férovost, segmentace a „disparate impact“

Ověřte, zda kampaň nepřiměřeně nezatížila konkrétní skupiny (senioři, low-end zařízení, menší města) – např. vyšší podíl zamítnutých kupónů kvůli špatně čitelným podmínkám. Sledujte:

  • Eligibility gap: rozdíl v úspěšnosti uplatnění kódu mezi segmenty.
  • Price fairness index: vnímaná férovost u personalizovaných slev.
  • Accessibility pass rate: procento uživatelů, kteří bez obtíží najdou a uplatní slevu.

Model „uplift“ a inkrementalita (základní recept)

  1. Vytvořte twin kohorty (test vs. kontrola) s propensity scoringem.
  2. Vyčistěte data o vrácení, zamítnuté platby a interní nákupy.
  3. Počítejte uplift tržeb a marže na uživatele, nikoli pouze na session.
  4. Reportujte ATE i CATE (uplift dle segmentu), abyste věděli, kde kampaň skutečně fungovala.

Tabulka „kampaň na zkoušku“: co zařadit do reportu

KPI Jednotka Test Kontrola Δ (inkr.)
Tržba / uživatel 42,10 36,80 +5,30
Marže po slevách 13,20 12,90 +0,30
CoD / uživatel –4,80 0,00 –4,80
Return rate % 7,2 5,9 +1,3
On-time delivery % 88 92 –4
Complaint rate ‰ objednávek 3,1 1,7 +1,4

Incidenty, compliance a audit dark-patternů

  • Price integrity: odpovídá „původní cena“ historicky nejnižší ceně (je-li deklarovaná sleva)?
  • Timer validity: běžel odpočet korektně (serverový čas, bez restartů)?
  • Podmínky slev: viditelné před CTA (práh košíku, vyloučení, expirace)?
  • Zásah DPO/Právní: pokud se sbíraly údaje kvůli kupónu, byl souhlas oddělen od marketingu?

Rozhodnutí po kampani: co pokračovat, co zastavit

  1. Škálovat pouze v segmentech s pozitivním CATE a udržitelným OTD.
  2. Refaktorovat kreativy a podmínky tam, kde rostly stížnosti nebo opt-outy.
  3. Zákázat taktiky s negativní marží po zahrnutí CoD a zvýšených vrácenkách.

Recept na „férovou“ verzi budoucích kampaní

  • Stropy slev a pravidla kombinovatelnosti: jasný MaxDiscountCap a transparentní možnosti kombinace.
  • ETA a logistika: pokud slibujete expres, dodržte; penále fond pro kompenzace při zpoždění.
  • Timestamp a zdroj: u „Nejprodávanější/Trendy“ uvádějte okno a metodiku, aby sociální důkaz nebyl zavádějící.
  • Copy bez hyperboly: žádné „jen dnes“ bez skutečného deadline.

Checklist post-mortem „kromě tržeb“

  • Zapracovali jsme CoD a inkrementální marži (nejen tržby)?
  • Existuje experimentální důkaz (holdout/geo split) a intervaly spolehlivosti?
  • Změřili jsme retenci/CLV kohorty a price-seeking návyky?
  • Vyhodnotili jsme OTD, support backlog, return/chargeback změny?
  • Proběhla dark-pattern a compliance kontrola (timery, referenční ceny, podmínky slev)?
  • Máme disparate impact analýzu a signály accessibility?
  • Aktualizovali jsme playbook a guardraily pro další kampaně?

Od „více tržeb“ k „více hodnoty“

Dobrý post-mortem nezastaví u tržeb. Zodpoví, zda kampaň vytvořila inkrementální marži, posílila důvěru, nepřetížila provoz a nepřinesla regulační rizika. Až kombinace finančních, zákaznických, logistických a etických metrik dává obraz, podle kterého má smysl škálovat, měnit nebo kampaň vůbec nenasazovat.