Du kommer att lära dig

Du kommer att lära dig

Lär dig hur du använder global holdout-grupp för att förstå effekten och effektiviteten av din marknadsföring. global holdout-grupp ger ett sätt att utesluta ett antal profiler från ditt meddelande för att avgöra den inkrementella framgången för ditt marknadsföringsprogram. Dessa holdout-grupper gör det möjligt för dig att jämföra och sedan analysera basvärdet av dina marknadsföringsprogram, samt sätt att kontinuerligt optimera dessa strategier.

Innan du börjar

Innan du börjar

Du måste ha minst 400.000 profiler (observera att detta är det totala antalet profiler) för att kvalificera dig för holdout-grupp. Detta säkerställer att Klaviyo har tillräckligt med profildata för att jämföra holdout-gruppen med din andra profil som tar emot marknadsföring. Vi rekommenderar dessutom att du kör holdout-grupp i 3 månader för att samla in tillräckligt med data.

Läs mer om när holdoutdu ska eller inte ska använda -grupp.

Använda holdout-grupp på rätt sätt

Använda holdout-grupp på rätt sätt

Hur man använder holdout-grupp

Hur man använder holdout-grupp

holdout-grupp bör användas när du vill testa effektiviteten i dina marknadsföringsprogram och eventuellt eventuella ändringar som du kan göra i dessa strategier. holdout-grupp är användbara eftersom de ger en tydlig jämförelse för att visa vilken inverkan din marknadsföringsstrategi har eftersom de inte får någon kommunikation från dig.

Du kan t.ex. överväga att använda holdout-grupp om du vill etablera dig:

  • Det tydliga värdet och effekten av ditt övergripande marknadsföringsprogram i förhållande till kostnaderna.
  • När du gör förändringar i ditt marknadsföringsprogram (t.ex. lägger till en ny kanal), det värde som är förknippat med dessa stegvisa förändringar.
  • Om vissa marknadsföringsaktiviteter faktiskt är skadliga och ger negativa resultat och behöver justeras (t.ex. för många flöden vid fel tidpunkter till kund).

Ytterligare faktorer att ta hänsyn till med holdout-grupp

Det är viktigt att tänka på när och hur du kan använda holdout-grupp.

Eftersom personer i en holdout-grupp är förhindrade att ta emot e-post, sms, pushnotis, som skickas via kampanjer eller flöde vill du överväga följande faktorer:

  • Du kan bara ha en Aktiv holdout-grupp åt gången för att använda för jämförelse med dina marknadsföringsprogram.
  • En holdout-grupp gäller för alla kanaler som används i en kampanj eller ett flöde; den kan inte slås på för en specifik kanal kontra en annan.
  • En holdout-grupp stör inte andra viktiga säsongsbetonade e-handelsevenemang eller tider på året (t.ex. Black Friday Cyber Monday).
  • Vilka budskap som de, även i holdout-grupp, alltid ska få. Läs mer om hur du åsidosätter meddelanden.

holdout-grupp vs. A/B-testning

holdout-grupp är av en annan karaktär än A/B-testning och de två funktionerna bör inte blandas ihop. holdout-grupp gör det möjligt för dig att förstå effekten av din marknadskommunikation genom att inte skicka något till en grupp människor. Med A/B-testning kan du däremot jämföra två eller flera versioner av din marknadskommunikation. Du kan t.ex. jämföra 2 versioner av en e-postkampanjer.

Skapa en holdout-grupp

Skapa en holdout-grupp

  1. För att skapa en holdout-grupp, gå till analys > Experiments och klicka på fliken Global Experiments.
Observera att om du inte kan komma åt den här sidan har du inte den profil på 400K+ som krävs för att kvalificera dig. Dessutom kan endast ägare, administratörer och chefer skapa holdout-grupp.

2. Klicka på Skapa test.

skapa test.jpg

Du kommer sedan att ledas genom en serie steg för att konfigurera och anpassa din holdout-grupp.

3. Använd fältet till vänster för att lägga till ett tal som representerar den procentandel av omsättningsbar profil som du vill lägga in i din holdout-grupp. När du uppdaterar din procentandel i fältet kommer det numeriska värdet att uppdatera det totala antalet till höger. Använd endast siffror (upp till 2 decimaler) i detta fält.

Vi rekommenderar att du använder cirka 5% av din totala säljbara profil för att skapa en holdout-grupp. När du har valt din procentandel för holdout-grupp kan den inte ändras när du har slutfört denna installationsprocess och den är Aktiv. Det är dock viktigt att notera att din holdout-grupp kommer att växa i takt med att ditt företag och din prenumerantlista växer, för att överensstämma med den procentandel du ursprungligen satte upp.

4. När du är nöjd med din procentsats klickar du på Fortsätt.

procent av profil-uppdatera.jpg

5. Som standard kommer din holdout-grupp att starta på dagens datum, men du kommer att kunna välja ditt slutdatum. Klicka i fältet Välj datum för att få upp kalendern widget. Klicka sedan på ett datum i kalendern för att välja ditt slutdatum.

Det rekommenderas att ha en holdout-grupp igång i 3 månader för att samla tillräckligt med data.

start- och slutdatum.jpg

Du kan också se till att vissa flöden som anses nödvändiga fortfarande tas emot av profil i din holdout-grupp. För att göra detta kommer du att åsidosätta holdout-gruppreglerna för vissa flöde(n). Exempelvis kan många välkomstflöden vara så pass viktiga att de ändå bör tas emot av din holdout kund och därför åsidosättas.

Detta nästa steg är valfritt och det är inte nödvändigt att åsidosätta vissa flöden. Vi rekommenderar dock att du överväger vilka budskap som är viktiga för målgruppens upplevelse av ditt varumärke och överväger att använda överstyrning där så är lämpligt. Observera att transaktionsmeddelanden (t.ex. orderbekräftelser) alltid kommer att respekteras och åsidosättas så att din holdout-grupp får dem.
Du kan också hoppa över vissa kampanjer eller till och med välja att hoppa över flöde vid ett senare tillfälle genom ytterligare steg utanför denna installationsguide. Följ stegen nedan för att slutföra installationen och läs sedan avsnitten i den här guiden om att åsidosätta kampanjer eller flöde för mer information.
Dessutom, genom att åsidosätta vissa meddelanden så att din holdout-grupp får dem, kommer detta att påverka holdout-grupp analys. Du kan komma att se en minskning av den totala marknadsföringen eftersom holdout-gruppen fortfarande får en del meddelanden.

6. För att säkerställa att din profil fortfarande får vissa flöde(n), sök på flödets namn i fältet Sök flöde till vänster. Du kan också begränsa din sökning efter ett visst flöde genom att öppna rullgardinsmenyn Välj etikett och välja en viss etikett från rullgardinsmenyn.

fält och etikett flöde lookup.jpg

Du kan dessutom begränsa din sökning efter ett visst flöde genom att öppna rullgardinsmenyn Alla och antingen välja välkomstserie eller övergiven surfning. Genom att välja ett av dessa alternativ kommer du endast att se de typer av flöde som anges nedan.

välkomstserie dropdown.jpg

Slutligen kan du välja att söka efter flöde baserat på status(Live , Manual, Draft). Öppna menyn Alla statusar och välj ett av alternativen; detta kommer sedan att begränsa listan nedan.
status dropdown.jpg

7. När du har hittat det eller de flöden som du vill åsidosätta (dvs. din profil kommer att få dessa flöden) markerar du kryssrutan bredvid varje tillämpligt flöde och klickar på Review.

valt flöde överstyrning.jpg

Om du inte vill välja någon som ska åsidosättas klickar du på Skip.

8. På fliken Detaljer granskar du inställningarna, inklusive start- och slutdatum och procentandel av omsättningsbar profil i holdout-grupp.

granskningstest, fliken detaljer.jpg

9. Klicka på fliken Overridden fl öde för att granska eventuella flöden som fortfarande kommer att skickas till din holdout-grupp profil, enligt exemplet nedan.

överriden flöde.jpg

10. Om du vill göra några ändringar klickar du på Tillbaka. Annars klickar du på Starta test om du är redo för att din holdout-grupp ska bli Aktiv.

Redigera eller avsluta din holdout-grupp

Redigera eller avsluta din holdout-grupp

Om du har skapat en holdout-grupp och vill ändra vissa inställningar (t.ex. namn eller slutdatum) eller avsluta grupptestet i förtid, gå till analys > Experiments > Global Experiments.

Här hittar du det globala holdout-kortet (det kommer att vara kortet med data ovanför historikkortet).

global handout kort- uppdatera.jpg

Redigera en Aktiv holdout-grupp

Redigera en Aktiv holdout-grupp

  1. Om du vill ändra namnet på din holdout-grupp eller slutdatumet klickar du på menyn med tre punkter i det övre högra hörnet av kortet.

trepunktsmeny.jpg

2. Välj Redigera detaljer i menyn.

3. Härifrån kan du redigera namnet på din holdout-grupp i fältet Edit test name. Du kan också justera slutdatumet genom att klicka på fältet Ändra testets slutdatum och välja ett nytt datum i kalendern widget.

redigera Konto holdout detaljer.jpg

4. När du är klar med dina ändringar klickar du på Spara.

Avsluta ett Aktiv holdout-grupp test

Avsluta ett Aktiv holdout-grupp test

Om du upptäcker att du vill avsluta ditt test i förtid kan du också göra det via detta kort.

Observera att om du avslutar ett test i förtid kan det leda till otillräckliga eller skeva data.
  1. Klicka på menyn med 3 punkter i det övre högra hörnet av kortet.

trepunktsmeny.jpg

2. Välj Avsluta test från menyn.

3. En modal visas sedan där du ombeds bekräfta om du vill avsluta testet och låta din holdout-grupp börja ta emot alla marknadsföringsmeddelanden igen. Klicka på Avsluta test för att bekräfta. Annars klickar du på Avbryt för att undvika att slutföra denna åtgärd.

slut test modal.jpg

Granskning av överskjutande flöde

Granskning av överskjutande flöde

  1. Om du vill se vilka flöde(n) du kan ha åsidosatt för din holdout-grupp, klicka på menyn med 3 punkter i det övre högra hörnet på detta kort.

trepunktsmeny.jpg

2. Välj Aktiva åsidosättningar från menyn.

3. Granska det eller de flöde override(s) som du har valt för just denna holdout-grupp, om tillämpligt.

Om du vill lägga till ytterligare åsidosatta flöden måste du lägga till dessa manuellt.

holdout-grupp exaple inställningar.jpg

Åsidosättande av extra flöde

Åsidosättande av extra flöde

Efter att du har gått igenom den första holdout-gruppinställningen kanske du upptäcker att du vill lägga till fler åsidosatta flöde. Med andra ord kanske du har andra flöden som du vill att din holdout-grupp ska få.

Åsidosättande sätts på huvudflödesnivå och profil kommer att ta emot alla element i detta flöde som normalt. Om du kör ett flöde med A/B-tester kommer nu alla variationer att nå rätt profil i din holdout-grupp.
  1. För att lägga till fler åsidosatta flöde, navigera till flöde. Leta upp och klicka på ett befintligt flöde från listan eller klicka på Skapa flöde för att åsidosätta holdout-grupp.
  2. Väl inne i flödet kan du antingen skapa eller klicka på triggern i ditt flöde.

Beroende på vilken trigger du väljer (t.ex. lista) kommer du här att se panelen Trigger Setup till vänster med möjlighet att åsidosätta en befintlig global holdout-grupp. I exemplet nedan visas alternativet att åsidosätta en global holdout-grupp på en lista-trigger.

3. I panelen Trigger Setup klickar du på länken Override global holdout group.

avtryckarinställning.jpg

4. Om du vill skicka meddelanden från just detta flöde till dem som finns i din globala holdout-grupp, välj Yes. Annars väljer du Nej och avslutar åsidosättandeprocessen.

trigger setup confirm.jpg

5. Klicka på Save längst ned i panelen Trigger Setup för att spara ändringarna. Klicka på Avbryt om du inte vill spara din uppdatering.

Åsidosätta enskilda kampanjer (e-post, sms eller pushnotis)

Åsidosätta enskilda kampanjer (e-post, sms eller pushnotis)

Det kan vara nödvändigt att tillåta vissa kampanjer att nå din holdout-grupp. Du kanske t.ex. vill att din globala holdout-grupp ska få ett individuellt välkomstmeddelande från ditt varumärke. I det här fallet måste du åsidosätta den specifika kampanjen för att säkerställa att din globala holdout-grupp får just det här meddelandet eller kampanjen.

  1. Navigera till kampanjer.
  2. Sök i fältet eller hitta rätt utkast kampanj från listan nedan. Om du skapar en ny kampanj kan du också lägga till åsidosättandet direkt under installationen samtidigt.
Du kommer inte att kunna redigera skickade kampanjer.

3. Klicka på alternativet Configure i avsnittet mottagare i det första inställningssteget för kampanj.

kampanj växla alternativ.jpg

4. Om du vill skicka just denna kampanj till dem i din globala holdout-grupp, välj Yes. Annars väljer du Nej och avslutar åsidosättandeprocessen.

kampanj bekräftelse meddelande.jpg

5. Klicka på Spara för att bekräfta dina ändringar. Klicka på Avbryt om du inte vill spara din uppdatering.

6. Fortsätt att sätta upp resten av din kampanj. När du är klar klickar du på Save & Continue to Content.

Skärmen Redo att skicka? kommer då att bekräfta och visa att din Aktiv global Konto-grupp inte kommer att få denna kampanj.

Lägga till en ny marknadsföringskanal vid ett senare tillfälle

Lägga till en ny marknadsföringskanal vid ett senare tillfälle

Om du lägger till en ny kanal i en befintlig kampanj (t.ex. sms) kommer dina inställningar att respekteras från din första kampanjkonfiguration, inklusive om du har valt att åsidosätta globala holdout-grupp.

lägg till sms remix.jpg

Om du vill justera detta följer du installationsanvisningarna ovan och avaktiverar istället alternativet för överstyrning.

Granskning av om en profil ingår eller har ingått i en holdout-grupp

Granskning av om en profil ingår eller har ingått i en holdout-grupp

Du kan granska om en eller flera profiler ingår i eller har ingått i ett globalt holdout-grupp vid något tillfälle.

Inom en enskild profil

Inom en enskild profil

  1. Navigera till Målgrupper > profil.
  2. Sök i fältet ovan eller välj en profil från listan nedan. En banner, som visas i exemplet nedan, talar om för dig om en profil ingår i den globala holdout-gruppen.

profil för deltagarbanner.jpg

Du kan också se om en profil tidigare ingått i en holdout-grupp och när detta skedde. Borttagning från en holdout-grupp innebär att testet avslutades och att profilen togs bort från det.

profil händelser logg.jpg

Om en profil har slagits samman kommer framtida utskick att respektera den sammanslagna profilens status som holdgroup.
Inom flöde

Inom flöde

  1. Navigera till flöde.
  2. Använd sökfältet ovan eller hitta flödet från listan nedan.
  3. Klicka på ett meddelande i flödet som har hoppats över.
  4. Titta i den vänstra panelen för ett visst flöde för att se avsnittet Analys (senaste 30 dagarna). Här kommer du att se en rad för överhoppad aktivitet.

överhoppad anledning i flöde.jpg

5. Klicka på Skippad för att automatiskt komma till e-postens flik mottagare Aktivitet och avsnittet Skippad. I detta avsnitt visas varför individer har hoppats över i sändningstid för ett visst flöde av meddelanden, inklusive om de var i en global holdout-grupp.

global uthållighet undertryckt vy.jpg

Inom kampanjer

Inom kampanjer

  1. Navigera till kampanjer.
  2. Sök i fältet eller hitta rätt skickad kampanj i listan nedan.
  3. Klicka på fliken Skippad aktivitet. Detta avsnitt kommer att visa varför individer har hoppats över vid sändningstid för just detta flöde meddelande, inklusive om de var i en global holdout-grupp.

global uthållighet undertryckt vy.jpg

Granskning av analys på holdout-grupp

Granskning av analys på holdout-grupp

Global Aktiv holdout-gruppkort

Global Aktiv holdout-gruppkort

Det globala holdout kortet högst upp i analysavsnittet innehåller all information och data om alla aktuella Aktiv holdout-grupper. Det här kortet är särskilt användbart eftersom det ger ett tydligt sätt att granska framgången för din marknadsföringsstrategi och den inkomst, konvertering och upplyftning som är förknippad med dem.

global handout kort- uppdatera.jpg

Överst på kortet anges den totala procentsatsen för marknadsföringslyftet, enligt bilden nedan. Detta motsvarar effekten av ditt marknadsföringsprogram jämfört med de personer i holdout-gruppen som inte fick några meddelanden. Denna mättal är avgörande för att förstå den övergripande effekten av ditt marknadsföringsprogram.

Skärmdump 2023-08-21 kl. 4.31.28 PM.png

Under marknadsföringshissen, kommer att inkludera data på:

  • Procentandel som inte får marknadsföring
    Procentandelen av den totala säljbara profilen som inte fick några marknadsföringsmeddelanden. Detta härleds från din ursprungliga holdout-grupp setup.
  • Sannolikhet för vinst
    Sannolikhet
    för att ditt marknadsföringsprogram ger en meningsfull förbättring jämfört med holdout-grupp.
Observera att om du har 10 eller färre prov från både din treatment och din holdout tillsammans, kommer du inte att se någon vinstsannolikhet reflekterad ännu.
  • Behandlande grupp
    Huvudgruppen som får all din marknadsföring.
  • Holdout-grupp
    Den grupp som hålls utanför att ta emot e-post, sms och pushnotiser som skickas via kampanjer och flöde.
  • Marknadsförbar profil
    En profil som kan e-postas via Klaviyo betraktas som en säljbar e-postprofil. Det finns två huvudkategorier av aktiv profil:
    • prenumerant
      prenumeranten har fyllt i ett registreringsformulär eller på annat sätt uttryckligen samtyckt till att få e-postmarknadsföring.
    • profil tillagd av allmänt engagemang
      Det är möjligt för någon att dela sin e-post med dig utan att uttryckligen samtycka till pågående e-postmarknadsföring. En person som har gjort en beställning eller avslutat en kassa på din webbplats kan t.ex. ha lagt till sin e-postadress under kassaprocessen, men aldrig uttryckligen valt att delta.

De två sista kolumnerna representerar den konvertering mättal som ditt Konto använder, vilket återspeglas av det totala råa antalet och sedan den procentandel som detta utgör av det totala antalet. Observera att det är total konvertering som görs av din profil och inte hänförlig konvertering.

Historiskt kort

Historiskt kort

Historiköversiktskortet ger data för alla dina holdout-grupp. Det här kortet är särskilt användbart för att se eventuella stegvisa förändringar som du kan ha gjort i dina marknadsföringsprogram och hur dessa påverkade konvertering och upplyft. Här kan du spåra tillbaka dessa förändringar eller tidpunkter och följa upp vad som var framgångsrikt i dina program.

historiekort-uppdatera.jpg

Kolumnerna kommer att representera följande:

  • Namn
    Namn på den globala holdout-grupp som du har skapat.
  • Startdatum
    När den globala holdout-gruppen bildades och den första Aktiv.
  • Slutdatum
    När den globala holdout-gruppen upphörde och profil togs bort från den.
  • Holdout-storlek
    Den procentandel av din totala omsättningsbara profil som finns representerad i holdout-gruppen. Detta härleds från din ursprungliga holdout-grupp setup.
  • Marknadsföringslyft
    Den procentuella höjningen av ditt marknadsföringsprogram jämfört med de i holdout-grupp som använder ditt Kontos valda konvertering mättal. Detta visar den övergripande framgången för din marknadsföringsstrategi jämfört med dem som inte får all eller större delen av din marknadsföring.
  • Sannolikhet för vinst
    Sannolikheten för att ditt marknadsföringsprogram ger en meningsfull förbättring jämfört med holdout-grupp.

Du kan också klicka på pilarna bredvid någon av dessa kolumner för att sortera efter namn, datum, holdout storlekar, marknadsföringslyft och vinstsannolikhet i stigande eller fallande ordning.

Genom att klicka på något av de globala holdout namnen kommer du till ett individuellt analyskort med data om just den här gruppen jämfört med dina marknadsföringsprogram.

Ytterligare resurser

Ytterligare resurser

Så här redigerar du en e-postkampanjer

Så här redigerar du ett flöde

Förstå informationsavsnittet i en profil

Var den här artikeln till hjälp?
Använd endast detta formulär för feedback på artiklar. Lär dig hur du kontaktar support.

Utforska mer från Klaviyo

Community
Få kontakt med kollegor, partner och Klaviyo-experter för att hitta inspiration, dela insikter och få svar på alla dina frågor.
Live-utbildning
Delta i en livesession med Klaviyo-experter för att lära dig om bästa praxis, hur man konfigurerar viktiga funktioner och mer.
Support

Få tillgång till support via ditt konto.

E-postsupport (gratis provperiod och betalkonton) Tillgänglig dygnet runt, alla dagar i veckan

Chatt/virtuell hjälp
Tillgängligheten varierar beroende på plats och abonnemangstyp