200 började registrera sig. Varför aktiverade bara 130 sitt konto inom ett dygn?
I det här exemplet med fiktiva siffror hittar ni tappet i PostHog, stämmer av antalet mot kontosystemet och testar en möjlig förklaring med Playwright innan ni ändrar formuläret.
Öppna kalkylatorn för registreringarVad vet vi om de 70?
Anta att 200 olika personer påbörjade registreringen och att 130 aktiverade ett konto inom 24 timmar. Då är andelen slutförda registreringar 65 procent. För övriga 70 saknas en registrerad aktivering inom ett dygn. Några kan återkomma i morgon. Siffrorna är ett räkneexempel. Orsaken till bortfallet återstår att undersöka. [6]
Räkna samma förlopp på två ställen
Ge alla som börjar ett helt dygn på sig, även dem som börjar på mätperiodens sista dag. Välj steg i bestämd ordning i PostHog och räkna varje person en gång per steg. Andel av alla som började och andel av dem som nådde föregående steg har olika nämnare. Google Analytics visar också hur urvalet ändras om personer får komma in mitt i tratten. Stäm av inställningarna innan ni jämför rapporter. [1] [2]
- Mät när någon börjar fylla i formuläret, när servern tar emot registreringen och när kontot aktiveras. Registrera händelsen och låt innehållet i fälten stanna i formuläret.
- Om servern tog emot 160 registreringar från de 200 som började, gick 80 procent vidare. Av dessa 160 aktiverade 130 ett konto, alltså 81,25 procent. Räknat från första steget blir andelen 65 procent.
- Jämför antalet aktiveringar med en aggregerad siffra från kontosystemet för samma grupp och period. Vid en avvikelse, kontrollera vilka personer som omfattas av mätningen, deras integritetsval, ändrade användar-id, upprepade försök och testkonton.
Gör en supportfråga till ett upprepningsbart test
Anta att kunder berättar att de på mobilen rättar sin felstavade mejladress och sedan fastnar. Öppna testmiljön i Playwright med samma skärmstorlek och ett testkonto. Ange en ogiltig adress, kontrollera att felmeddelandet pekar ut fältet, rätta adressen och kontrollera att bekräftelsen visas. Stäm av mot en enda mottagen registrering i testsystemet. W3C:s vägledning för formulär hjälper er att bedöma hur begriplig återkopplingen är. [3] [5]
När tillför Claude och MCP något?
Testet går att köra direkt i Playwright. Ett team som redan använder Claude med Playwrights MCP-koppling kan be assistenten gå igenom samma förlopp och anteckna den första avvikelsen från det förväntade resultatet. Bevara sedan det förväntade beteendet i ett test som teamet själv äger. Använd påhittade uppgifter, en testmiljö och en testbrevlåda. Kundinspelningar och inloggningsuppgifter till produktionen hör hemma utanför modellkonversationen. [4]
Hur tolkar ni en förändring?
Anta att en senare, jämförbar grupp ger 150 aktiveringar från 200 påbörjade registreringar. Andelen stiger från 65 till 75 procent, en ökning med tio procentenheter. Ett godkänt webbläsartest visar att den rättade adressen fungerar under testets förutsättningar. Ändrad trafikmix eller mejlleverans kan också ha påverkat siffran. Behöver ni belägga orsakssambandet inför en investering, planera en kontrollerad jämförelse med tillräckligt underlag. [7]
Vad kan vi avgöra tillsammans?
Ta med två aggregerade antal, steget som bekymrar er och beskedet kunden borde få. Under ett kostnadsfritt samtal på 20 minuter med Ariel väljer vi vilken avvikelse ni ska undersöka först. En avgränsad pilot kan ge er en händelsekarta, ett upprepningsbart webbläsartest, mätvärden före och efter en ändring och en praktisk genomgång med den som ansvarar för formuläret.
Hur många slutförde registreringen?
Siffrorna är exempel. Ange antalet unika personer i samma grupp. Använd samma händelsedefinitioner och samma tidsgräns för att slutföra registreringen.
Jämför med en andra grupp
- Andel som slutförde
- Personer som inte slutförde
- Andel som inte slutförde
- Andel som slutförde i den andra gruppen
- Förändring i andelen som slutförde
Nästa test
- Granska ett exempel på varje händelse och kontrollera att upprepade försök räknas en gång per person.
- Gå igenom det misstänkta steget med ett testkonto i testmiljön. Anteckna väntat och faktiskt resultat.
- Jämför likvärdiga grupper med samma tidsgräns efter en ändring. En skillnad visar inte i sig vad som orsakade den.
Uppgifterna behandlas i den här fliken. Du kan kopiera eller ladda ned dem utan att skicka dem till SundAI.