Vad ni skriver upp vid varje mätning, hur ofta ni mäter och hur ni skiljer en verklig förändring från att modellen svarar olika varje gång.
Ungefär en timme. Gör mätningen innan ni gör större förändringar, så får ni en utgångspunkt att jämföra med.
AI-tjänster kan spara samtal, men de ger er inte en stabil mätserie med samma frågor, modeller och förutsättningar. Den behöver ni dokumentera själva.
Ta den första mätningen innan ni gör större förändringar. Då har ni ett nolläge att jämföra med när ni senare ändrar sajten, innehållet eller källbilden.
En mätning säger var ni står. Två mätningar med samma frågor, samma modeller och samma antal körningar säger om ni rör er. Ändrar ni något i rutinen mellan mätningarna går de inte att jämföra.
Sex kolumner att fylla i
| Kolumn | Varför |
|---|---|
| Datum och modell | Modellerna uppdateras vid olika tidpunkter. Utan datum och modell vet ni inte vad ni jämför med. |
| Frågan, ordagrant | Ändrar ni ett ord i frågan är det en ny fråga, och den går inte att jämföra med den gamla. |
| Nämnd, ja eller nej | Grundmåttet. Tre körningar ger tre svar. Skriv upp alla tre. |
| Plats i uppräkningen | Först av tre nämnda bolag är bättre än sist av åtta, även om båda räknas som nämnd. |
| Sajter svaret bygger på | Visar om er sajt används som källa. Det är så ni upptäcker läget känd men inte nämnd från kapitel 4. |
| Konkurrenter i svaret | Vilka bolag som nämndes i stället för er. Utan den kolumnen vet ni inte om ni tappar eller om hela branschen rör sig. |
Sex kolumner räcker. Fler kolumner gör mätningen svårare att göra likadant nästa gång.
För ett aktivt arbete är var fjärde till åttonde vecka ofta en rimlig start. Det viktigaste är att ni använder samma intervall och hinner agera mellan mätningarna.
Täta mätningar ger fler datapunkter men också mer brus. Mät så ofta att ni kan se en trend utan att börja reagera på varje enskild variation.
Ett vanligt startintervall när ni gör aktiva förändringar. Behåll samma frågeset och metod så att perioderna går att jämföra.
Fungerar när arbetet går långsammare, men det blir svårare att koppla förändringen till en viss period eftersom fler saker hinner hända mellan mätningarna.
Räkna med fördröjning och variation. Olika tjänster hittar och använder förändringar i olika takt, så dra inte stora slutsatser av en enda ommätning kort efter en publicering eller teknisk ändring.
Tre körningar per fråga ger ett resultat som ”nämnd i 2 av 3 svar” i stället för ett ja eller nej. Så här läser ni det.
| Förra mätningen | Den här mätningen | Vad det betyder |
|---|---|---|
| Nämnd i 0 av 3 | Nämnd i 3 av 3 | Verklig förändring. Något ni gjort har gett effekt. |
| Nämnd i 0 av 3 | Nämnd i 2 av 3 | Troligen verklig. Vänta på nästa mätning innan ni drar slutsatser. |
| Nämnd i 1 av 3 | Nämnd i 2 av 3 | Troligen slump. Skriv upp det, gör inget. |
| Nämnd i 3 av 3 | Nämnd i 2 av 3 | Troligen slump. Ett tapp är verkligt först när det syns två mätningar i rad. |
Jämför med relevanta konkurrenter samma dag. Om flera aktörer rör sig åt samma håll kan det bero på modellen, källorna eller marknaden. Om er egen synlighet står still men konkurrenternas förändras har den relativa positionen ändå flyttat sig.
Förr eller senare vill någon ha en enda siffra i stället för en tabell. För att räkna fram den måste ni bestämma fyra saker, och inget av svaren är självklart.
Vi svarar olika på de fyra frågorna beroende på bransch, och därför finns ingen färdig formel här. En viktning som passar ett industribolag med tre kunder i Sverige är fel för ett konsultbolag med tvåhundra. En felräknad siffra ser lika trovärdig ut som en rätt räknad.
Tills ni har bestämt de fyra sakerna: rapportera som det är. ”Nämnd i 2 av 3 svar, på 3 av 4 frågor, i båda modellerna.” Det är längre än ett tal, men det går att kontrollera.
Ingen av punkterna kräver en utvecklare. De kräver framför allt en dokumenterad metod och en tydlig ägare.
Gör ett nolläge innan ni genomför större förändringar. Små justeringar behöver inte stoppa arbetet, men dokumentera vad som ändras så att ni vet vad som skiljer perioderna åt.
Vilka frågor, vilka modeller, hur många körningar, utloggad eller inte. En halv sida. Utan den gör nästa person något annat, och då går mätningarna inte att jämföra.
Mät samma relevanta konkurrenter med samma frågor och modeller. Det gör det lättare att se om en förändring verkar gälla just er eller om flera aktörer rör sig samtidigt.
Samma person behöver inte klicka varje gång, men någon ska äga frågeset, instruktioner och kvalitetskontroll. Då kan fler hjälpa till utan att metoden glider mellan perioderna.
Mät så ofta att ni hinner göra något mellan mätningarna. Om inget hinner förändras eller åtgärdas, glesa ut intervallet och lägg tiden på själva arbetet.
Det ni har går inte att jämföra med nästa mätning. Lägg en timme på att göra om den enligt tabellen ovan.
Det som saknas går att lägga till före nästa mätning. Gör det nu, medan ni minns hur den förra gick till.
Er mätning går att göra om på samma sätt, och då går den att jämföra. Sätt en påminnelse fyra veckor fram och ändra ingenting i rutinen till dess.
Så här gör vi när vi mäter åt kunder. Vi ställer tjugo frågor i fyra AI-tjänster och mäter tre konkurrenter samtidigt. Varje fråga ställs flera gånger, och vi räknar bara de bolag som återkommer. Vi rapporterar resultatet som det är, till exempel ”nämnd i två av tre svar på tolv av tjugo frågor”, inte som ett poängtal. Efter tio veckor mäter vi om på samma sätt. Det ledningen får är en rad: hur många frågor bolaget nämns på nu, jämfört med förra gången.
Kapitel 6 handlar om sajten: vad som måste vara på plats för att modellerna ska kunna läsa er. Kapitel 7 handlar om att bli omskriven. Kapitel 8 lägger allt i ordning.
Läs kapitel 6