Jämförelse
Marknadstest kontra användarpanel: vilken säger om ett land kommer att ta till sig din produkt?
Båda sätter riktiga människor i mållandet framför din produkt. De besvarar olika frågor, till olika kostnad, och grundare köper ofta den ena när de behöver den andra.
Vad en användarpanel är
En rekryterad grupp deltagare, matchade mot en profil, som deltar i en session: en intervju, ett användbarhetstest, en konceptreaktion, ibland en dagboksstudie över några dagar. Plattformar som User Interviews, Respondent, Prolific eller lokala byråer gör rekryteringen snabb, och en studie kan sättas upp på några dagar. Resultatet är kvalitativt: vad människor förstod, vad som förvirrade dem, vad de säger att de skulle göra.
Vad ett marknadstest är
En rekryterad grupp användare, matchade mot en profil, som använder din produkt i sitt eget liv under en längre period, typiskt åtta veckor, med användningen följd och återkopplingen insamlad i slutet. Resultatet är i första hand beteendemässigt: vilka som kom tillbaka, hur ofta, till vilka funktioner, och först därefter vad de sa om det. Det är det format Eldwin kör.
Sida vid sida
| Användarpanel | Marknadstest | |
|---|---|---|
| Kärnfråga | Vad tänker och förstår människor? | Fortsätter människor använda den? |
| Tid med produkten | 30 till 90 minuter, ibland några dagar | Åtta veckor, i vardagen |
| Huvudsakligt underlag | Vad människor säger | Vad människor gör |
| Blind fläck | Retention, vana, artighetsbias | Förvärvskostnad, ”varför” bakom siffrorna utan uppföljning |
| Uppsättningstid | Dagar | Två till tre veckor |
| Panelstorlek | 5 till 15 för kvalitativt, hundratals för enkäter | 20+ per land |
| Bäst för | Åtgärda onboarding, språk, konceptets tydlighet | Go / no-go på ett land, rangordna länder |
Varför de inte är utbytbara
En panel är utmärkt på de första tio minuterna och blind därefter. Wellness- och preventionsprodukter avgörs vecka tre, när nyhetsvärdet är borta och produkten antingen passar in i någons dag eller inte. Ingen session, hur välskött den än är, observerar vecka tre. Ett marknadstest gör det, och det är inte särskilt bra på de första tio minuterna: när återkopplingen kommer har onboardingproblemet redan kostat dig några testare.
Det finns också en kulturell effekt. I en session tenderar deltagare i varje land att vara vänligare än de känner, var och en på sitt eget sätt. Användning är svårare att vara artig med: antingen öppnar man appen en tisdagkväll eller inte.
Så använder du dem tillsammans
- Panel först, kort. En handfull sessioner i mållandet fångar det uppenbara: en förvirrande onboarding, ett ord som betyder något annat lokalt, en funktion som väcker anstöt. Åtgärda det innan du lägger åtta veckor på att mäta dess effekt.
- Sedan marknadstestet. När det uppenbara är åtgärdat mäter det åtta veckor långa användningstestet det som avgör lanseringen: håller produkten när människor väl har den.
- Panel igen om testet säger ”justera”. När användningen faller vid en bestämd punkt förklarar några sessioner varför snabbare än gissningar.
När budgeten bara räcker till en
Är beslutet ”ska vi lansera i det här landet”, välj marknadstestet: det är det enda som mäter retention. Är beslutet ”är vår produkt begriplig för människor där”, välj panelen: den är billigare och snabbare, och retention är ännu inte frågan. Att välja panelen för att den är billigare, och sedan lansera på vad människor sa, är det vanligaste sättet att lägga lanseringsbudgeten på att få veta vad åtta veckor hade visat.
Osäker på vilken du behöver?
Boka 30 minuter. Berätta vilket beslut du står inför; skulle en panel avgöra det säger vi det och pekar dig vidare till en.
Frågor grundare ställer
Kan en dagboksstudie ersätta ett marknadstest?
Delvis. En dagboksstudie över en eller två veckor fångar tidig användning och sammanhang, vilket är värdefullt. Den löper sällan länge nog för att se vana, och den vilar på självrapportering snarare än följd användning. För ett lanseringsbeslut, betrakta den som en lång panel, inte ett kort marknadstest.
Ingår intervjuer i ett marknadstest?
Ja, i slutet, och ibland halvvägs. Skillnaden är att intervjuerna kommer efter åtta veckors användning, så människor talar om vad de faktiskt gjorde snarare än vad de föreställer sig att de skulle göra.
Hur många deltagare behöver jag i respektive fall?
För en kvalitativ panel fångar fem till åtta sessioner per land upp de flesta problemen. För ett marknadstest rekommenderar vi minst 20 riktade användare per land, med användningstimmarna, inte antalet personer, garanterade i avtal.