Wat AI-testers wel en niet kunnen testen

Waar ze goed in zijn

• Tekst die niet zegt wat er gebeurt, en knoppen die naar het systeem in plaats van naar de taak van de klant zijn genoemd.
• Te lange paden: de persona raakt zijn geduld of aantal stappen kwijt voordat hij de prijs, het contact of de checkout bereikt.
• Ontbrekende antwoorden op vragen die mensen stellen voor ze betalen: wie runt de site, de totale prijs, terugbetalingen, de reactietijd.
• Pagina's die per apparaat veranderen: een mobiel menu dat de ene link die mensen nodig hebben verbergt, of een pagina die breder is dan het scherm.
• De basis van zoekmachineoptimalisatie: titels, beschrijvingen, koppen en gestructureerde data van elke pagina die ze openden.

Wat ze niet doen

• Ze beoordelen geen visueel design. Ze lezen tekst en besturingselementen; kleuren, spaties en afbeeldingen vallen buiten hun bereik, en een afbeelding bereikt hen alleen als beschrijving.
• Ze versturen geen formulieren op een live site, voeren geen wachtwoorden of kaartnummers in, of loggen niet in met Google of een andere dienst. Aanmelden en betalen tellen als voltooid, dus een run kan je niet vertellen of de bevestiging aankomt.
• Ze verlaten je domein niet: een link naar een andere site brengt hen terug naar die van jou.
• Hun 'zou betalen' is een mening, geen conversieprognose.

Wat een run nooit doet

Ze kunnen fout zijn

Een taalmodel leest soms een woord verkeerd, verbeeldt zich een probleem of geeft de site de schuld van iets dat de test zelf heeft gedaan. Elke notitie bevat de stappen en screenshots erachter, en je kunt deze als waar of onwaar markeren. We tellen het aandeel van de als waar gemarkeerde notities en publiceren dit op de pagina over ons model zodra er genoeg zijn gecontroleerd.

Over het model

Waar mensen nog nodig zijn

Gebruik AI-bezoekers vóór een release, na elke wijziging en op pagina's die je niet elke week met mensen kunt testen. Houd interviews met echte klanten over voor wat alleen een mens kan beantwoorden: of ze het product überhaupt willen, hoe het voelt om het te gebruiken en wat ze echt zouden betalen. De twee werken het beste samen: het AI-panel ruimt de duidelijke problemen weg, zodat de uren met mensen naar de moeilijke gaan.