Tutkimusmenetelmä

Toistettava protokolla tekoälysuositusten mittaamiseen

Tämä on tutkimuksen toteutusohje, ei julkaistu asiakas- tai markkinavertailu. Käytä sitä määrittämään havaintojen keruu ennen vastausten näkemistä.

Sivlo · Päivitetty

1. Kirjaa tutkimuskysymys ja otanta

Määritä kohdemarkkina, kieli, tuoteryhmä ja rajattu ostotilanteiden joukko. Tallenna kysymysten täsmällinen sanamuoto ja peruste niiden valinnalle. Erota nimelliset tarkistukset oma-aloitteisen löydettävyyden kysymyksistä. Jos vaihdat paneelia, anna sille uusi versio.

2. Tallenna havainto ja ympäristö

Tallenna jokaisesta yrityksestä kysymystunniste, aikaleima, palvelu ja malli, API tai kuluttajanäkymä, hakuasetus, maa, kieli, toisto ja kysymysjoukon versio. Säilytä alkuperäinen vastaus ja näkyvät lähteet. Kirjaa myös virhe, aikakatkaisu ja havaittu kustannus sen sijaan, että korvaisit puuttuvan havainnon nollalla.

Älä lähetä henkilökohtaisia asiakasviestejä tai muuta luottamuksellista aineistoa julkiseen vertailuun. Käytä markkinaa koskevia kysymyksiä ja hanki lupa tunnistettavan asiakasnäytön julkaisuun.

3. Määritä laskentasäännöt etukäteen

Kirjaa, milloin nimi on maininta ja milloin yritystä todella suositellaan ostajalle. Käsittele kielteiset ja epäselvät suositukset johdonmukaisesti. Tarkista luokittelun otos käsin ja raportoi erimielisyydet. Lähteen näkyminen on havainto, ei pääsy mallin sisäiseen luottamuspisteeseen.

4. Toista ja arvioi vertailukelpoisuus

Toista sama paneeli eri ajankohtina. Pidä palveluasetukset ja markkina samoina. Raportoi, jos malli tai keruutapa muuttuu. Laske osoittajat, nimittäjät ja epävarmuus erikseen kullekin palvelulle ja markkinalle. Ennen–jälkeen-muutos ei yksin osoita toimenpiteen vaikutusta.

5. Julkaise menetelmä tulosten rinnalla

Julkaise keruuajat, otanta, kattavuus, poissulut, toistot, laskentasäännöt ja rajoitukset. Näytä esimerkkivastaukset vain luvallisesti. Merkitse julkaisijan kaupallinen suhde vertailtaviin yrityksiin. Jos aineistoa ei vielä ole, julkaise protokolla ilman keksittyjä tuloksia.

Mittaa oma markkinasi

Näe, keitä tekoäly suosittelee markkinallasi, miksi ja mitä kannattaa muuttaa.

Pyydä esittely