Metodologija
Šiame puslapyje aprašome, kaip SEOAI.lt matuoja verslų matomumą AI sistemose ir kaip apskaičiuojami viešai skelbiami sektorių indeksų bei tyrimų skaičiai.
Kas yra AI matomumo balas
AI matomumo balas (0–100) apibendrina, kaip dažnai ir kaip stipriai verslas pasirodo AI asistentų atsakymuose į pirkėjo ketinimo užklausas. Balas sudaromas iš keturių dalių: rekomendavimo dažnio, pozicijos atsakyme, sutapimo tarp modelių ir rezultato pastovumo kartojant testus. Didžiausią svorį turi rekomendavimo dažnis, nes būtent jis atspindi, ar AI siūlo verslą klientui, kuris dar nežino jūsų pavadinimo.
Balas skaičiuojamas tik iš realiai gautų atsakymų. Jei dalis atsakymų nepavyko gauti, tai fiksuojama ir rodoma kaip duomenų padengimas – balas neužpildomas spėjimais.
Kaip parenkamos užklausos
Užklausos generuojamos pagal verslo veiklos sritį, pagrindinę paslaugą, šalį ir vietovę. Naudojamos dviejų tipų užklausos: nevardinės (klientas ieško paslaugos ir nežino įmonės pavadinimo) ir vardinės (klausiama apie konkretų pavadinimą). Nevardinės matuoja rekomendavimą, vardinės – atpažįstamumą.
Užklausų kiekis
Nemokama patikra naudoja 5 užklausas ir 2 pakartojimą. Pilna analizė – 25 užklausų ir 3 pakartojimus kiekvienai, todėl vienam verslui surenkama iki 150 atsakymų.
Užklausų rinkiniai sektorių tyrimuose
Sektorių indeksuose naudojamas administratoriaus patvirtintas užklausų rinkinys, kuris turi savo versijos numerį. Versija saugoma kartu su rezultatais, kad vėliau būtų galima paaiškinti, kodėl skirtingų laikotarpių duomenys gali skirtis.
Užklausų klasifikavimas
- Tiesioginė rekomendacija – klientas prašo patarti, kurią įmonę rinktis.
- Geriausi / top sąrašai – prašoma išvardyti geriausius paslaugų teikėjus.
- Palyginimas ir alternatyvos – lyginamos kelios galimybės.
- Situacija ar problema – aprašoma konkreti situacija ir prašoma sprendimo.
- Vardinės užklausos – klausiama tiesiogiai apie konkretų prekės ženklą.
Kokie AI modeliai analizuojami
Šiuo metu analizuojami: ChatGPT ir Gemini. Kiekvienas modelis vertinamas atskirai ir turi savo balą; bendras rodiklis sudaromas iš abiejų modelių realių rezultatų. Jei modelis atsakymo metu naudoja gyvą paiešką, tai fiksuojama kartu su atsakymu. Modelio versijos ir analizės laikas saugomi tokie, kokius pateikia tiekėjas – nežinomų reikšmių nepildome.
Google ar Bing paieškos pozicija niekada nelaikoma AI rezultatu. Tai atskiros sistemos ir atskiri signalai.
Sąvokų apibrėžimai
Paminėjimas (mention)
Verslas laikomas paminėtu, kai jo pavadinimas (arba patvirtintas pavadinimo variantas) aptinkamas atsakymo tekste ir sutampa su analizuojamu subjektu. Atsitiktiniai bendrinių žodžių sutapimai atmetami.
Rekomendacija (recommendation)
Rekomendacija fiksuojama tada, kai verslas nevardinėje užklausoje pateikiamas kaip siūlomas pasirinkimas – sąraše arba tiesioginiame patarime. Vien paminėjimas kontekste rekomendacija nelaikomas.
Citata (citation)
Citata laikomas šaltinis, kurį modelis realiai pateikė atsakyme kaip nuorodą arba techniškai grąžino kartu su atsakymu. Šaltinis nežymimas kaip cituotas vien todėl, kad jis egzistuoja internete.
Pozicija
Pozicija fiksuojama tik tada, kai atsakyme yra objektyviai nustatoma tvarka (sąrašas ar numeruoti punktai). Kai tvarkos nėra, pozicija nerodoma.
Kaip skaičiuojami indekso rodikliai
- Paminėjimo dažnis – kiek procentų sėkmingų atsakymų verslas buvo paminėtas.
- Rekomendavimo dažnis – kiek procentų nevardinių atsakymų verslas buvo rekomenduotas.
- Citavimo dažnis – kaip dažnai atsakymuose buvo cituotas verslo domenas.
- AI matomumo balas – sudėtinis rodiklis, aprašytas šio puslapio pradžioje.
- Pokytis – skirtumas tarp dviejų laikotarpių balų; rodomas tik turint bent du matavimus.
Sektoriaus indekse kiekvienai įmonei imama naujausia užbaigta analizė tam laikotarpiui. Istoriniai įrašai neperrašomi – kiekvienas laikotarpis saugomas atskirai.
Kai AI atsakymai skiriasi
Tas pats klausimas skirtingu metu gali duoti skirtingą atsakymą. Todėl kiekviena užklausa kartojama kelis kartus, o rezultatas vertinamas kaip dažnis, ne kaip vienkartinis faktas. Pastovumas kartojant įtraukiamas į balą, o skirtumai tarp modelių rodomi atskirai.
Kada ir kaip dažnai atnaujinami duomenys
Individualios analizės atliekamos tada, kai jas paleidžia klientas. Sektorių indeksai perskaičiuojami tada, kai atliekamos naujos to sektoriaus įmonių analizės; kiekvienas perskaičiavimas išsaugomas kaip atskiras laikotarpis su savo data. Viešai skelbiame tik tuos sektorius, kuriuose yra pakankama imtis – pagal nutylėjimą bent 10 įmonių.
Apribojimai
- Rezultatai galioja konkrečiai analizės datai ir naudotam užklausų rinkiniui.
- AI modeliai atnaujinami be įspėjimo, todėl rezultatai gali keistis be jokių pokyčių jūsų pusėje.
- Analizė matuoja modelių atsakymus, o ne realų klientų elgesį.
- Mažos imties sektoriai nelaikomi reprezentatyviais ir viešai neskelbiami.
- Rodikliai nėra oficialūs AI platformų reitingai.
Kas nėra viešinama
Dėl metodikos patikimumo neviešiname tikslių vidinių svorių, sistemos instrukcijų modeliams ir atskirų klientų duomenų. Visi viešai skelbiami skaičiai išlieka patikrinami: nurodome imtį, laikotarpį, modelius ir rodiklių apibrėžimus.
Apie šiuos duomenis
- AI modelių atsakymai kinta laike, todėl rezultatai atspindi konkrečios datos matavimą.
- Rezultatai priklauso nuo naudotų užklausų formuluočių ir jų rinkinio versijos.
- Skirtingi AI modeliai tai pačiai užklausai gali pateikti skirtingus atsakymus.
- SEOAI.lt rezultatai nėra garantija, kad vartotojas gaus identišką AI atsakymą, ir nėra oficialus AI platformų reitingas.
- Visi skaičiai apskaičiuoti iš realiai surinktų AI atsakymų.
Susijusi informacija
Trumpesnį paaiškinimą apie individualią analizę rasite puslapyje Metodika, o viešus sektorių duomenis – AI matomumo indekse.
Patikrinkite savo AI matomumą
Nemokama patikra parodo, ar ChatGPT ir Gemini mini jūsų verslą realiose pirkėjo užklausose.