Jak powstaje raport widoczności w AI

Badamy przede wszystkim to, co systemy AI mówią klientom szukającym firmy z Waszej branży; pytania o firmę z nazwy są osobną, mniejszą częścią badania. Każdą odpowiedź zapisujemy, a każda liczba w raporcie wynika z policzenia tych odpowiedzi. Metoda jest ta sama w każdym raporcie i na każdym poziomie; zmienia się liczba systemów i modeli oraz głębokość analizy.

Pytania klientów

Ze strony firmy ustalamy jej branżę, ofertę i rynek. Pytania układamy pod profil firmy, w języku klientów i bez nazw firm, tak jak pyta ktoś, kto szuka dostawcy. W raporcie Pełnym i Premium zestaw pytań zatwierdza analityk. Zestaw zostaje przypisany do firmy i wraca w badaniu powtórnym i Monitoringu, więc wyniki można porównać. Firmom, do których klienci przychodzą osobiście, zadajemy pytania z czterech odległości od ich punktu.

Systemy AI i sposób pytania

Każde pytanie trafia do systemów AI przez API, w tych samych ustawieniach dla każdej firmy. ChatGPT, Gemini i Claude dostają każde pytanie z wyszukiwaniem w internecie i bez niego, żeby oddzielić to, co AI znajduje, od tego, co pamięta. Pytamy też Google AI Overviews i AI Mode. AI może odpowiedzieć na to samo pytanie różnie, dlatego w raporcie Pełnym i Premium każde pytanie zadajemy trzy razy.

Pytania o firmę

Osobno pytamy AI o Waszą firmę z nazwy, bez wyszukiwania: czym się zajmuje, gdzie działa, jak się z nią skontaktować. Odpowiedzi porównujemy z Waszą stroną i pokazujemy każdą różnicę. Wzorcem jest Wasza strona; czy podaje stan aktualny, oceniacie Wy.

Strona firmy oczami robota

Strony firmy pobieramy tak, jak robi to robot każdego systemu AI, i sprawdzamy, ile z pięciu informacji ze strony do niego dociera. Informacja może zatrzymać się na jednym z czterech progów.

Ocena odpowiedzi

W każdej odpowiedzi sprawdzamy, czy pada nazwa Waszej firmy, i ustalamy, jak mocno AI ją poleca: pierwszy wybór, rekomendacja z uzasadnieniem, pozycja na liście, wzmianka mimochodem albo brak nazwy. Każdą ocenę opieramy na cytacie z odpowiedzi. Zadania w planie działań wynikają z usterek wykrytych w badaniu, a każde ma dowód z badania.

Wskaźnik widoczności w AI (AVS)

Wynik od 0 do 100 wpada w jedno z pięciu pasm: 0–14 Niewidoczna dla AI · 15–34 Rzadko polecana · 35–54 Polecana okazjonalnie · 55–74 Polecana konsekwentnie · 75–100 Lider kategorii.

Dowody i archiwum

Każda odpowiedź trafia do archiwum w całości, z modelem, datą i numerem dowodu. Cytaty w raporcie mają numer dowodu, który prowadzi do odpowiedzi w archiwum, więc każde zdanie raportu da się sprawdzić w źródle. Archiwum dostajecie razem z raportem. W raporcie Pełnym karta badania podaje też, jak bardzo odpowiedzi różniły się między próbami.

Kolejne pomiary

Badanie powtórne i Monitoring zadają ten sam zestaw pytań tym samym systemom w tych samych ustawieniach. Każde zadanie z poprzedniego planu dostaje werdykt: Zadziałało, Brak poprawy albo Niezrobione. Zmiany poniżej progu zmienności opisujemy jako brak zmiany.