Чому трекати позиції бренду у відповідях AI промптами за допомогою різних інструментів немає…

Чому трекати позиції бренду у відповідях AI промптами за допомогою різних інструментів немає ніякого сенсу, дослідив Rand Fishkin. Саме дослідження — пряма реклама одного з його сервісів, до якого насправді теж багато питань, але є цікаві знахідки.

Окрім того, що не факт, що користувачі взагалі використовують такі або подібні промпти, до того, що ви запитуєте апі, а користувачам відповідає чат, ще є проблема персоналізації.

Ренд зібрав 600 добровольців, кожному дали по 12 запитів з різних тематик і попросили задати їх в ChatGPT, Claude і Google AI (AI Mode та AI Overview). Потім відповіді проаналізували на входження брендів. І виявили, що ранжування брендів у списках відповідей майже ніколи не співпадають. Зі 100 відповідей шанси отримати 2 більш-менш однакові складають менше 1%. Вони будуть йти у різному порядку, будуть різні списки таких брендів, кількість брендів у відповіді тощо.

Але якщо задати один і той самий промпт 100 разів, то можна дослідити, який бренд згадується у відповідях найчастіше. І тоді вже зробити припущення, щодо видимості цього бренду за цим конкретним промптом. На скріншоті середня видимість по лікарні топ-3 брендів у різних AI-чатах.

Подібний результат можна отримати, якщо зробити близько 100 різних промптів по тематиці вашого бренду, але по різним підтематикам. У таких випадках є бренди, які зберігають 50% - 70% видимості у відповідях на штучні або рандомні людські промпти.

TLDR: якщо ви досліджуєте видимість у відповідях AI, робіть це по всім підтематикам і використовуйте від 100 промптів, тоді інформація буде більш-менш придатною для аналізу.