Как рассчитывается оценка AI-видимости

1.Что измеряет оценка

Мы задаём нескольким публичным AI-ассистентам набор вопросов, которые реально может задать клиент, и считаем в каждом ответе две вещи: упомянут ли ваш бизнес по названию и процитирован ли ваш сайт как источник. Оценка — среднее этих результатов по движкам, выраженное из 100.

В этом вся идея. Это измерение наблюдаемого поведения, а не его модель. Оценка не знает, почему ассистент ответил именно так, и не предсказывает, что он ответит завтра.

Чем оценка не является: рейтингом, гарантией, прогнозом выручки или чем-то, что признаёт хоть один AI-вендор. За пределами Tunnel этим числом не пользуется никто. Оно полезно тем, что измеряется одинаково каждый день, поэтому его движение осмысленно даже там, где абсолютное значение — нет.

2.Какие движки мы опрашиваем

Пять движков — все они ассистенты, которыми клиент действительно может пользоваться, и все они те, до которых мы реально дотягиваемся:

Perplexity — единственный движок, который возвращает список использованных источников, и это единственный качественный сигнал цитирования, который у нас есть. Когда опросы идут через единый агрегатор, такой список недоступен, и цитирование сводится к появлению вашего домена в тексте ответа.

3.Какие вопросы мы задаём

Пять запросов за прогон, выбранных одним из двух способов:

1. Из ваших ключевых слов. Если вы привязали ключевые слова к сайту, мы берём ваши первые пять. Это детерминированно, поле боя выбираете вы, и это не стоит ни одного вызова модели.
2. Сгенерированные из вашего же контента. Иначе модель составляет пять запросов по собранным при обходе данным о бизнесе и FAQ, покрывая формы, которые чаще всего вызывают AI-ответы: определение, рекомендация, «как решить» о вашей проблеме, вопрос о цене и сравнение или альтернативы.

Затем применяются две поправки. Брендовый запрос привязывается к вашему домену, потому что бизнес с названием из обычного слова («Tunnel») иначе получит ответ совсем о другом. А если бизнес локальный, мы добавляем один безбрендовый запрос по местоположению — вопрос, который клиент задаёт на самом деле, без единого намёка на то, что вы существуете. Он самый сложный и самый честный.

Каждый прогон сохраняет точные использованные запросы, поэтому оценку, с которой вы не согласны, можно проследить до вопросов, которые её дали.

4.Что считается упоминанием

Текст ответа нормализуется перед сопоставлением: Unicode-декомпозиция, снятие диакритики, нижний регистр, пунктуация заменяется пробелами. Так *«Cofetăria Bună»* совпадает с *«cofetaria buna»*.

Затем мы ищем ваш бренд и бренд без концевого юридического суффикса (SRL, S.R.L., LLC, Ltd, GmbH, SA, PFA и подобных). Варианты короче четырёх символов отбрасываются — двухбуквенный бренд, совпадающий везде, хуже, чем отсутствие сигнала.

Для однословного бренда правило строже. «Tunnel», «Slack» или «Delta» постоянно встречаются в обычных предложениях, поэтому для них в том же ответе должен быть подтверждающий якорь — ваше имя хоста или его отличительная часть, — иначе упоминание не засчитывается. Названия из нескольких слов достаточно специфичны сами по себе.

5.Что считается цитированием

Цитирование сильнее упоминания: ассистент указал на вас как на источник, а не просто назвал.

1. Если движок вернул список источников, мы ищем ваш точный хост или его поддомен.
2. Иначе ищем «голый» домен в тексте ответа.

Сегодня список источников возвращает только Perplexity, поэтому для остальных движков цитирование означает, что домен был написан в ответе.

6.Формула

Каждому движку задаются все запросы. Для каждого движка мы считаем упоминания и цитирования по этим запросам, затем:

engineScore = ((mentions × 0.6 + citations × 0.4) / queries) × 100

probeScore  = mean(engineScore) over the 5 engines

overall     = min(100, probeScore + rootLlmsTxtBonus)

Вес упоминания — 0,6, цитирования — 0,4. Ответ, который и называет вас, и ссылается на вас, даёт по этому запросу полную 1,0; упоминание без ссылки — 0,6.

rootLlmsTxtBonus — это 3 балла, начисляемые, когда ваш сайт отдаёт сгенерированный нами llms.txt прямо с корня вашего домена, а не только с нашего адреса. Это бонус, а не условие: его отсутствие ничего не стоит и он не может поднять оценку выше 100.

Вместе с оценкой мы фиксируем два показателя, которые понятнее составного: доля упоминаний и доля цитирований — процент от всех проб «движок × запрос», давших результат.

7.Оценки в баллах

Мы публикуем пороги такими, как они реализованы, а не такими, как они выглядели бы лучше всего. Получить A по-настоящему трудно — это значит быть названным почти в каждом ответе почти каждого ассистента, — но это достижимо, чего не было, пока набор движков не сократили до пяти измеримых.

8.Как часто выполняется

Каждый зарегистрированный сайт и каждая запись опрашиваются заново с суточной периодичностью, одинаковой для всех тарифов, включая бесплатный. Обход запускается ежечасно и берёт всё, у чего с момента последней оценки прошло 24 часа.

Для платящих клиентов мы не запускаем его чаще. Ответы ассистентов меняются недостаточно быстро, чтобы шестичасовая периодичность сказала что-то сверх суточной, а брать деньги за более высокую частоту значило бы продавать шум.

Каждый прогон сохраняет разницу с предыдущим, так что видно движение, а не только уровень.

9.Аудит точности

Отдельно от оценки каждый прогон сверяет то, что *сказали* движки, с достоверными данными, собранными с вашего сайта. Он сообщает о трёх типах находок:

• Несовпадение телефона — ассистент назвал контактный номер, который вам не принадлежит.
• Цитирование двойника — ассистент сослался на домен, похожий на ваш, но не ваш.
• Упоминание без источника — вас назвали, не приложив источник.

Ответы-заглушки из аудита исключены: пустой ответ способен породить только ложные находки. Уведомление приходит, когда находки появляются, а не при каждом прогоне, который их подтверждает.

10.Известные ограничения

Сказано прямо, потому что вы всё равно их найдёте:

• Оценка охватывает ассистентов, которых мы можем опросить. Ассистент, которому нельзя публично задать вопрос, в оценку не входит вовсе. Мы предпочитаем оставить пробел, а не заполнять его числом, которого не измеряли, — но это пробел, и если ваши клиенты живут на ассистенте, до которого мы не дотягиваемся, оценка о них молчит.
• Мы опрашиваем API, а не потребительский продукт. Модель за веб-интерфейсом ChatGPT не идентична той, которую мы можем вызвать, а у потребительского продукта есть поиск и персонализация, которые мы не воспроизведём. Проба приближает потребительскую поверхность, но не является ею.
• Модели для опроса — дешёвого класса. Мы используем недорогой уровень каждого вендора, чтобы ежедневный обход по всем клиентам был посильным. Более крупная модель может ответить иначе.
• Пять запросов — маленькая выборка. Оценки колеблются по причинам, которые являются шумом, а не сигналом. Смотрите на тренд за две недели, а не на разницу между двумя днями.
• Сопоставление упоминаний текстовое. Ассистент, который прекрасно описал ваш бизнес, но не назвал его, получает ноль — справедливо, но это потеря, которую число не отражает.
• Цитирования в основном недоступны. Четыре из пяти движков не возвращают список источников, поэтому их цитирования зависят от того, напишет ли модель URL.
• Ответы недетерминированы даже при температуре 0.

11.Как воспроизвести расчёт самому

Ничего из перечисленного не требует нашего софта. Задайте пяти ассистентам одни и те же пять вопросов, посчитайте ответы, где вас назвали, посчитайте те, где на вас сослались, и примените формулу выше. Если ваше число заметно отличается от нашего, начинать надо с запросов — они сохраняются при каждом прогоне и видны в панели.

Мы предпочли бы, чтобы вы проверили. Оценка, которую нельзя проаудировать, — оценка, за которую не стоит платить.

12.Изменения этой методологии

Изменение формулы меняет историю каждого клиента, поэтому мы считаем этот документ частью продукта. Когда меняется расчёт, меняется и эта страница, а дата выше обновляется.

Вопросы по любому пункту: contact@tunnelpowered.com. Дальше по теме: документация для агентов и прямая линия.