Как мы измеряем.
Что мы делаем и как? Чего мы не можем измерить? Обо всём этом рассказываем на этой странице.
Мы готовим вопросы.
Мы пишем вопросы, которые на самом деле зададут Ваши клиенты. Учитываем Вашу отрасль, город и услуги. Добавляем темы, которые Вы указали при онбординге. В вопросах нет персональных данных. Кроме того, чтобы узнать Ваш бизнес и окружение, мы задаём 10 эталонных вопросов.
В каждом сканировании 90 вопросов. Каждый тариф отслеживает одну компанию. Это домен Вашего сайта или название компании с городом и районом. В тарифах Мониторинг Maxxed и Enterprise Max число вопросов в следующем сканировании может вырасти до 270.
Мы задаём каждый вопрос несколько раз.
Мы задаём вопросы ChatGPT, Gemini, Claude и Perplexity. Каждый вопрос задаётся в отдельной сессии, один за другим. В тарифах Мониторинг Maxxed и Enterprise Max дополнительно измеряются Обзоры от ИИ в Google и Copilot. Это автоматически делают системы doodlis.
Ответы ChatGPT, Gemini и Copilot мы берём с экрана приложения, который видит любой пользователь. Их собирают поставщики данных. Ответы Perplexity приходят с экрана приложения или через программный интерфейс. Ответы Claude мы получаем через официальный программный интерфейс, с веб-поиском. Какой путь мы использовали, указано в примечании о методе к результату.
Мы читаем и изучаем ответы.
Какие компании рекомендовали и в каком порядке? На какие источники опирался ответ? Упомянули ли Вас? Есть ли о Вас неверные данные? Страницы-источники, которые показывают ответы, мы открываем собственным загрузчиком. При этом мы соблюдаем правила robots.txt этих сайтов. Если наш загрузчик не может открыть страницу, мы пробуем сервис чтения, только как запасной вариант. Страницу, закрытую через robots.txt, мы не открываем никогда.
Изучая ответы, мы используем помощь ИИ. Перед публикацией мы проверяем результат и выкладываем его в Вашу панель.
Мы делаем два сравнения.
Мы сравниваем ответы, где Вас упомянули, с другими ответами на те же вопросы, а Вас — с рекомендуемыми компаниями. Каждая разница приходит с двумя значениями: Вашим и тем, что обычно бывает у рекомендуемых.
С кем и по каким критериям Вас сравнивать, определяют 10 эталонных вопросов. Эти вопросы мы не включаем в Ваш результат и не берём за них плату.
Мы проверяем, что разница не случайна.
При множестве сравнений мы учитываем случайность. Вы видите только разницы, прошедшие эти проверки.
- Достаточно примеровРазницу, основанную на малом числе ответов, мы не сообщаем.
- Поправка на случайностьМножество сравнений даёт случайные разницы. Мы это исправляем.
- УстойчивостьРазница должна сохраняться для разных моделей и типов вопросов.
- Прочие факторы неизменныПроверяем при одной и той же модели и одном типе вопроса.
- Мы проверяем себяЕсли случайно перемешать метки, результата быть не должно. Если он есть, мы исправляем метод.
Каждую разницу даём двумя числами и одной фразой.
У рекомендуемых обычно 528 отзывов, у Вас 61. Каждый новый отзыв сокращает эту разницу.
Пример данныхРядом мы пишем, как читать результат. Когда результат готов, мы сообщаем Вам по электронной почте.
Каждую пятницу мы смотрим на общую тенденцию.
Мы следим, на какие типы источников и насколько опираются ИИ. Эти данные мы тоже собираем автоматически.
Как часто обновляется Ваш анализ
Каждый тариф отслеживает одну компанию. Первое сканирование начинается, когда оплата получена и онбординг завершён. В тарифах мониторинга время до следующего сканирования видно в Вашей панели.
- Разовое сканирование: один раз, 4 модели
- Мониторинг Light: раз в 2 недели, 4 модели
- Мониторинг Normal: раз в неделю, 4 модели
- Мониторинг Maxxed: раз в 3 дня, 6 моделей
- Enterprise Pro: раз в неделю, 4 модели
- Enterprise Max: раз в 3 дня, 6 моделей
Что Вы видите в панели
- Результаты анализа: два значения, разница между ними и одна фраза
- Все собранные ответы, по дате и модели
- Рекомендуемые: компании, которых рекомендуют в ответах на те же вопросы
- Рекомендации, список задач по порядку и путь каждой задачи
- В тарифах мониторинга при каждом обновлении — новые результаты и следующий шаг
- В тарифах мониторинга, «Позиция»: Ваше место в трёх рейтингах и сколько не хватает до места выше
В тарифах Мониторинг Maxxed и Enterprise Max результат также приходит в более подробном виде. Что в нём есть, описано на странице цен.
Как составляются три рейтинга Позиции.
У каждого рейтинга есть рамка и объективное правило включения. Формула оценки одна для всех.
- В списке каждая компания, подходящая под правило
- Не меньше пяти компаний в каждом рейтинге
- Один из них всегда в самой широкой рамке
- Если рамка меняется, причина указывается
Что мы обещаем.
Мы соблюдаем это в каждом тарифе и на каждом экране.
- Каждое число основано на реальных ответах
- Собранные ответы остаются в Вашей панели
- Если метод меняется, мы говорим об этом
- Без фальшивых отзывов и скрытой рекламы
Чего мы не можем обещать.
Ответы ИИ создают другие компании. Поэтому некоторые вещи мы не обещаем.
- Конкретное место
- Конкретный результат видимости
- Когда изменится ответ
- Единственную причину разницы
Наши ограничения
- Ответы ИИ могут зависеть от человека, места, времени и версии модели. Наше сканирование — это результат вопросов, заданных в определённый момент и в определённых условиях. Не каждый пользователь увидит тот же ответ.
- Компании, которые создают ИИ, меняют свои модели без предупреждения. Компания, которая видна в одном сканировании, может не появиться в следующем.
- Вес источников мы определяем по источникам, которые показаны в ответах, и по содержанию ответа. Внутреннее устройство этих компаний нам неизвестно.
- Обзоры от ИИ — это ответ ИИ, который Google показывает в самом верху результатов поиска. Google показывает его не при каждом поиске. Вопросы, по которым обзор не появился, не входят в анализ этой модели.
- Если модель не удалось измерить в одном сканировании, мы пишем об этом в результате. Анализ мы делаем по ответам остальных моделей, измеренных в тот день.
- Анализ — это не оценка рекомендуемых компаний. Разница лишь показывает, что в ответах встречается вместе, и не доказывает причину.
- Какая компания попадёт в ответ, решают модели. Мы измеряем, находим причину и готовим задачи.
Полное описание объёма услуг и результата — в документе «Объём услуг и заявление о результате».
Что означают числа.
Что значит каждое число на нашем сайте и в Вашей панели.
- Проанализировано ответов
- Все ответы на наши вопросы к моделям ИИ, вошедшие в анализ. Пробные и тестовые сканирования не учитываются.
- Проанализировано за неделю
- Ответы, вошедшие в анализ за последние семь дней.
- Число отраслей
- Разные отрасли, по которым есть хотя бы один анализ.
- Рекомендуемые
- Компании, которые рекомендуют в ответах на те же вопросы.
- Обычно у рекомендуемых
- Значение в середине, если упорядочить значения рекомендуемых. Крайние значения на неё не влияют.
- Разница
- Расстояние между Вашим значением и значением для сравнения. Не приговор, а разрыв, который можно закрыть.
- Основа
- На скольких ответах и компаниях основан результат.
- Охват
- Сколько вопросов затрагивает результат.
Как мы используем данные.
Для отраслевых результатов мы берём сводные числа без названий, доменов и текстов. Ваши данные не видит ни одна другая компания.
Пример списка вопросов
Первые 10 вопросов из примерного набора для стоматологической клиники в Зеленограде (всего вопросов: 90).Пример данных
- В какую клинику в Москве обратиться для имплантации зубов?
- Можешь посоветовать хорошего стоматолога в Москве?
- Где в Москве можно сделать отбеливание зубов?
- Какую клинику в Москве посоветуешь для имплантации?
- Какую клинику в Москве посоветуешь для циркониевых коронок?
- Какую клинику в Москве посоветуешь для лечения элайнерами?
- Какую клинику в Москве посоветуешь для дизайна улыбки?
- Какую клинику в Москве посоветуешь для исправления прикуса?
- Какую клинику в Москве посоветуешь для керамических виниров?
- Какую клинику в Москве посоветуешь для лечения каналов?
