У компании высокая оценка и много отзывов. Достаточно ли этого, чтобы ChatGPT предложил её человеку, который ищет исполнителя в своём городе? Исследования локальных ответов дают полезные наблюдения, но готовой формулы «столько-то звёзд и отзывов — и вы в рекомендации» из них не получается.
Количество отзывов и средняя оценка — разные признаки. Наблюдаемая связь одного из них с появлением компании ещё не показывает, что изменение этого признака приведёт к рекомендации. Разберём, что именно сопоставляли исследователи и где заканчивается обоснованный вывод для бизнеса.
Материал посвящён локальным рекомендациям. Данные потребительского ChatGPT и программных исследований с поиском рассматриваются раздельно; общего процента для всех компаний и стран здесь нет.
Что именно называют рейтингом и отзывами
В разговоре о продвижении слово «отзывы» может обозначать сразу несколько вещей. Для этого разбора разделим их:
| Показатель | Что он описывает | Какой вопрос остаётся открытым |
|---|---|---|
| Средняя оценка | Числовую сводку оценок на указанной площадке | Почему компания включена в конкретный ответ |
| Количество отзывов | Объём отзывов в сопоставляемой карточке | Что произойдёт после появления новых отзывов |
| Текст отдельного отзыва | Мнение или описание опыта его автора | Насколько оно представляет опыт остальных клиентов |
Это рабочие различия показателей. Большое число сообщений не является названием средней оценки, а число звёзд не передаёт содержание каждого отзыва. При этом появление компании в ответе — отдельное событие: для этой статьи им считается включение бизнеса в предложенный список исполнителей.
Сам показанный рейтинг также не раскрывает причину выбора. Чтобы утверждать, что компанию рекомендовали именно благодаря оценке, нужна проверка этой причины. Соседство звёзд и названия в ответе такого вывода само по себе не даёт.
Что исследования связывают с количеством отзывов
В рассмотренных наборах Spearleaf, Tayyab Hussain, SearchWrench и 8ight повторяется наблюдение: больший объём отзывов связан с включением компании в локальные ответы. Это сопоставления конкретных групп бизнеса, а не эксперимент, в котором одной компании добавили отзывы и измерили результат.
Четыре работы здесь не означают четыре одинаковые проверки приложения ChatGPT. Spearleaf и Tayyab Hussain наблюдали потребительский интерфейс. У SearchWrench способ получения ответов недостаточно определён для такого отождествления. Исследование 8ight использовало API с поиском; его результат служит отдельным контекстом и не выдаётся за результат приложения.
Общий вывод ограничен: в этих наблюдениях количество отзывов заслуживало отдельного рассмотрения. Но сравнение компаний с разным числом отзывов не отвечает на вопрос, что случится с одной из них после его увеличения. В таком сравнении одновременно различаются сами компании и условия, в которых их рассматривали.
Поэтому из связи «у названных компаний отзывов больше» не следует прогноз «добавим отзывы — получим рекомендацию». Для этого прогноза требуется доказательство эффекта изменения, которого простое сопоставление групп не даёт.
Почему число звёзд нельзя подставить вместо количества отзывов
Связь с объёмом отзывов нельзя автоматически переносить на среднюю оценку. Фразы «компании с большим числом отзывов назывались чаще» и «любое повышение оценки повышает шанс рекомендации» описывают разные утверждения. Первое не доказывает второе.
Важно и то, с кем сравнивают компанию. Можно сопоставить показанные и непоказанные компании из наблюдавшегося набора. Можно сравнить тех, кто остался в следующем ответе, с теми, кто в нём уже не появился. Вопросы этих сравнений различаются: попадание в один список и сохранение в другом — разные события.
В этой статье мы не выводим единый вес звёзд и не объявляем рейтинг несущественным. Сведения о количестве отзывов не заменяют отдельного подтверждения роли оценки. Равно как отсутствие установленного эффекта в конкретном сравнении не доказывает его отсутствие при любых условиях.
Если нужен другой вопрос — насколько точно нейросеть пересказала жалобу или мнение клиента, — ему посвящён отдельный материал о проверке отзывов и фактов в ответе Gemini. Там разбирается содержание высказываний, а не формула попадания в рекомендации.
Почему среднее значение не становится проходным порогом
Представим полностью условный пример, который не является результатом проверки ChatGPT. В исследовательской выборке есть несколько рекомендованных компаний; автор вычислил их среднюю оценку. Полученное число описывает эту группу.
Из него нельзя заключить, что компания с оценкой ниже среднего не могла попасть в список. Среднее не является минимумом. А даже наименьшая оценка среди наблюдавшихся компаний ещё не становится правилом допуска: это минимум конкретного набора, а не проверенная граница сервиса.
С количеством отзывов действует та же логика. Среднее или медиана у названных компаний не задают обязательное число отзывов для следующей компании. Для вывода о пороге пришлось бы отдельно установить само правило и область, в которой оно действует.
Таким образом, показатель из отчёта и требование платформы — разные вещи. Объявлять исследовательское среднее «необходимым рейтингом для ChatGPT» оснований нет.
Что проверить в выводах исследования
Чтобы понять смысл опубликованного результата, полезно разобрать четыре вопроса о его методе:
- Какие компании сопоставлены? Все обнаруженные предприятия, ограниченный список с карты или только те, чьи сайты удалось проверить? От этого зависит, к какой группе относится вывод.
- Что засчитано как попадание? Название в тексте, карточка компании или предложенный вариант исполнителя? Эти события нельзя незаметно подменять друг другом.
- Какие сведения об отзывах использованы? Оценка и количество относятся к определённой площадке и компании; они не становятся общей характеристикой всех отзывов в интернете.
- Как получены ответы? Потребительский интерфейс, API и нераскрытый способ сбора требуют раздельного описания. Название владельца модели не делает эти условия одинаковыми.
Такое чтение помогает сохранить точный смысл наблюдения. Оно не превращает опубликованную связь в вероятность рекомендации вашей компании. Для отдельного бизнеса остаются неустановленными и конкретный будущий ответ, и эффект предполагаемых изменений.
Официальная справка OpenAI о поиске задаёт контекст локальных результатов и показанных источников. Она не заменяет независимую проверку влияния отзывов. В этом разборе описание сервиса и наблюдения исследователей выполняют разные задачи.
Какой вывод остаётся для бизнеса
Рассмотренные исследования дают основание обсуждать связь объёма отзывов с локальными рекомендациями, но не рассчитывать по ней результат репутационных работ. Здесь не установлены универсальный проходной рейтинг, обязательное число отзывов или прибавка заявок после их увеличения.
Допустим, подрядчик предлагает увеличить число отзывов и связывает это с будущим появлением компании в ChatGPT. В таком предложении есть два отдельных результата: изменение количества отзывов и изменение ответов сервиса. Наблюдательное сравнение разных компаний не доказывает переход от первого результата ко второму.
Этот предел не означает, что отзывы бесполезны. Он означает, что приведённое доказательство отвечает на более узкий вопрос. Польза работы с обратной связью и доказанный эффект на рекомендации ChatGPT требуют своих оснований; одно не подменяет другое.
Для учёта самого появления компании есть отдельный разбор проверки рекомендаций ChatGPT. Он помогает различать названную компанию, предложенный вариант и показанную ссылку. Рейтинг и число отзывов не заменяют эти события.
Частые вопросы
Есть ли минимальный рейтинг для попадания компании в рекомендации ChatGPT?
В рассмотренных данных универсальный порог не установлен. Среднее, медиана или наименьшая оценка наблюдавшихся компаний описывают выборку и сами по себе не становятся правилом сервиса.
Большое количество отзывов гарантирует появление компании?
Наблюдаемая связь объёма отзывов с включением компании не доказывает гарантии. Сравнение разных компаний также не устанавливает, что увеличение числа отзывов одной компании изменит следующий ответ.
Если исследование использовало API OpenAI, это проверка приложения ChatGPT?
Такой набор описывает исследованную программную конфигурацию. В этом обзоре он рассматривается отдельно от наблюдений потребительского интерфейса и не считается его прямой повторной проверкой.
Можно ли по результатам этих исследований рассчитать шанс для моей компании?
Общая связь в ограниченной выборке не даёт такого расчёта. В статье не установлены вероятность рекомендации отдельной компании, её будущая частота появления или эффект добавления отзывов.
Справочные материалы
- Searching the web with ChatGPT — https://help.openai.com/en/articles/9237897-searching-the-web-with-chatgpt
- ChatGPT rebuilds its local shortlist within days. — https://spearleaf.com/research/how-chatgpt-picks-a-local-business/
- How do ChatGPT and other AI tools choose local businesses? I checked 1,352 picks against Google Maps — https://growthwithtayyab.com/research/how-chatgpt-chooses-local-businesses/
- What do the businesses ChatGPT recommends do differently? — https://searchwrench.com/research/ai-recommended-websites-study.html
- How AI assistants recommend local businesses: a study of 1,630 answers — https://8ight.ai/research/how-ai-recommends-local-businesses/