Коротко
- Смысловая похожесть запросов годится для черновика. Окончательную группу задает пересечение выдачи.
- Порог объединения выбирают до начала работы и проверяют на размеченной вручную выборке.
- Модель полезна для названий групп, разметки интента и поиска подозрительных объединений.
- Спорные группы открывают в поиске глазами, и это не заменяется никакой метрикой.
- Без снимков выдачи и таблицы решений приемку кластеров провести нельзя.
Зачем нужна кластеризация
Группировка запросов нужна, чтобы решить, какие из них можно закрыть одной страницей, а под какие нужны разные. От ответа зависит карта страниц сайта, задания авторам и то, не будут ли две страницы одного сайта мешать друг другу.
Для заказчика результат выглядит как карта страниц. В ней у каждой страницы есть группа запросов, поисковый интент и тип страницы, который поиск показывает по этим запросам. Автор получает задание с конкретной группой, разработчик видит, каких разделов и фильтров не хватает.
Если кластеры собраны неверно, ошибка всплывает поздно. Текст уже написан, страница опубликована, а в поиске по половине запросов показывается не она. Поэтому кластеризация для SEO стоит до любых текстов и до изменений структуры.
Лингвистическая и SERP-модели
Запросы можно группировать по словам и смыслу или по тому, что показывает поиск. Первый способ быстрый и дешевый, второй требует снимать выдачу по каждому запросу, зато показывает реальное поведение поисковой системы.
Группировка по словам и смыслу
Классический вариант сравнивает слова и их формы. Современный переводит каждый запрос в вектор, эмбеддинг, и объединяет запросы с близкими векторами по косинусному сходству. Метод хорошо ловит синонимы и перефразировки, но не знает, что поиск по двум похожим запросам показывает страницы разного типа. Купить электросамокат и электросамокат отзывы близки по смыслу, а в выдаче у первого каталоги, у второго обзоры и форумы.
SERP кластеризация
Для каждого запроса сохраняют первые десять адресов выдачи в нужном регионе и на нужную дату. Два запроса считаются близкими, если у них достаточно общих адресов. Дальше выбирают схему объединения. В жесткой схеме каждая пара запросов внутри группы должна делить нужное число адресов. В мягкой каждый запрос сравнивают с центральным, обычно самым частотным. Жесткая дает мелкие и чистые группы, мягкая крупнее, но в ней чаще оказываются лишние запросы.
Где помогает ИИ
Модель удобно ставить до и после SERP-группировки, а саму группировку оставить на выдаче.
До снятия выдачи
Модель чистит список, находит дубли с разным порядком слов, размечает черновой интент и предлагает предварительные группы по смыслу. По этим группам удобно планировать бюджет на съем выдачи и заранее видеть, где будет много спорных случаев.
После группировки
Модель дает группам названия, пишет короткое описание для автора текста и сравнивает результат SERP-кластеров со смысловыми. Где эти два способа расходятся, там и стоит искать ошибки. Частоты и состав выдачи модель не придумывает, их берут из выгрузок.
Чего модель делать не должна
Решать, объединять ли группы, только по смыслу. Ставить частоты по памяти. Переносить группы с одного рынка на другой без новой выдачи. В справке Google о генеративном контенте сказано, что модели не извлекают факты, а предсказывают вероятную последовательность слов. Для кластеров это значит, что уверенный ответ модели о составе выдачи стоит ровно столько, сколько снимок, который ей передали.
Как вписать эту работу в процесс сбора семантики целиком, описано в статье про семантическое ядро с ИИ. Общие правила, где нейросети в SEO полезны и где начинают сочинять, собраны в материале про AI SEO.
Порог объединения
Порог задают числом общих адресов из первых десяти. Универсального значения нет, оно зависит от ниши и от того, насколько разнообразна выдача. В нише, где топ занят одними и теми же маркетплейсами и агрегаторами, высокий порог склеит почти все подряд. В нише с местными сайтами и картами тот же порог разорвет очевидные пары.
Как подобрать порог
Подбирают его на выборке, а не по совету из чужой статьи.
- Возьмите несколько сотен запросов из разных частей ядра, от частотных до редких.
- Разметьте их вручную, решив, какие запросы ведут на одну страницу.
- Прогоните автоматическую группировку с несколькими значениями порога.
- Для каждого значения посчитайте две доли. Сколько запросов попало в чужую группу и сколько правильных пар оказалось разорвано.
- Выберите значение, при котором ошибки устраивают по цене исправления, и запишите его в отчет вместе с регионом и датой выдачи.
Если меняете порог посреди проекта, пересчитывайте все ядро, иначе группы из разных частей таблицы станут несопоставимы.
Условный пример кластера
Ниже иллюстрация метода, а не данные проекта. Порог для примера взят равным четырем общим адресам по мягкой схеме, центральный запрос купить электросамокат.
Ручная проверка
Проверять руками все ядро незачем. Открывают в поиске те группы, где автоматике доверять нельзя, и решают по типу страниц в топе.
Какие группы смотреть
Группы на границе порога, группы со смешанным интентом, группы с гео в запросах, группы, где смысловая и SERP-группировка не совпали, и все группы, которые ведут на страницы с наибольшим спросом.
Матрица проверки
Комментарий Q2 AgencyБольше всего времени при ручной проверке у нас уходит на запросы у самой границы порога, модель тут ошибается реже. Мы записываем каждое ручное решение в отдельную колонку. Через полгода, когда выдача сдвинется, по этой колонке видно, какие группы пересматривать первыми.
Каннибализация
Так в SEO называют ситуацию, когда две страницы одного сайта претендуют на один и тот же поисковый интент. Найти ее помогает отчет Эффективность в Search Console. Отфильтруйте запросы группы и посмотрите вкладку Страницы. Если по одному запросу показы делят две страницы, это кандидат на разбор.
Как решить
Если страницы почти одинаковые, одну объединяют с другой и ставят редирект. Google в документации о дублях называет редирект и rel="canonical" сильными сигналами для выбора канонической страницы, а включение адреса в sitemap слабым. Если страницы отвечают на разные задачи, их разводят по содержанию и по запросам, и связывают ссылками.
Что проверить перед объединением
Посмотрите, какая из двух страниц получает больше показов и кликов по запросам группы, у какой больше внешних ссылок и какая стоит в меню и в хлебных крошках. Обычно оставляют ту, у которой сильнее эти признаки, а содержимое второй переносят в нее. Редирект ставят сразу после переноса, чтобы не было периода, когда в поиске две версии одного текста.
Как не допустить
Новую группу перед созданием страницы сверяют с запросами, по которым сайт уже получает показы. Связи между страницами одного раздела удобно строить по схеме контент-хабов и внутренней перелинковки.
Артефакты приемки
Кластеры принимают по файлам. Описание словами для этого не подходит. Если подрядчик сдает только таблицу групп, перепроверить ее нельзя.
- Исходный список запросов с источником, регионом и датой частот.
- Снимки выдачи по каждому запросу с датой и регионом.
- Параметры группировки, то есть схема, порог и способ выбора центрального запроса.
- Таблица кластеров с назначенной страницей и типом страницы.
- Колонка ручных решений с причиной.
- Список пересечений с существующими страницами и план по каждой.
Проверить сдачу можно самому, без подрядчика. Выберите пять групп из разных разделов, откройте выдачу по двум-трем запросам каждой в нужном регионе и сравните тип страниц в топе с тем, что записано в таблице. Если в двух группах из пяти тип не совпадает, просите подрядчика пересмотреть порог или переснять выдачу.
Эти файлы мы сдаем в рамках услуги SEO-оптимизации сайта. По ним карту страниц можно проверить без нашего участия.
Частые вопросы
Источники
Основатель Q2 Agency, бывший директор по маркетингу: работал в Яндексе, Xsolla, Cheelee и Allen Carr’s Easyway. Специализация - нейромаркетинг, воронки продаж и сквозная аналитика.
