Кластеризация семантического ядра: как сгруппировать сотни ключей за 15 минут

Собрать ключевые слова для рекламы или поискового продвижения — это лишь первый шаг. Дальше их нужно правильно сгруппировать по страницам сайта. В статье мы рассмотрим разные способы кластеризации, покажем, какие инструменты экономят часы работы, и подробно разберем на конкретном примере, как кластеризовать запросы с помощью инструмента click.ru.

Что такое кластеризация семантического ядра и зачем она нужна

Кластеризация запросов — это группировка ключевых слов по смысловому принципу. Внутри одного кластера оказываются фразы, под которые логично создать одну и ту же страницу сайта. Например, запросы «купить ноутбук», «каталог ноутбуков» и «ноутбук в рассрочку» попадают в один кластер, потому что все они ведут на страницу каталога. А вопрос «сколько оперативной памяти нужно для игр» пойдет в другой кластер, под него следует создать отдельную статью.

Без группировки легко создать несколько страниц под одни и те же запросы, и информация на них будет дублироваться. Вот к чему это может привести.

1. Каннибализация трафика. Это когда несколько страниц одного сайта борются за одни и те же ключевики. Поисковики не понимают, какую страницу показывать в выдаче. В результате ни одна из них не держится в топе, а трафик распыляется.
2. Колебания позиций и трафика. Сегодня по запросу выдается карточка товара, завтра — страница категории, послезавтра — снова карточка. Поисковик мечется, позиции и трафик колеблются.
3. Ухудшение поведенческих факторов. Информационные и коммерческие запросы оказываются на одной странице. Пользователи с разными целями не получают нужного результата и уходят к конкурентам.

Виды кластеризации: разница и примеры

Фразы группируются по схожести выдачи. Методов такой разбивки два, и разница между ними состоит в жесткости правил.

1. Soft-кластеризация (мягкая кластеризация) создает широкие группы. Выбирается главный запрос (обычно самый частотный), и к нему подтягиваются остальные, если у каждого из них есть хотя бы 3-5 общих URL с этим главным. При этом второстепенные фразы могут вообще не пересекаться между собой. Проще говоря, все «дружат» с главным запросом, но не обязаны «дружить» друг с другом. Такой метод дает больше ключей в одной группе и подходит для информационных сайтов и интернет-магазинов, где важна полнота охвата.
2. Hard-кластеризация (жесткая кластеризация) обеспечивает точные кластеры для страниц. Здесь условие строже: чтобы попасть в одну группу, у всех запросов должен быть общий набор URL. То есть каждая фраза «дружит» с каждой. Группы получаются меньше, зато ключевые слова внутри них максимально близки по смыслу. Такой метод незаменим для коммерческих проектов и сайтов услуг, где ошибка в группировке стоит больших денег.

Визуализация разницы между soft- и hard-подходом

Пример

Допустим, мы продвигаем сайт компании, которая делает ремонт. Есть список ключевых запросов:

1. ремонт квартир;
2. ремонт квартир под ключ;
3. евроремонт квартир;
4. ремонт однокомнатной квартиры;
5. дизайн интерьера;
6. дизайн-проект квартиры.

Как отработает soft-кластеризация

Берем самый частотный запрос «ремонт квартир». Смотрим, какие еще фразы имеют с ним хотя бы 3-5 общих сайтов в топе выдачи. «Ремонт квартир под ключ» и «евроремонт квартир» подтянутся, у них много пересечений. «Ремонт однокомнатной квартиры» тоже может попасть в ту же группу, если в топе выдачи те же компании, просто с отдельной страницей под однушку. А вот «дизайн интерьера» и «дизайн-проект квартиры», скорее всего, уйдут в отдельный кластер, потому что в выдаче по этим ключевым словам будут студии дизайна, портфолио, статьи про тренды, а не строительные бригады. Итог: получим две большие группы — ремонтные и дизайнерские запросы.

Как отработает hard-кластеризация

Здесь алгоритм проверит каждую пару запросов на полное совпадение топовых URL. У «ремонта квартир» и «ремонта однокомнатной квартиры» ядро выдачи может совпадать только на 30-40% (разные компании специализируются на разном метраже). Значит, они разойдутся по разным кластерам. «Ремонт квартир» и «ремонт квартир под ключ», скорее всего, останутся вместе, потому что это про один и тот же набор услуг. Итог: получим не 2-3 группы, а 5-6 узких кластеров: «ремонт квартир», «ремонт однушек», «евроремонт», «дизайн интерьера», «дизайн-проекты».

Следствия каждого подхода

Таким образом, при soft-подходе можно сделать одну посадочную страницу «Ремонт квартир», которая будет отвечать на все ремонтные запросы разом. Быстро, широко, но для фразы «ремонт однокомнатной квартиры» конверсия может быть ниже. Человек хочет видеть цены и кейсы именно для своего метража, а получает общую информацию. При hard-подходе придется делать отдельные страницы: «Ремонт однокомнатных квартир», «Евроремонт», «Дизайн интерьера». Зато каждый пользователь попадает на страницу, которая идеально соответствует его запросу. Конверсия выше, бюджет тратится эффективнее, но больше работы по созданию страниц.

Инструменты кластеризации семантики

Есть 2 основных способа работы.

1. Ручная кластеризация

Это когда специалист сам, в Excel или Google Таблицах, сортирует и группирует ключи. В самом простом виде процесс выглядит так:

1) Подготовка. Создается файл с двумя столбцами: «Запрос» и «Частотность». Список чистится от мусора и дублей;

2) Первичная сортировка. Фразы сортируются по частотности от самых частых к редким. Высокочастотные становятся эталонами для будущих кластеров;

3) Группировка. Добавляется столбец «Группа». Запросы с одинаковым смыслом (интентом) выделяются одним цветом. Полезно сверяться с выдачей: если у двух фраз в топе одни и те же страницы, они в одной группе;

4) Проверка. Таблица сортируется по столбцу «Группа». Пропущенные ключевики распределяются заново. Для каждого кластера выбирается маркерный запрос, он будет названием группы.

Главный плюс такого метода — полный контроль семантики. Минус — время. Работа с сотней ключей займет около 1 часа, однако если их 5000 или 10 000, ручная группировка превращается в работу на несколько дней. Да и человеческий фактор никто не отменял: можно пропустить важный запрос или ошибиться с группой.

2. Автоматическая кластеризация

Здесь все делает программа. Вот как выглядит механизм работы автоматических решений:

1) Человек загружает список ключевых слов;

2) По каждому запросу сервис парсит топ выдачи (обычно первые 10-20 позиций в Яндексе или Google);

3) Дальше алгоритм сравнивает URL сайтов: чем больше у двух фраз общих страниц в выдаче, тем выше вероятность, что они попадут в один кластер;

4) На выходе пользователь получает таблицу, где запросы уже разложены по группам. Остается только проверить и при необходимости отредактировать вручную.

На рынке множество автоматических инструментов для кластеризации, например Кластеризатор click.ru, Key Collector, Serpstat, Keys.so, Rush Analytics, Topvisor, SEMrush и др. Выбор инструмента зависит от бюджета, объема работы и личных предпочтений. Для разового простого проекта вполне подходит Excel, но для регулярной работы с тысячами ключей без автоматики не обойтись.

Пошаговая инструкция по кластеризации ключевых слов на примере click.ru

Хватит теории. Давайте посмотрим, как все работает в реальной ситуации.

Этап 1. Указываем URL сайта

Кластеризатор доступен для всех, у кого есть аккаунт в click.ru. Чтобы создать новую задачу, находим инструмент «Кластеризация запросов», нажимаем на значок плюса и вписываем адрес своего сайта в формате http://www.site.ru.

Домена пока нет? Не беда. Поле можно оставить пустым. На саму группировку ключей это не повлияет. Единственное, что стоит учесть: в готовом отчете не появится столбец с подсказками, какие страницы лучше всего подходят под каждый кластер.

Интерфейс добавления задачи

Для удобства можно задать имя проекта. Если задач много, это поможет быстро находить нужные среди других.

Этап 2. Загружаем список запросов

Есть два способа загрузки фраз.

1. Через XLSX-файл. Система берет данные только с первого листа. В каждой ячейке одна фраза. Последовательность строк не важна. Важно другое: на этом листе не должно быть ничего лишнего. Не нужно добавлять частотности, заголовки, лишние столбцы и пометки. Иначе сервис примет мусор за ключевые слова.
2. Списком. Копируем фразы и вставляем в специальное поле. Минимум — 20 запросов, максимум — 10 000.

Интерфейс загрузки запросов

Этап 3. Выбираем способ кластеризации

В сервисе есть 2 механики группировки ключей.

Способ №1. Сравнение топов

Сначала нужно задать точность. Это цифра от 1 до 10, которая показывает, сколько одинаковых URL должно быть у двух запросов, чтобы они попали в один кластер. Чем выше точность, тем строже правила. Разберем первый способ кластеризации на конкретных примерах.

Выбор способа кластеризации

Допустим, мы поставили точность 3. Базовая фраза — «купить ботинки». Сервис берет запрос «купить ботинки Химки» и сравнивает его выдачу с выдачей по базовой фразе. В топе-10 нашлось только 2 общих сайта. Это меньше 3, значит, фраза «купить ботинки Химки» в кластер не попадает. При трех и более совпадениях фраза попала бы в этот кластер.

Для быстрой группировки без использования профессиональных настроек в click.ru можно загрузить XLSX с запросами, задать точность 3-5 и запустить анализ. Остальное сервис сделает сам: спарсит выдачу, сравнит URL и разложит ключи по кластерам.

При точности 1 или 2 кластеры получаются крупными. Внутри одной группы оказываются фразы с разными интентами. В итоге по части запросов страница поднимается в выдаче, а по остальным топчется на месте.

Ниже показано, каким получится кластер «монтаж межкомнатных дверей» с точностью 2. Желтая подсветка показывает ключи, которые здесь явно лишние.

Лишние фразы

При выборе точности 3 объем группы резко уменьшается. Остаются только те ключи, которые действительно релевантны теме:

Итоговая группа

Если указать точность от 6 и выше начинается чрезмерная разбивка слов. Для каждого микрокластера будет нужна своя посадочная страница и уникальный текст. Расходы на контент вырастут, а окупаемость таких вложений остается под вопросом.

Способ №2. Профессиональная настройка: точность, регионы и поисковые системы

Профессиональная настройка повышает точность для больших кластеров автоматически.

Любое семантическое ядро содержит множество схожих между собой фраз. Если запустить кластеризацию с точностью 3-4, некоторые группы неизбежно разрастаются. Посмотрим пример семантики интернет-магазина дверей с точностью 3.

СЯ с точностью 3

В первом же кластере «монтаж межкомнатных дверей» насчитывается 20 фраз. Для размещения на одной странице это явный перебор. Как быть? Можно повысить точность до 4. Число фраз уменьшается до 12. Результат можно увидеть ниже.

СЯ с точностью 4

Идем дальше и ставим точность 5. Теперь кластер содержит всего 2 фразы:

СЯ с точностью 5

Казалось бы, проблема решена: если группы получаются большими, повышаем точность. Но есть нюанс. Вместе с крупными кластерами начинают страдать и мелкие. При общем повышении точности они дробятся еще сильнее, и это часто не нужно.

Избежать этого помогает профессиональный режим кластеризации в click.ru. Он позволяет гибко настраивать группировку фраз. Задается базовый уровень точности и прописываются условия, при которых точность автоматически повышается.

Например, можно выставить базовую точность 4 и добавить правила: если кластер превышает 20 фраз, перегруппировать его с точностью 5, а если превышает 30 фраз, с точностью 6. Настройки выглядят следующим образом:

Профессиональная настройка

В итоге большие кластеры аккуратно дробятся, а маленькие остаются в покое. Ядро получается идеально сгруппированным, и долго вычищать его потом не придется.

Выбор поисковой системы

Сервис умеет анализировать топ Яндекса и Google. В отчете данные по каждой поисковой системе выводятся на отдельных листах. На чем остановиться, зависит от региона продвижения и поведения целевой аудитории.

В России доля Яндекса выше, чем Google. При этом владельцы Android-смартфонов чаще используют Google, а на десктопах лидирует Яндекс. В других странах СНГ Google, как правило, является основным поисковиком, однако Яндекс сохраняет заметную долю.

Лучше выбрать одну ПС. Запускать кластеризацию сразу для двух не имеет практического смысла, потому что Яндекс и Google по-разному оценивают одну и ту же страницу. Они используют разные алгоритмы ранжирования, по-разному определяют релевантность, плотность ключей, поведенческие факторы и другие параметры.

Выбор ПС

Управление регионами

Для сайта без региональных поддоменов достаточно выбрать основной регион продвижения. Если же у проекта есть поддомены (например, spb.site.ru), семантику стоит кластеризовать отдельно под каждый из них. Это позволит учесть особенности региональной выдачи.

Выбор регионов

На обработку уходит некоторое время. К примеру, с сотней фраз для одного поисковика в одном регионе система справляется практически мгновенно, для больших объемов потребуется пара минут. Ждать завершения у экрана необязательно. Можно запустить задачу и закрыть браузер. Отчет покажет частотности по кластерам, подсветки и топ-1 конкурентов бесплатно.

Как читать отчет Кластеризатора

Готовый отчет приходит в формате XLSX. Открывается в Excel или Google Таблицах.

Список задач

Что в документе

Количество листов определяется настройками инструмента. Каждый лист соответствует одной поисковой системе, одному региону и одной точности.

Так выглядит итоговый файл

Если кластеризация проводилась для двух поисковых систем, двух регионов с точностью 3, итоговый отчет будет содержать 4 листа. Дополнительно в каждом отчете присутствуют листы с лидерами тематики (отдельно для каждой ПС и каждого региона) и исходными параметрами задачи.

При указании диапазона точности, например 3-6, отчет сформирует отдельные листы для каждого значения внутри диапазона — для 3, 4, 5 и 6. Это удобно: можно наглядно сравнить результаты группировки при разной жесткости правил и подобрать оптимальные настройки под свой проект. При этом итоговая стоимость не меняется. Задача с одной конкретной точностью и с диапазоном (например, 3-6) стоит одинаково, но во втором случае данных вы получаете значительно больше.

Что на листе

Первое, что бросается в глаза на любом листе, — запросы уже разложены по группам. У каждой группы есть название (обычно это самое частотное выражение из кластера). Ниже перечислены все ключи, которые в нее попали.

Рядом с каждым запросом стоит его частотность из Вордстата. Сразу видно, какие фразы приносят больше всего трафика. А в следующем столбце суммарная частотность по кластеру в целом. Это помогает оценить потенциал страницы до того, как вы потратили время на ее создание.

Фишки инструмента click.ru для кластеризации

У инструмента есть несколько дополнительных возможностей, о которых полезно знать.

Фишка 1. Сбор частотностей

В отчете, помимо распределенных по группам запросов, есть и другие полезные данные. Например, частотность отдельно по каждой фразе и общая сумма по кластеру.

Частотности

Эта возможность бесплатна. Во многих других сервисах частотности приходится подгружать вручную и только после этого запускать кластеризацию. В click.ru процесс полностью автоматизирован.

Информация о частотности нужна:

• чтобы оценить приоритетность фраз (какие более важны, а какие второстепенные);
• чтобы спрогнозировать объем трафика для конкретных страниц и сайта в целом.

Фишка 2. Подсветки для ключей и кластеров

Функция полезна при работе с SEO. Данные о подсветках используются при составлении технического задания для копирайтеров. Это готовый источник словоформ и синонимов, которые стоит включить в текст.

Кластер с названием «демонтаж дверей цена» включает 4 ключевые фразы:

Дополнительные слова из подсветки

Анализируя подсветки, можно обнаружить 4 слова, которые Яндекс считает подходящими для дополнения запросов. При этом в исходных ключах они не встречаются. Задание копирайтеру в таком случае может выглядеть так:

1. Тема (по названию кластера): «Цены на демонтаж дверей»;
2. Ключи (запросы из кластера): «демонтаж дверей цена», «установка и демонтаж дверей», «демонтаж входной двери цена», «демонтаж дверной коробки цена»;
3. Плюс-слова (из подсветок, используются наравне с ключами): «демонтажные работы», «прайс», «Москва», «стоимость».

Фишка 3. Топ URL конкурентов

Сервис в автоматическом режиме и без дополнительной платы определяет URL сайтов конкурентов, находящихся на первом месте в выдаче по каждому ключевому запросу.

Список конкурентных URL

Топ URL конкурентов помогает понять, какие посадочные страницы ранжируются по вашим фразам, а также составить технические задания для копирайтеров на основе анализа страниц конкурентов.

Фишка 4. Релевантные URL для кластеров

Эта полезная опция также бесплатна. При наличии готового сайта сервис сам подбирает подходящие страницы для каждого кластера. Если веб-ресурса еще нет, соответствующий столбец в отчете остается пустым.

Релевантные URL

Важно учитывать, что результат ни в одном сервисе кластеризации не может считаться идеальным по умолчанию. Полученный отчет необходимо внимательно проанализировать, проверив посадочные и удалив лишние слова. Кроме того, стоит поэкспериментировать с точностью. Однако без автоматизации группировка семантики занимает дни или недели, а итоговый результат не учитывает особенностей поисковых алгоритмов.

Работа с семантикой завершается кластеризацией запросов. В рекламной экосистеме click.ru для этого есть все необходимое. Медиапланер автоматически собирает ключевые слова. Нормализатор слов удаляет дубликаты. Отдельные инструменты помогают находить поисковые подсказки и фразы-ассоциации, что позволяет расширять список ключей.

Помимо профессиональных инструментов, в click.ru действует партнерская программа. После регистрации можно подключать клиентов в качестве «пользователей под управлением» и возвращать до 19% от расходов на рекламу.

Цены на кластеризацию и как сэкономить бюджет

На стоимость использования инструмента влияют три фактора:

• объем обработанных запросов;
• число выбранных поисковых систем;
• количество регионов.

Первые 100 проверок в сервисе бесплатны. Это отличная возможность опробовать инструмент, прогнать тестовое ядро и понять, подходит ли вам такой формат работы, не тратя ни рубля. Дальше стоимость считается в ТЗ (группировках одного запроса в одном регионе в одной поисковой системе). В таблице ниже приведены примеры цен за 1 ТЗ.

Примеры цен за ТЗ

Добавление поисковых систем и регионов увеличивает количество ТЗ:

• 1 запрос, 1 регион, 1 ПС = 1 ТЗ;
• 1 запрос, 1 регион, 2 ПС = 2 ТЗ;
• 1 запрос, 2 региона, 1 ПС = 2 ТЗ;
• 1 запрос, 2 региона, 2 ПС = 4 ТЗ;
• 100 запросов, 2 региона, 2 ПС = 400 ТЗ и так далее.

Ниже представлены примеры расчета бюджета для разных ситуаций.

Примеры стоимости

В первой ситуации бюджет символический — дешевле чашки кофе. Для теста или маленького проекта это идеально. Вторая ситуация — хороший пример того, как сервис работает с большими объемами и во сколько может обойтись даже масштабная проверка. Третий случай показывает, что сервис может помочь выйти в несколько стран и поисковых систем без лишних затрат.

Заключение

Без грамотной кластеризации поисковых запросов страницы сайта хуже ранжируются, конкурируют друг с другом, позиции скачут, а трафик утекает к конкурентам. Ручная группировка в Excel дает полный контроль, но занимает много времени. Автоматические сервисы вроде кластеризатора от click.ru делают ту же работу за минуты. Главное — выбрать правильную точность и помнить: даже лучший алгоритм требует финальной проверки человеком.