Реальный сбор семантического ядра. Как и для чего можно использовать семантическое ядро конкурентов? На что влияет объем семантики

Головная боль любого профессионального сеошника — это собрать хорошую семантику. Как раз мне пришел новый проект на продвижение, и в этом посте я покажу реальный сбор большого семантического ядра для сайта.

Хотя этот пример я буду делать на основе интернет магазина, но сам принцип можно вполне применять для любого типа сайта — корпоративного, сайта услуг, информационного проекта.

Как собрать семантическое ядро для интернет магазина

Начинается все с анализа клиентского проекта, сайтов конкурентов и составления первичной структуры. Цель этой задачи — понять, по каким направлениям нужно собирать семантику.

Я отрисовываю первичную структуру в Xmind, у меня получилась вот такая схема.

Теперь начинается самое интересное.

Как собрать семантическое ядро с помощью кей коллектор

После того, как ядро почищено, я делаю новую итерацию — закидываю ключи снова на парсинг в wordstat, adwords и подсказки, потом опять чищу и получается готовое ядро.

Для данного проекта итерацию я делать не стал, так как проект достаточно большой и запросов вполне хватает, чтобы обеспечить прогнозируемые результаты.

Сбор семантического ядра конкурентов

Следующий шаг — это собрать семантику конкурентов с помощью сайта keys.so . На мой взгляд, это просто офигенный сервис для парсинга чужих запросов, у него мало мусора и очень большая база.

Просто нахожу несколько сайтов конкурентов (3-4 достаточно) по самым жирным запросам, загоняю их в сервис, и он выдает ВСЕ ключи, по которым они продвигаются.

Затем также загоняю их в кейколлектор, чищу от разного мусора аналогично вышеописанному, и получается отличное семантическое ядро конкурентов плюсом к уже собранному ядру.

Сбор семантики в букварикс

Еще одна программа, которую я использую в работе — это bukvarix.com . Отличная прога, мало мусора, очень большая база. Единственный минус — весит просто до хера. Только в сжатом виде около 40 Гб, а в распакованном более 170.

Также загоняю в нее все слова из структуры.

Результат парсинга аналогично чищу через кейколлектор. На выходе получаю еще одно семантическое ядро.

Теперь заключительный момент — нужно все это скомпоновать (первичный парсинг кейколлектора, конкурентов из key.so и букварикс), почистить от дублей и вот она — готовая семантика для интернет магазина.

После сбора , но это уже совсем другая история.

По времени, в среднем, в моем не спешащем темпе такое ядро я собираю где-то за 2 недели. Долго это или быстро, не знаю, у меня вот такой темп.

Повторюсь, что такая схема подойдет для любого типа сайта, и для своих информационных проектов я собираю семантику точно таким же способом.

Конечно, можно быстро вручную собрать базовое семантическое ядро для сайта бесплатно и онлайн с помощью того же сервиса yandex.wordstat.ru , но оно получится однобоким, очень маленьким, и у вас просто будет мало возможностей его расширить.

Мы уже не раз рассказывали, как можно составить семантическое ядро для сайта самостоятельно и даже написали книгу (кстати, вы можете ее скачать совершенно бесплатно). Прежде чем пытаться собрать ключевые слова с помощью сервисов, озвученных в настоящей статье, рекомендую прочитать книгу, чтобы понимать основы.

Процесс сбора семантики очень трудоемкий, требующий большого количества времени, особенно у новичков.

Существует много специализированных сервисов и программ для составления семантического ядра. Самые популярные: Яндекс.Вордстат и Google KeywordPlanner, Key Collector, Slovoeb, Megaindex.com, SEMRush, Just Magic, Топвизор и другие.

Многие из этих продуктов платные, у каждого из них есть свои преимущества и недостатки. Ниже детально рассмотрим 2 помощника для сбора семантики сайта – один платный, другой бесплатный.

1. Rush Analytics – онлайн-сервис для создания семантического ядра

   Позволяет автоматизировать все рутинные процессы при сборе семантики: от подбора ключей до кластеризации.

   Плюсы:

   • Не требуется установка софта.
   • Понятный и простой интерфейс.
   • Наличие руководств по использованию сервиса и подсказок на каждом этапе.
   • В отчетах о кластеризации есть много полезных данных, которые можно использовать для создания контента.
   • Можно расширить семантическое ядро с помощью инструмента «Поисковые подсказки».

   Минусы:

   Из минусов можно отметить, что это полностью платный сервис. Только при регистрации вам начисляется бонус в 200 рублей. Если у вас большой объем работ – вам это обойдется недешево. К примеру, кластеризация одного ключевого запроса стоит 50 копеек.

   Сбор ключевых слов

   После простой регистрации будет доступно 4 инструмента для работы с ключевыми словами: «Wordstat», «Сбор подсказок», «Кластеризация» и «Проверка ключевых слов».

   Теперь можно приступить к сбору ключевиков, для этого необходимо создать новый проект:

   В открывшейся вкладке указываем название проекта и регион:

   

   Следующий шаг – это Настройки сбора. Здесь нужно выбрать, каким способом будут собраны слова:

   
   

   Для работы мы выберем первый вариант: сбор ключевых слов из левой колонки Wordstat.

   Третий шаг – Ключевые слова и цена. Указываем базовые ключевые слова сайта либо списком, либо загружаем файл.

   Например, у нас сайт про аренду спецтехники. Вписываем главные ключи «аренда спецтехники», «аренда крана», «услуги крана». Этого будет достаточно для сбора семантики.

   

   Также указываем стоп-слова. Они помогут отфильтровать ваш список и сэкономить время и средства. Есть удобная функция «Стоп-слова по тематикам».

   Для нашего сайта добавим стоп-слова «договор», «работа».

   Через некоторое время наш проект будет готов:

   

   Теперь можно скачать файл в формате xlsx:

   

   Мы получили довольно большой список ключевых запросов (1084 слов). Некоторые из них лишние, поэтому лучше пробежаться по списку и удалить ненужные слова.

   Определение частотности

   Для этого создаем новый проект (указываем название и регион), во второй вкладке выбираем «Сбор частотности», отмечаем первые три варианта:

   

   

   Как закончится сбор частотности, можно скачать файл. Смотрим, что получилось. О том, как спрогнозировать трафик по ключевым словам, мы уже писали, если еще не читали – прочитайте обязательно.

   Скажу только, что не советую использовать для продвижения запросы-пустышки, т.е. слова, по которым частота с операторами «!Ключ» равна нулю.

   Кластеризация ключевых фраз

   Кластеризация – разбивка ключевых слов на группы с точки зрения логики и на основе выдачи поисковых систем. После распределения запросов на группы вы получите, по сути, готовую структуру сайта.

   Для этого нажимаем на «Кластеризацию» и создаем новый проект:

   

   Называем проект «Спецтехника3» (любое название на ваш выбор), выбираем поисковую систему (мы выбрали Яндекс), также указываем регион:

   

   Следующий шаг – настройка сбора. Для начала нужно выбрать тип алгоритма кластеризации. Данные алгоритмы работают по одному и тому же принципу (сравнение ТОПов поисковиков), но предусмотрены для решения разных задач:

   • Wordstat – подходит для создания структуры сайта.
   • Ручные маркеры – подходит, если у вас уже есть готовая структура сайта, и вам нужны ключевые слова, по которым нужно продвигать имеющиеся страницы сайта.
   • Комбинированный (ручные маркеры + Wordstat) – подходит для задачи одновременного подбора ключевых слов для существующей структуры сайта и ее расширения.

   Здесь же указываем минимальную частотность, которую используем, и точность кластеризации:

   

   Чем больше точность кластеризации, тем большее количество ключей попадут в одну группу. Для блогов и порталов точность не так важна (можно поставить 3 или 4). Но для сайтов с конкурентными тематиками лучше выбирать более высокую точность группировки.

   Как видно из скриншота, мы выбрали все допустимые точности группировки. На цену кластеризации это не влияет, зато мы сможем определить какая группа нам больше подходит.

   Приступаем к следующему этапу – загрузке файла с ключевыми словами:

   

   Результат кластеризации в формате xlsx выглядит следующим образом:

   

   Нас основе этого файла можно составлять Карту релевантности, формировать ТЗ для копирайтеров.

2. Программа Slovoeb

   Одна из лучших бесплатных программ для составления семантического ядра. Многие ее называют «младший брат Key Collector».

   Плюсы:

   • Программа абсолютно бесплатная.
   • Наличие подсказок, описание программы и ее инструментов.
   • Понятный интерфейс.

   Минусы:

   • Требует установки на компьютер.
   • Нет автоматической кластеризации запросов.
   • Нет обновлений программы.

   Настройка программы

   Заказать разработку СЯ и карты можно (ищите в разделе «Оптимизация и техническое сопровождение»).

В закладки

Как собрать правильное семантическое ядро

Если вы думаете, что собрать правильное ядро способен некий сервис или программа, то вы будете разочарованы. Единственный сервис, способный собрать правильную семантику, весит около полутора килограмм и потребляет около 20 ватт мощности. Это мозг.

Причем в этом случае у мозга есть вполне конкретное практическое применение вместо абстрактных формул. В статье я покажу редко обсуждаемые этапы процесса сбора семантики, которые невозможно автоматизировать.

Существует два подхода к сбору семантики

Подход первый (идеальный):

Плюсы: в этом случае вы получаете 100% охват - вы взяли все реальные запросы с трафиком по главному запросу «заборы» и выбрали оттуда всё, что вам нужно: от элементарного «заборы купить» до неочевидного «установка бетонных парапетов на забор цена».

Минусы: прошло два месяца, а вы только закончили работать с запросами.

Подход второй (механический):

Бизнес-школы, тренеры и агентства по контексту долго думали, что с этим делать. С одной стороны, действительно проработать весь массив по запросу «заборы» они не могут - это дорого, трудозатратно, людей не получится научить этому самостоятельно. С другой стороны, деньги учеников и клиентов тоже надо как-то забрать.

Так было придумано решение: берем запрос «заборы», умножаем на «цены», «купить» и «монтаж» - и вперед. Ничего не надо парсить, чистить и собирать, главное - перемножить запросы в «скрипте-перемножалке». При этом возникающие проблемы мало кого волновали:

• Все придумывают плюс-минус одинаковые перемножения, поэтому запросы вида «монтаж заборов» или «заборы купить» моментально «перегреваются».
• Тысячи качественных запросов вида «заборы из профнастила в Долгопрудном» вообще не попадут в семантическое ядро.

Подход с перемножениями себя полностью исчерпал: наступают трудные времена, победителями выйдут только те компании, которые смогут для себя решить проблему качественной обработки действительно большого реального семантического ядра - от подбора базисов до очистки, кластеризации и создания контента для сайтов.

Задача этой статьи - научить читателя не только подбирать правильную семантику, но и соблюдать баланс между трудозатратностью, размером ядра и личной эффективностью.

Что такое базис и как искать запросы

Для начала договоримся о терминологии. Базис - это некий общий запрос. Если вернуться к примеру выше, вы продаете любые заборы, значит, «заборы» - главный для вас базис. Если же вы продаете только заборы из профнастила, то вашим главным базисом будет «заборы из профнастила».

В то же время по запросу «заборы из профнастила » - только 127 тысяч показов, то есть охват сжался в десять раз. Сопоставимым образом уменьшится и количество запросов, и трафик на сайт.

Таким образом, можно сказать, что базис - это общий запрос, описывающий товар, услугу или нечто иное, за счет самой своей формулировки определяющий меру охвата потенциальной аудитории.

• Описывают товар или услугу.
• Дадут такой объем расширенных запросов, который вы можете обработать в приемлемые для себя сроки.

Теперь попробуем разобраться с проблемой поиска базисов как таковых.

1. Как вы сами называете товар или услугу

Если вы - подрядчик, то спросите об этом у клиента. Например, заказчик говорит вам: «Я продаю спортивные покрытия в Москве и области». Выбросьте из формулировки заказчика Москву и область, а также подберите синонимы.

Базисы в таком случае будут такими

Цифры - это данные частотности по Москве и области по WordStat. Нетрудно заметить, что каждый из запросов при парсинге WordStat в глубину даст разную выборку расширенных запросов, и каждая выборка - это сегмент целевого спроса.

Пример с синонимами посложнее: «небольшой» медиаплан на сотню с лишним базисов с частотностью по Москве для продажи элитной недвижимости:

Вывод: собирать семантику сложно. Но сам сбор низкочастотных запросов довольно прост - есть куча сервисов от Key Collector до MOAB и других. Дело не в сервисе. Дело в том, что подобрать корректные базисы сервисом невозможно - это можно сделать только руками и мозгом человека, это самая трудная и тяжелая операция.

Итак, мы уже вспомнили определения товара или услуги «из головы» и привели их к укороченным формам. То есть если мы продаем «грузовики камаз», то пишем в файл просто - «камаз».

Важно понять ключевой принцип - выборка по запросу «камаз» и по запросу «65115 -камаз» дает разные запросы, частично непересекающиеся. Это разные сущности.

Поэтому не нужно мучительно читать тайтлы конкурентов или анализировать их в сомнительных сервисах. Расслабьтесь, включите фантазию, налейте бокал хорошего коньяка и почитайте сайты конкурентов. Вот список артикулов, каждый из которых - отдельная выборка.

3. Сервисы поисковых систем

Пример: в правой колонке WordStat содержатся так называемые запросы, которые пользователи искали вместе с указанным. Глядя на правую колонку по запросу из примера выше, можно увидеть запрос с вхождением слова «самосвал».

Отлично. Запрос «купить камаз самосвал» нам не нужен, так как он и так попадет в расширенные запросы по базису «камаз», а вот запрос «самосвал » - это новый сегмент с отдельными новыми запросами, новым спросом и новой семантикой.

Берем его в проект. Аналогичным образом анализируем и блок «искали вместе с этим» в выдаче «Яндекса» и Google.

Google, к примеру, подсказывает запрос «сельхозник»

Вот что можно получить по нему в WordStat

Проверим, что говорит «Яндекс». Даже если предположить, что вы не продаете ничего, кроме «КамАЗов», то ваши усилия все равно не пропадут даром.

Можно взять запрос «тягач» и получить новый спрос на ваши грузовики и по нему

В целом, думаю, принцип понятен: задача - найти как можно больше целевых базисов, которые выступают инициаторами, драйверами новых длинных семантических хвостов.

Конечно, тут можно дать ещё много советов: посмотреть анкор-файл конкурентов, посмотреть выгрузки из SpyWords или Serpstat. Всё это, конечно, хорошо. Вернее, было бы хорошо, если бы не было так грустно. Потому что в сущности работа еще даже не началась: насобирать каждый может, а попробуйте-ка всё это очистить, сгруппировать и грамотно управлять.

Вышеописанного вполне достаточно, чтобы, имея светлую голову, собрать семантику на порядок качественнее и лучше, чем у 99% ваших конкурентов.

Как не потратить всю жизнь на сбор ключевых слов

Многие спрашивают: как грамотно управлять семантикой, как её «резать». Если вы продаете могильные камни из буйволиного рога в Нарьян-Маре, вы вряд ли столкнетесь с этой проблемой - у вас семантики всегда будет мало. В то же время, в «горячих» популярных тематиках семантики всегда валом: названия брендов, категорий, моделей, их синонимы и так далее.

Мы решаем эту проблему за счет многоуровневой приоритизации семантики.

1. Приоритизация семантики до сбора запросов

Если всё равно остается много - уберите и те разделы, где маржинальность меньше 25-30%, там вы тоже, скорее всего, много не заработаете - максимум немного мелочи в карман плюс покажете производителю больше оборота и выбьете новые скидки. Зарабатывать интересные деньги получается на товарах и услугах с маржой от 30% - не всегда и не везде конечно, но эти цифры я видел десятки раз на самых разных проектах.

2. Сбор базисов и расширенной семантики по ним

Собрали? Все равно получается много? Проранжируйте запросы. Ставьте 1, 2 или 3 рядом с каждым базисом. Заставьте себя это сделать, вот так:

Я специально ограничиваюсь тремя значениями - это просто. Если у вас будет десять уровней приоритета, вы сойдете с ума, думая о том, поставить 6 или 7 конкретному базису, - а так решения очень простые и очевидные.

Кроме того, это помогает структурировать свой бизнес для самого себя - взглянуть на него сквозь призму спроса и маржинальности: фильтруем по столбцу «Приоритет» и видим, что поставили «1» тем базисам, по которым мало спроса.

Значит, надо либо активнее работать с другими товарными направлениями, снижать закупочные цены, либо стимулировать спрос - но это уже другая история.

3. Отсекли всё неприоритетное и всё равно семантики слишком много

Когда говорят про «резать» семантику, те, кто с этим поработал, как правило, имеют в виду удаление низкочастотных запросов с частотностью ниже определённой отсечки. В тематических дискуссиях в Facebook и на форумах я регулярно вижу цифры от 5 до 10 (имеется в виду общая частотность по запросу).

То есть намеренно убирается из массива всё, что по частотности меньше 10.

Понятно, что так делать можно, если у вас всё равно очень много семантики. Но это всегда вопрос выбора между поеданием рыбы и сидением на неудобных для сидения предметах. Слишком много уберете - недосчитаетесь каких-то минус-слов, получите больше «грязного» трафика на запуске, но выиграете в трудозатратности.

Моё мнение таково: условная точка баланса здесь находится на уровне «убираем всё, что не имеет частотности». Это позволяет выкинуть примерно половину массивов, полученных из различных источников, в то же время трафик на запуске остается очень чистым, с погрешностью буквально 1-3% и быстро дочищается.

Что значит «дочищается»

Звонки? Тоже нет, ведь огромное влияние на количество звонков оказывает сайт: может быть, с кампанией всё хорошо, просто сайт сделан неправильно.

Быстро проверить эффективность поисковой кампании можно в «Яндекс.Метрике». Для этого нам надо через два-три дня после запуска кампании получить отчет о фразах, послуживших источниками перехода. Как найти этот отчет в «Метрике»:

Кликаем на крестик на всех группировках, кроме «Поисковая фраза», и нажимаем «Применить». Мы получим отчет о тех фразах, по которым пользователи увидели наши объявления, кликнули по ним и перешли к нам на сайт. Что делать с этим отчетом?

Внимательно просмотреть и выделить нерелевантные фразы, которые не относятся к вашему бизнесу. На жаргоне их называют «мусором». В профессионально сделанных кампаниях в первое время после запуска доля «мусора» может составлять от 1 до 4%, в кампаниях, собранных «на коленке», - до 20-40%.

Как вы уже, наверное, поняли, процедуру с дополнительной очисткой от мусора стоит проводить регулярно - как минимум, два-три раза в месяц. Почему так часто?

У нас был интересный пример из практики. Мы работали с кампанией, в которую включили для клиента высокомаржинальный запрос «черный дым дизель». Клиент работал с дизельными двигателями, и такой запрос означает, что у клиента есть серьезная проблема с двигателем, и, вероятно, потребность в квалифицированных услугах.

Одновременно с этим в сентябре 2016 года, когда группировка российского флота направилась в Сирию, ТАКР «Адмирал Кузнецов» привлек внимание международных СМИ сильным черным дымом из выхлопной трубы. Это неизбежно спровоцировало запросы вроде «черный дым дизель адмирал кузнецов».

Ранее таких запросов просто не было, поэтому и не было минусов формата «–адмирал, –кузнецов». Поэтому мало того, что наше объявление показалось по таким запросам, так оно ещё и сгенерировало бессмысленные переходы, не имеющие для бизнеса никакой ценности.

Отследить такие запросы оперативно можно только в «Метрике»: поэтому возьмите себе за правило на старте кампании почаще (позже - реже) проверять семантику и дополнительно минусовать новый мусор.

Разумеется, возникает вопрос: а что вообще влияет на количество мусора. Всё просто - статистическая достоверность семантики.

На что влияет объем семантики

Далеко не всегда люди понимают, о чем говорят, когда обсуждают влияние обширного семантического ядра на цену клика, качество кампании и прочее. Сама по себе обширная семантика не вызывает ни снижения цены клика, ни увеличения качества кампании. На что же реально влияют сотни и тысячи собранных НЧ-запросов?

1. Чистота трафика на запуске кампании

Чем больше запросов вы соберете - тем больше найдете минус-слов. На бесконечно большой выборке запросов вы найдете все возможные минус-слова, потратив на это бесконечный период времени.

На практике стоит ограничиться запросами, как я уже говорил, с частотностью от 1 по нужному региону - это даст «мусорность» в районе 3-4% при запуске, после чего вы быстро дочистите оставшиеся мусорные запросы, минусы, по которым почему-то не попали в выборку.

При этом стоит использовать и WordStat, и советы поисковых систем, собирая подсказки для каждого запроса, полученного в WordStat. Использование одного только WordStat даст высокую мусорность - 10-15% на запуске как минимум (если не больше). Но все мы понимаем - чем больше мусора, тем больше расход средств, тем меньше лидов на единицу расхода.

2. Релевантность объявлений запросам

Реальный трафик, который будет попадать к вам на сайт, приходит большей частью не по тем запросам, которые вы добавили в кампанию, а по расширениям от них. На один запрос, добавленный в кампанию, приходится как минимум три-четыре расширенных варианта - это ультра-НЧ, которые вообще никак не предскажешь, пользователи генерируют их прямо в момент поиска.

Поэтому не столь важен сам запрос: так много стало трафика по ультра-НЧ с частотой перехода в один-два раза в месяц или в год, что привязываться к конкретному запросу нет смысла. Важно собрать статистически значимую семантику, разбить её на мелкие группы похожих запросов и составить под них объявления.

Больше семантика - больше групп, больше точность соответствий и ниже цена кампаний на поиске. В конкретной группе похожих ультра-НЧ, из которых сформируется объявление, может быть пять-десять запросов - а если вы выудите из «Метрики» фразы по этому объявлению через полгода, получите список на 30-40 фраз как минимум.

Повторюсь: семантика - не панацея от всего и не божество. Семантика влияет на многое: на чистоту трафика, на релевантность объявлений запросам - но не на всё. Не имеет смысла собирать огромные выборки «нулевок» в надежде получить трафик дешевле - этого не будет.

Семантика влияет:

Вот те факторы, про которые вам стоит помнить в первую очередь. Впрочем, попробуем суммировать итоги в двух словах.

Кратко

1. ​Соберите базисные запросы - общие фразы, описывающие ваши товары и услуги.
2. Проверьте, все ли синонимы и переформулировки вы собрали: в помощь вам WordStat и блок «похожие запросы» в SERP.
3. Соберите расширения по полученным запросам: WordStat, поисковые подсказки, база MOAB - всё идет в дело.
4. Составьте табличку, где рядом с каждым базисом будет указана его частотность и количество расширенных запросов.
5. Если запросов слишком много, и вы не успеваете их обработать - выполните приоритизацию базисов в зависимости от маржи, частотности и количества запросов.
6. Окончательный семантический план сформирован. Теперь дело за очисткой и кластеризацией семантики.

Прежде всего давайте разберемся, что такое семантическое ядро сайта конкурента, каким образом оно получается и из чего состоит. Это понимание позволит нам в дальнейшем принимать решения относительно пригодности этого ядра для разных seo задач.

Семантика видимая и фактическая

Когда вебмастер создает сайт, он закладывает в него определенную , публикует документы, заточенные под те или иные ключевые слова. Таким образом, получается что все ключевые слова сайта конкурента, под которые были созданы документы на этом сайте это и есть семантическое ядро сайта. Это фактическая семантика сайта.

Сайт создан, начинает ранжироваться и показываться в выдаче поисковой системы по ряду запросов. По части запросов сайт невозможно будет продвинуть, по ним сайт не будет показываться в выдаче - предположим, что они были неверно . Некоторые страницы сайта не попадают в выдачу - они исключены поисковой системой по той или иной причине. Таким образом из всей фактической семантики (заложенной оптимизатором в сайт) поисковая система ранжирует сайт лишь по определенной части запросов, которые она сочла релевантной. Это видимая семантика сайта.

Чем больше доля видимых запросов по отношению к фактическим тем более качественный сайт

Как сервисы получают семантику конкурентов

Большинство сервисов, которые позволяют определить ключевые слова сайтов конкурентов работают по следующему принципу:

Составляется база популярных запросов;

Для каждой фразы собирается от 1 до 10 страниц выдачи (SERP);

Сбор выдачи для всех фраз повторяется раз в неделю / месяц / год.

Это приводит к следующим ограничениям:

Сервисы показывают только видимую часть ключевых слов конкурентов;

Сервисы хранят у себя “слепок” выдачи на момент сбора позиций по всем запросам из базы;

Сервисы знают видимость только для тех фраз, которые есть в базе.

Какие выводы следуют из этого?

Для оценки “свежести” семантики конкурента нужно знать когда был произведен сбор позиций ();

Некоторые запросы, по которым продвигается сайт могут быть нам не видны, т.к. страницы могут быть еще не в индексе, либо ПС исключила страницы из ранжирования по тем или иным причинам (плохие поведенческие факторы, вредоносный код, низкая скорость загрузки страницы и т.п.). Т.е. фактически страницы на сайте есть, но в выдаче мы их не увидим;

Чаще всего мы не знаем из каких ключевых фраз состоит база сервиса, которую он использует для сбора результатов выдачи поисковой системы.

Мы видим не истинное, фактическое семантическое ядро сайта, под которое сайт был создан владельцем, а только лишь тот фрагмент ядра, которое в данный момент нам показывает поисковая система / сервис

Какой итог мы можем подвести на основании вышеперечисленного?

Ключевые слова конкурентов, собранные с помощью сервисов никогда не будут отражать полную семантику, актуальную на данный момент;

Семантика конкурентов, собранная с помощью сервисов может служить лишь в качестве вспомогательного инструмента для расширения имеющегося семантического ядра, либо помогать провести анализ (аналитика конкурентов);

Сервисы, которые обладают большой базой, по которой они снимают результаты выдачи никогда не смогут дать “свежую” / актуальную семантику, т.к. чем больше фраз и глубже сбор, тем дольше времени этот процесс занимает. Пока собирали выдачу по началу базы, выдача по концу базы устарела;

Сервисы не говорят о том, как часто они обновляют свои собственные базы ключевых слов, по которым проводят анализ запросов сайтов конкурентов. Таким образом мы никогда достоверно не знаем насколько актуальная семантика перед нами: не знаем “свежесть” базы сервиса, не знаем дату сбора, не знаем отношение фактической и видимой семантики;

Существенный плюс в том, что мы сразу получаем большой кластер поисковых запросов основных конкурентов и можем часть этих запросов интегрировать в свое ядро, дополнив его, тем самым увеличив его полноту.

В каких случаях будет полезным использование семантики конкурентов?

Запуск нового проекта

Мы планируем запуск нового проекта и собираем семантику для него с нуля. В процессе сбора СЯ мы выгружаем ключевые слова конкурентов и подходящими для нашей тематики запросами. Здесь важно учесть, что не вся семантика конкурента может нам подойти. Например если мы делаем нишевой сайт, а в выдаче находятся порталы, для которых семантическое ядро может быть огромным, то мы не можем просто так взять и скопировать все запросы из него в свое.

Расширение семантики для существующего проекта

У нас уже есть сайт, который мы хотим развивать. Семантика для него была собрана давно и не оптимально. Сейчас мы хотим возобновить работы над сайтом, создать новые разделы, расширить ассортимент или же просто добавить новые статьи для привлечения дополнительного трафика. Однако есть небольшая загвоздка - мы не знаем с чего начать. В этом случае мы можем воспользоваться сервисами (о них ниже) и собрать ключевые слова сайтов конкурентов.

Как вытащить семантику конкурента максимально эффективно?

Нужно придерживаться нескольких простых правил. В первую очередь мы должны смотреть на процент пересечений по ключевым словам между нашим сайтом и сайтами донорами. Если у нас еще нет сайта, то мы берем любого понравившегося нам конкурента, открываем его сайт, анализируем и если он нам понравился, принимаем его сайт за эталон. Далее вся оценка строится на проценте пересечений по ключам между эталоном и донорами. Проще всего выгружать из сервисов список всех сайтов конкурентов и сортировать их по проценту пересечений. Далее выкачиваем ядра первых 3-5 конкурентов в Excel или Key Collector кому как удобнее и переходим к этапу расширения ядра. Во вторых, не стоит брать семантику порталов, даже если у нашего сайта с ними много пересечений. Каждый сайт-донор необходимо проверять визуально.

Из всех потенциальных конкурентов-доноров мы выбираем тех, которые наиболее близки нам по тематике и имеют максимальное количество пересечений между ключевыми фразами

Покупка сайта для развития или перепродажи

Представим ситуацию, когда мы решили купить сайт в какой либо нише и хотим понять потенциал развития этого сайта. Самым простым вариантом будет узнать семантическое ядро этого сайта - оценить текущий охват тематики по сравнению с конкурентами. Для простоты сравнения мы можем принять самого сильного конкурента в нише за эталон (максимальный охват) и сравнить его показатели видимости с показателями видимости сайта кандидата на покупку. Если мы увидим, что сайт отстает от лидера более чем на половину, то это хороший индикатор того, что у сайта есть значительный невыработанный потенциал для наращивания и расширения семантики и, как следствие, значительного роста в трафике.

ВАЖНО: При таком анализе мы смотрим только на нишевых конкурентов, порталы игнорируем

Откуда брать семантику конкурентов?

Бесплатные инструменты

Обновление на 27.03.2017 : С 28 марта 2017г. прекратился бесплатный доступ к приложениям аналитической платформы Мегаиндекс. Сервис перешел на платную подписку.

Платные сервисы

1. Megaindex Premium Analytics

Модуль "Видимость сайта", платформы Megaindex дает нам достаточно обширный набор инструментов для получения ключевых фраз конкурентов: можно посмотреть и выгрузить ключевые фразы, по которым ранжируется сайт; найти схожие по семантике сайты, которые тоже могут быть использованы в качестве доноров. Единственный недостаток - нет возможности сортировки списков на лету, придется все сначала копировать в Excel и сортировать там.

Краткая сводка по сервису

2. Keys.so

Сервис keys.so был создан как инструмент для анализа семантики конкурентов. Необходимо ввести url интересующего нас сайта, отобрать доноров по количеству общих ключей, проанализировать их сайты и выгрузить ключи. Все делается быстро и без лишних телодвижений. Приятный, свежий интерфейс, только нужная информация. Из недостатков: размер базы, частота обновления видимости. несет скорее маркетинговую функцию, т.к. при дополнении ядра ее все равно нужно будет перепроверять.

Краткая сводка по сервису

2. Spywords.ru

Сервис spywords.ru помимо анализа видимости предоставляет статистику по объявлениям в директе. Интерфейс немного перегружен, но если разобраться, то сервис свою задачу в целом решает. Можно проанализировать сайты конкурентов, посмотреть пересечения по семантическому ядру, выгрузить фразы, по которым продвигаются конкуренты. К недостаткам можно отнести довольно слабую базу - всего 23 млн ключевых слов. Полный обзор сервиса мы проводили .

Краткая сводка по сервису

Итоги

Благодаря сервисам получить семантическое ядро сайтов конкурентов стало не так сложно. Вопрос лишь в том, что с этим ядром потом делать. Ключевые советы:

Берем в доноры только похожие по тематике сайты (чем больше % пересечений тем лучше);

Избегаем порталов, чтобы не закопаться при дополнении своего ядра семантикой конкурента (вместо дополнения получится расширение:)). А расширять, как мы знаем, можно бесконечно!

Если решили купить сайт, смотрим на его текущую видимость в ПС и сравниваем с лидерами в тематике чтобы понять потенциал развития;

Используем семантику конкурентов только в качестве дополнения к уже подготовленному ядру;

• Чем больше фраз в базе сервиса, тем выше шанс получить более полное ядро. Обратная сторона медали - свежесть данных.

Оптимизация и продвижение сайта всегда начинается с сбора семантического ядра сайта и подбора ключевых слов по тематике сайта, в зависимости от того насколько правильно собранно семантическое ядро, зависит успех продвижения и оптимизации сайта.

Мы подробно рассмотрим как правильно составить семантическое для сайта, какие бывают ошибки при подборе запросов, а так же какие основные инструменты используются для сбора семантики.

Семантическое ядро сайта — это сгруппированные в отдельные категории ключевые запросы (слова) соответствующие тематике вашего сайта и позволяющие пользователям через поисковую систему (Яндекс или Google) найти Ваш сайт в интернете.

Хорошо проработанное семантическое ядро позволит каждой странице вашего ресурса соответствовать определенным запросам пользователей и поможет Вам эффективно продавать свои продукты и услуги, а так же вы сможете привлечь целевую аудитории на сайт.

ВАЖНО! К составлению семантики сайта необходимо подойти очень ответственно и скрупулезно, так как выбранные ключевые слова, будут применяться при:

• внутренней оптимизации сайта (перелинковка, мета теги)
• внешней оптимизации сайта (закупка ссылок)
• составление рекламных компаний (контекстная реклама, социальные сети)

Внимательно читайте статью и не стесняйтесь задавать вопросы в комментариях или писать в социальных сетях, я с удовольствием отвечу на каждый комментарий и вопрос.

Основные понятия и термины

Запросы (ключевые слова) — собираются поисковой системой (Яндекс или Google) для статистики и используются поисковиками при Яндекс Директ или Google AdWords.

Для сбора семантического ядра Вам необходимо определить список услуг и товаров которые вы хотите продвигать, и выбрать по каким именно запросам ваши товары или услуги будут искать пользователи и покупатели.

Первым делом для составления семантики необходимо выписать все самые важные слова характеризующие тематику вашего сайта, далее написать предположительно к каждой категории слов, фразы и словосочетания по которым пользователи могут искать Вас в сети (ваши товары или услуги).

Для более точного сбора ядра запросов необходимо понимать какие виды запросов бывают, и какие виды запросов подойдут Вашему сайту.

К примеру вы оказывает услугу по ремонту сотовых телефонов в определенном районе. Стремиться к тому чтоб Ваш сайт был первым по запросу «ремонт смартфона» бессмысленно и очень дорого, так как по данному запросу очень высокая частотность, но и очень большая конкурентность.

Какие виды запросов бывают

Самое важное значение по которому сортируют запросы Seo оптимизаторы это частотность запросов. Есть 3 основные категории запросов:

Высокочастотные запросы (ВЧ) — самые популярные запросы в основном состоящие из 1- 2 слов и характеризующие тематику в общем. Многие оптимизаторы делят частотность исходя из цифр и начинают ВЧ запросы от 3000 — 5000 тысяч запросов в месяц. Я лично считаю такой подход неподходящим, и характеризую ВЧ запросы как запросы имеющие наибольшую популярность в тематике и характеризующие тематику в целом.

Пример: купить часы (151 759 запросов в месяц по Москве и Московской области) или заказать сайт (14 019 запросов в месяц по Москве и Московской области) .

Среднечастотные запросы (СЧ) — запросы менее популярны и имеют обычно от 2-4 слов, а так же носят более точный характер и направленность как по географическому смыслу так и практическому. Продвижение по среднечастотным запросам на мой взгляд наиболее эффективное и целевое, дает отличный результат.

Пример: купить часы недорого (8 596 запросов в месяц по Москве и Московской области) или заказать сайт дешево (439 запросов в месяц по Москве и Московской области).

Низкочастотные запросы (НЧ) — самые непопулярные запросы состоящие из 4-7 слов и имеющие точный характер запроса и вполне конкретную миссию. Обычно продвижение по низкочастотным запросам, самое эффективное и быстрое, здесь необходимо действовать по принципу, «чем больше, тем лучше».

Пример: где можно купить купить часы недорого (90 запросов в месяц по Москве и Московской области) или где заказать сайт дешево (39 запросов в месяц по Москве и Московской области).

Кроме частотности для правильного сбора семантического ядра для нового сайта, так же необходимо понимать насколько конкурентен запрос. Определить конкурентность запроса можно очень просто.

Введите запрос в поисковую строку и вы уведите количество страниц в базе поисковика соответствующих запросу. Чем выше конкуренция тем сложней попасть в ТОП-10 по данному словосочетанию.

По конкурентности запросы бывают:

• Высококонкурентные (ВК)
• Среднеконкурентные (СК)
• Низкоконкурентные (НК)

Высококконкурентные высокочастотные запросы (ВЧ ВК) одни из самых сложных для продвижения (пример — купить часы), поэтому когда вы создаете семантическое ядро для нового сайта, лучше не тратить время и их не учитывать.

Этапы составления семантического ядра

Всю работу по сбору семантического ядра можно разделит на несколько простых этапов. Прежде чем преступать к созданию семантического ядра, Вам стоит создать в excle файл в который вы выпишите все страницы Вашего сайта, создав тем самым структуру семантического ядра.

Допустим вы занимаетесь продажей оборудования для видеонаблюдения, у Вас большое количество категорий и подкатегорий на сайте, Вам необходимо выписать полностью все категорий и подкатегории в файл.

Пример:

Карманные часы

• механические часы
  — механические мужские часы
  — механические женские часы
• кварцевые часы
• электронные часы

Напольные часы

• механические пружинные
• механические гиревые

Собираем все возможные тематические запросы

Для начала необходимо составить «скелет» ядра запросов, страниц вашего сайта, основные категории товаров и услуг, далее к каждой категории, вы добавляете подкатегории и подразделы.

Вы открываете стандартный инструмент для составления семантики «Яндекс Wordstat » и вводите все предполагаемые ключевые слова подходящие для определенной категории в строку поиска. Выписывая в файл все без исключения слова.

Очень хорошо работать с подбором запросов в Wordstat помогает плагин для браузера Yandex Wordstat Assistant (инструкция прилагается)

Если Ваш сайт имеет региональную принадлежность выберете регион вашего сайта. Это поможет более точно понимать как часто пользователи вводят запросы вашей тематики, в вашем регионе. (Все слова не относящиеся к вашему региону отфильтровывайте и отбрасывайте заранее)

Собирайте все возможные запросы связанные с вашей тематикой и отвечающими контенту ваших страниц. Когда вы собрали все запросы для каждой страницы, можно приступать к следующему этапу.

Отфильтровываем неподходящие и пустые запросы

На данном этапе у вас должен быть большой структурированный файл с сгруппированный по разделам в который собранно большое количество ключевых слов соответствующих тематики Вашего сайта.

Среди отобранных вами ключевых запросов Вам необходимо выбрать и удалить определенные запросы:

1. Повторяющиеся ключевые запросы «купить часы» и «часы купить» (оставлять стоит запрос звучащий боле натурально).
2. Ключевые слова с опечатками или ошибками «купить часcы» или «купить муржские часы».
3. Ключевые запросы с брендом или маркой которые вы не продаете «купить часы apple» или «купить часы смарт».
4. Запросы с упоминанием региона в котором вы не представлены «купить часы в Новосибирске», «купить часы Спб» (если вы работает в определенном городе, сразу исключайте данные запросы из списка, оставляя только регион вашего присутствия)
5. Удаляйте из запросов слова содержащие названия ваших конкурентов (рекомендую выделить их в отдельный список и рекламироваться по данным запросам в Яндекс Директ, данные запросы будут стоить недорого, а вы сможете частично отнять клиентов у конкурента)
6. Общие запросы информационного типа (скачать, бесплатно, б/у, самому, обзор, отзывы) в любой тематике люди ищут инструкции или обзоры по выбору товара, или ищут как сделать бесплатно или скачать какой-то контент, так как ваша цель продажи товаров и услуг данные слова стоит удалить.

После того как вы удалили все вышеперечисленные ключевики и подчистили ваше семантическое ядро, Вам стоит еще раз внимательно посмотреть на весь список и повторить отчистку запросов.

Удаляем общие и высоко конкурентные ключи

Многие высокочастотные и высококонкурентыне слова на практике не приносят прибыли, средства и время потраченное на их продвижение не оправдываются, так как не совсем понятно какую информацию ищет клиент вводя высокочастотный запрос.

Пример: когда пользователь вводит запрос «механические часы», он хочет узнать о том как они работают, или узнать как их ремонтирую, или понять какие часы считаются механическими. Вам сложно это предугадать поэтому такого рода запросы стоит удалять. Самый лучший запрос для Вас это «купить механические часы» или «отремонтировать механические часы».

Поэтому я рекомендую удалить из семантического ядра самые высокочастотные запросы. Так вы сэкономите время и средства вложенные в продвижение сайта. После того как вы удалите все общие ВЧ запросы вы можете считать что ваше семантическое ядро готово.

У Вас должен быть файл со структурой повторяющей структуру сайта и к каждой странице подобраны слова для продвижения.

Сервисы для сбора семантического ядра

Как было уже сказано поисковые системы собирают данные запросов для прогноза бюджета в рекламных сервисах (Яндекс Директ и Google AdWords). Для сбора семантического ядра используют как платные сервисы и отдельные программы, так и бесплатные сервисы от поисковых систем. Мы вкратце рассмотрим каждую из них.

Бесплатные сервисы

Бесплатные сервисы для сбора семантического ядра являются самыми популярными и часто используемыми, у каждой поисковой системы есть свой сервис, но му рассмотрим только два самых популярных.

Яндекс Wordstat — один из самых популярных сервисов позволяющих боле точно узнать какие ключевые запросы использовали пользователи поисковика Яндекс, в нем есть возможность посмотреть «сезонность определенного запроса» и «региональную привязку запроса».

Планировщик ключевых слов (Google AdWords) — с подбором слов в Google все намного интересней и на первый взгляд сложней чем в Wordstat, но вы сможете более детально и развернуто получить информацию о запросе, оценить конкурентность запроса, а так же сразу получить кучу похожих ключей. Многие пользуются как вордстатом так и дополняют запросы планировщиком ключевых слов.

Словоеб — это очень интересный инструмент (отдельная программа) которая распространяется совершенно бесплатно и помогает создавать семантические ядра внутри нее. Полностью структурируя каталог и собирая данные как с Wordstat так и AdWords, гибкая в настройках и очень удобная.

Платные сервисы

Платные программ и сервисы позволяют Вам существенно расширить базу ключевых слов, так ка собирают не только запросы с онлайн сервисов поисковиков, но и учитывают дополнительные данные.

KeyCollector — одна из самых распространенных и популярных программ среди Seo оптимизаторов. Позволяет более эффективно проводить отчистку семантического ядра, и очень полезна при больших ядрах запросов, так как в данной программе можно создать сложную структуру и не запутаться. Лицензия покупается 1 раз и вы пользуетесь ею пожизненно. При постоянном использовании программа на 100% оправдывает вложенные средства.

— онлайн сервис по сбору ключевых слов и составления семантического ядра, вы платите за подписку с несколькими версиями, часто используется Seo оптимизаторами

Ошибки при составлении семантического ядра

В самом конце стоит рассмотреть самые популярные ошибки при сборке сематического ядра:

• не стоит гнаться за высокочастотными запросами — если вы занимаетесь интернет коммерцией продаете товары или поставляете услуги, для вас важно быть в топе по транзакционным вопросам
• не злоупотребляйте информационными запросами -ваша цель не ответить на вопросы пользователя а продать ему свой товар или услугу
• много запросов на одну страницу — 20 ключей на одну страницу это слишком много, если у вас есть такая страница, выделите общие запросы из нее в отдельную страницу и продвигайте две страницы по 10 запросов.

Выводы

Для успешного продвижения и оптимизации сайта (блога) необходимо качественно составить семантическое ядро, если Вам самому не хочется заниматься составлением семантического ядра, я рекомендую обратиться в компанию Семен Ядрен , и заказать семантику них.

Рекомендуем посмотреть видео «Как собрать семантическое ядро для сайта самому»