Создание структуры и семантического ядра

Руководство к применению. Специально для слушателей
«4 шага к интернет-маркетингу уровня PRO» от Calltouch

Виды поисковых запросов

Необходимо определить основные ключевые фразы в соответствии с тематикой разделов сайта.

Ключевые слова должны строго соответствовать страницам сайта.

Например, разделу http://www.moya-sumochka.ru/zhenskie-sumki/klassicheskie/ соответствуют ключи: классические сумки, сумки классика, классические сумочки, сумочки классика, а также более расширенные варианты.

Данные комбинации слов забиваются в Yandex.Wordstat для поиска всего списка ключей.

Транзакционные запросы
Это лучшие запросы для продвижения коммерческого сайта. В их формулировке выражено желание пользователя что-то сделать, купить, продать, найти нужную услугу.

Например, «купить классическую сумку», «цена классической сумки».

Общие запросы
Общие запросы высокочастотны. Если сделать ставку на продвижение по ним, это обернется неоправданно высокими финансовыми затратами для клиента. Они слишком общие, поэтому человек вряд ли найдет по ним то, что ему нужно.

Например, для сайта, предлагающего «пластиковые сетки», запрос «сетки» будет слишком общим и не привлечет ожидаемого уровня трафика.

Общие запросы не подходят для узконаправленных разделов.

Например, запрос «сумки» вышеназванному разделу классических сумок не соответствует. Он подойдет для главной страницы сайта.

Слишком узконаправленные запросы
Запросы более узкой направленности необходимо выделять в подразделы.

Например, «классические сумки через плечо», «красные классические сумки».

Если они окажутся в разделе общих запросов, продвижение сайта по этим ключевым словам не будет эффективным.

Информационные запросы
Как понятно из названия, информационные запросы используются для поиска интересующей пользователя информации. Они нужны только для познавательных, научно-популярных страниц сайта.

Например, «почему болит сердце» или «эхо сердца что это».

Примером таких страниц сайта могут служить внутренние страницы сайта с описанием какой-либо болезни, новостями, тематическими статьями и т.д. Для продвижения основных коммерческих страниц такие запросы не нужны.

Изучение конкурентов
На сайтах конкурентов можно найти хорошие идеи. Чтобы расширить свой пул запросов и найти новые стратегии, важно знать, по каким ключевым словам продвигаются другие компании в вашей сфере.

Подбор и анализ конкурентов

Первоначально ищем конкурентов через выдачу Яндекс (в режиме браузера «инкогнито», регион Москва как самый конкурентный, или выбираем регион проекта).

Вводим в строку поиска основную ключевую фразу, определяющую тему нашего сайта. Например, если это интернет-магазин по продаже сумок, то в поиск вводим «купить сумку».

Среди результатов Топ-10 выбираем сайты, похожие на наш по содержанию и формату. Сравниваем структуру и разделы. Это важно сделать, чтобы иметь представление о теме и объеме возможного семантического ядра.

*** Если в задаче на сбор СЯ вам уже передан список конкурентов (проработан при подготовке КП), то работаем сразу по нему.

Первоначальная структура сайта

Изначально структура сайта основана на имеющихся разделах и/или ассортименте товаров/услуг, которые планируют продавать. Дополняем структуру подходящими пунктами на основе анализа конкурентов.

Важно соблюдать логику «от общего к частному». Можно представить структуру в виде карты знаний, например:
Пример визуализации структуры сайта.
Данная схема нужна нам, чтобы проработать все разделы. Желательно уже на этом этапе прописать каждому разделу возможные синонимы и альтернативные названия (используем мозговой штурм, берем идеи с сайтов конкурентов, копаемся в своих знаниях по теме).

Итоговая структура сайта будет отличаться, т.к. будет отредактирована на основе получившихся групп и их частотностей.

Сбор ключевых фраз

1. Работа с Yandex Wordstat

Сбор запросов в wordstat.yandex.ru из левой колонки в соответствии с нужным регионом. Упростит задачу плагин Yandex Wordstat Helper, который сохраняет выделенные фразы в список.
Подбор ключей в соответствии с выбранным регионом.
Данный способ удобен при сборе как узкотематических запросов, когда выбирать не из чего, так и при сборе запросов широкой тематики (KeyCollector выдает много ненужного мусора). Также собранный список может помочь при создании маркеров для парсинга в KeyCollector.

Обращаем внимание также на правую колонку, в ней могут быть показаны подходящие синонимы или близкие по смыслу фразы. Если есть сомнения, подходит ли фраза нашему сайту, проверяем топ Яндекса по этому запросу и сверяем, соответствует ли выдача нашему сайту или теме.

Особенности:

  • Слово1 слово2 слово2 – сумма частотностей по любому третьему слову. Пример: айти инвест инвест – второй «инвест» любое слово, частотность суммируется. На языке шаблонов айти инвест [инвест]. Можно использовать для оценки охвата хвоста запросов.

  • Частотности с дефисом и без него одинаковые.

  • Изучить дополнительные операторы и особое внимание на + для предлогов.

  • Никогда в запросах не используем Ё.

  • Никогда не используем порядка слов, начинающегося с цены или города. Меняем слова местами. Грубые примеры: цена серфинг → серфинг цена , челябинск квартиры посуточно → квартиры посуточно челябинск.

  • При сборе для конкретных страниц-рубрик (в частности, интернет-магазинов) – обязательно ориентироваться на текущие товары и не собирать запросы с товарами других брендов либо с другими характеристиками товаров. Обязательно перепроверять после сбора соответствие запросов товарам на сайте.
2. Парсинг запросов в KeyCollector

Перед началом работы прочитать мануал функционала на практике — читать и смотреть в KeyCollector. Ответы на распространенные вопросы ребята в компании уже предоставили.

Настройка KeyCollector без использования прокси-серверов:
Настройки во вкладке Общие, Yandex.Wordstat и Yandex.Direct.
Настройки во вкладке Поисковая выдача и Антикапча.
Работа с proxy и аккаунтами
В настройках программы выбираем пункт «Сеть», ставим галочку «использовать прокси-серверы», добавляем данные прокси-серверов.
Настройки во вкладке «Сеть».
Обычно хватает 5-10 прокси для быстрого сбора статистики. В разделе «Яндекс.Директ» добавляем аккаунты.
Настройки во вкладке «Парсинг» — «Yandex.Wordstat».
Их должно быть не меньше, чем прокси, можно больше, т.к. на аккаунтах накапливаются капчи, и они постепенно удаляются из списка до следующего перезапуска сбора. На этой же вкладке, ниже нужно изменить количество потоков на соответствующее числу прокси-серверов и обязательно убрать галочку «использовать основной IP». Эти же настройки важно повторить во вкладках: Yandex.Wordstat, Поисковая Выдача и Подсказки.
Настройки во вкладках Yandex.Wordstat, Поисковая выдача и Подсказки.
Процесс сбора
  • Сбор запросов в KeyCollector производится, используя Пакетный сбор слов из левой колонки Yandex.Wordstat. Здесь мы списком вносим список маркеров (входных запросов) для парсинга. Составляем данный список на основе названий разделов, ассортимента, синонимов. Важно не использовать слишком общие понятия, т.к. соберется много неподходящих фраз.
Пакетный сбор фраз из левой колонки Yandex.Wordstat.
Например, к интернет-магазину о продаже сумок не стоит использовать маркер «сумка», нужно ограничить транзакционными дополнениями, такими как «купить сумку», «сумки Москва», «сумки цена» и пр.

При этом важно не заузить тему, а наоборот собрать максимум подходящих фраз. Для этого используем синонимы и словоформы и проверяем частотные варианты фраз по теме в Yandex.Wordstat.

  • Можно использовать списки «Стоп слов», если необходимо сразу ограничить парсинг по каким-то словам. Это могут быть списки городов, брендов, список нецензурных выражений или слов, показывающих принадлежность запроса к информационному виду (книга, +как, +зачем, смотреть, читать, скачать, и т.п).
Пример оформления списка стоп-слов.
Для этого при парсинге из левой колонки нужно отметить галочку «интегрировать стоп-слова при составлении запросов». Если не указали стоп-слова при парсинге, то их можно будет отсечь на этапе чистки фраз.
    Интеграция стоп-слов при парсинге.
    • Перед запуском сбора необходимо указать регион, для которого собираются запросы.
    Выбор региона в Yandex.Wordstat.
    Если тема очень узкая, и нам важно собрать максимум вариантов, то при сборе фраз можно не указывать регион. Регион можно будет задать на этапе сбора частотностей, чтобы отсеять лишнее. При этом не забыть сначала очистить колонку базовой частотности, которая соберется вместе с фразами автоматически.

    • Особенность: При загрузке ключевых фраз для сбора частотностей в KeyCollector, к предлогам, частицам, союзам, наречиям (как, когда, на, и, в, при и т.д.) надо обязательно добавлять знак +, например, «аренда складов класса а» – загружать надо «аренда складов класса », «кресло для отдыха» – загружать надо «кресло +для отдыха». Из-за отсутствия плюса искажается частотность.
    3. Сбор запросов через Keys.so

    Подробно о поиске конкурентов читайте здесь.

    Упрощенный сбор запросов:

    • загрузить в Яндекс главное ключевое слово, например, смарт баннер;
    • открыть первые 2-3 страницы сайтов из выдачи ТОП-10;
    • поочередно добавить в поиск URL открывшихся страниц сайтов;
    • перейти на страницу «Органический поиск - Запросы»;
    • выгрузить запросы или скопировать их в буфер обмена.

    Упрощенный сбор запросов в Keys.so.
    Также можно выгружать запросы по конкретным страницам. Для этого в строку поиска для анализа введите нужную ссылку или выберите подходящие страницы через отчет «органический поиск - страницы»
    Выгрузка запросов по отдельной странице или поиск подходящего URL по сайту.
    Далее загружаем полученный список фраз в KeyCollector с помощью функции «Импортировать из csv» для последующей обработки. При первой загрузке нужно будет соотнести столбцы таблицы со столбцами программы. При повторном использовании это будет происходить автоматически. Нажимаем кнопку «Автонастройка видимости колонок», чтобы видеть только те данные, которые мы загрузили.
    Шаги по импорту фраз из KeyCollector для последующей обработки.
    Дополнительные способы сбора запросов

    Можно дособрать запросы в KeyCollector с функцией «Сбор поисковых подсказок».
    Сбор запросов в KeyCollector с функцией «Сбор поисковых подсказок».
    Только Яндекс (В Google собирается слишком много мусора).

    Для сбора с подсказками на наиболее частотные запросы необходимы все порядки слов и словоформ, т.к. на «котлы твердотопливные» и «твердотопливные котлы» подсказки разные.

    Yandex.Wordstat при парсинге отдает только первые 40 страниц (2000 запросов). Если мы собираем семантику по широкой теме (например, состоящей из одного слова – «флюорография») и в выдаче Yandex.Wordstat более 40 страниц (для проверки этого переходим на вторую страницу выдачи, меняем в урле 2 на 40, и видим что осталось еще много вариантов с высокой частотностью), есть несколько способов получить большее количество запросов.
    Изменения в урле Yandex.Wordstat для получения большего числа запросов при парсинге.
    Парсинг с оператором ! по всем словоформам. Например, без данного оператора, по слову «флюорография» - 324 967 показов в месяц, с оператором ! уже 196 640 показов, а по словоформе !флюорографию - 65 706 показов. Если по каким-то словоформам мы получили не все запросы (все равно есть больше 40 страниц) проводим доп. парсинг по данной словоформе с дополнительными транзакционными «хвостами», которые отбираем из ВЧ вариантов 1 страницы.
    Пример парсинга с оператором ! по всем словоформам.
    • Сбор запросов с использованием двусловников (а затем трехсловников, четырехсловников и т.д.) например, «кресло кресло». Применяя данный метод, получается найти группы запросов, которые не входят в первые 2000 запросов, которые выдает Yandex.Wordstat, т.к. на месте второго слова «кресло» Yandex.Wordstat выдает какое-либо другое слово.

    • Сбор запросов в Google Analytics и Яндекс.Метрика.

    • SpyWords, MegaIndex.

    • Сбор подсказок. Использование сервиса Rush Analytics.

    • Google Webmaster, «Поисковые запросы».

    • Расширение списка основных запросов за счет генерации вариантов с помощью сервиса SeoGenerator:

      • {{элитные|дорогие|престижные|дизайнерские|премиум класса|} {американские|} {витрины} {+из США|из Америки|Америка|США|} {купить|цена|фото|заказать|} {+в Москве|Москва}|

      • {элитная|дорогая|престижная|дизайнерская|премиум класса|} {американская|} {витрина} {+из США|+из Америки|Америка|США|} {купить|цена|фото|заказать|} {+в Москве|}}.

    Сбор частотностей

    • Собираем частотности с учетом региона проекта:

      • Базовая частота.
      • Частота «».
      • Частота «!».
      • Частота по маске «[QUERY]».

      Первые три вида частотностей собираем через «Сбор статистики Яндекс.Директ», последнюю – через «Сбор частот через Яндекс.Вордстат».

    Чистка запросов

    Удаление нулей

    Удалить запросы с нулевой частотностью, а также те, частотность которых стремится к 0. Точный порог частотности устанавливается для каждого проекта отдельно, это зависит от тематики, а также от выбранного региона (для отдельного города — более низкий порог, для всей России — более высокий). В самых узких тематиках мы можем брать частотность от единицы. Чаще — от 3-5. В работе с информационными запросами порог может быть 10-30.


    Удаление неявных дублей

    1. Заходим во вкладку «Данные».

    2. Кнопка «Анализ неявных дублей» и выбираем:

      1. Искать во всех выделенных группах.

      2. Отметить все кроме самых высокочастотных в каждой группе.
    3. Нажимаем кнопку «Выполнить поиск дублей повторно», нажимаем кнопку «Умная отметка». Но надо учесть, что «Умная отметка» считает одинаковыми словоформы такого вида:
    «Умная отметка» и словоформы.
    Поэтому необходимо пройтись по списку вручную и снять галки там, где они не нужны.

    4. Создаем новую группу «Неявные дубли» и переносим туда выделенный список запросов (Перенос фраз).

    • Повторно шаги и выбираем «Отметить все, кроме 1» для удаления дублей с одинаковой частотой.
    Чистка с помощью стоп-слов

    Если не задали стоп-слова на этапе парсинга, то сейчас самое время это сделать. Можно использовать подготовленные списки или собрать новый список, просмотрев высокочастотные фразы и выявив ненужные «хвосты».
    Составление и дополнение списка стоп-слов.
    Рядом с каждой фразой есть значок «добавить в стоп слова», где можно выбрать какое именно слово мы хотим исключить и сделать поиск сразу по этому слову или провести проверку позже всем списком.
    Пример добавления фразы в список стоп-слов.

    Кластеризация через SEMparser

    1. Добавить проект.
      • заполнить название;

      • Поисковая система - оставляем по умолчанию Яндекс (изначально ориентируемся всегда на него при проработке семантики), или меняем на Google, если это задано в условиях проекта;

      • выбрать регион;

      • сила группировки 4;

      • Дополнительные опции: поставить галки, добавить URL сайта в соответствующее окно для определения релевантных страниц, загрузить файл (примеры оформления файла правее), поставить галку Пропустить первую строку в таблице (если строка оглавления есть в файле).

      • Запустить выполнение проекта.

    2. Зайти в готовый проект.

    3. Сделать выгрузку проекта в Excel


    Какие доп. опции выбрать и как выгрузить файл проекта в Excel.
    Сгруппированные в сервисе запросы требуют глубокого вдумчивого анализа. Качество группировки зависит от качества сайтов в топе (конкурентности ниши). Чем конкурентнее ниша, тем меньше доработок вручную. Но чаще всего надо дорабатывать группы вручную.

    Это удобно делать в SEMparser: выделить нужные запросы и перенести в соответствующую группу.
    Пример переноса нужных запросов в другую группу.
    После кластеризации следует определить релевантную страницу сайта для каждой группы запросов. Если подходящей страницы не окажется, рассмотреть целесообразность создания новых страниц.

    Сервис сбора позиций Topvisor

    Добавляем в topvisor.ru, когда:

    1. Собраны запросы для страницы.

    2. Создана страница (есть URL).
    После добавления обязательно ставим дату добавления на вкладку «Запросы» на каждый запрос и вкладку «Структура» на URL. Чтобы фильтровать только запросы с URL для получения списка на загрузку, фильтр URL не пусто в «Запросы». Во вкладке «Запросы» просто протаскиваем дату на получившемся фильтре. С добавлением дат во вкладку структура аналогично — фильтр Пусто в дате добавлено в Топвизор и URL не пусто.

    Зачем? Если нужно добавить новые страницы, мы ставим в фильтре Пусто (Blank) без дат и забираем шаблон для загрузки в Топвизор. Добавление новых страниц/запросов — минутный процесс.


    Топвизор Радар

    Настраиваем Топвизор Радар — это мониторинг изменений title, h1, desc, доступность страниц и содержания. Дату добавления в Топвизор радар ставим на вкладке «Структура».

    Дополнения


    Графическая структура сайта
    Структура сайта может быть изображена в графическом виде при помощи различных программ. Как вариант, можно использовать MindMeister или другие сервисы. Графическая структура дает клиенту лучшее понимание того, что мы делаем, и воспринимается проще чем огромный файл в Excel.
    Пример визуализации структуры сайта.
    Инструкция по сбору ключей в Google Analytics (при наличии контекста)
    Показывает только Paid (контекстная реклама Яндекс.Директ и Google.Adwords) ключевые слова и количество переходов. Organic недоступен, смотрим по Яндекс.Метрике.

    • Логинимся в нужный аккаунт Google Analytics и заходим в профиль сайта (со значком земли справа).
    • Переходим в левом меню «Источники трафика» → «Ключевые слова» → «Оплачиваемый».
    • Накидываем сегмент (не сохраняем сегмент).

      • Нажимаем «Добавить сегмент».
    • +Сегмент.
    • Расширенный → Условия.
    • Нажимаем на Агломерация и начинаем вводить «Целевая страница», выбираем данное условие.
    • Оставляем «Содержит».
    • Вводим неполный адрес без URL сайта, начиная со слеша (например, /catalogue/brezent/ogneupornyj).
      • Кликаем кнопку «Предварительный просмотр».

    Если все ОК, выбираем период: кликаем по дате в правой верхней части и в календаре отмечаем нужные даты. После отметки статистика автоматически изменится.

    Выбираем количество строк на странице 100 и для посещаемых страниц 250 под таблицей ключевых слов справа в выпадающем списке (именно столько будет выгружено ключевых слов в отчете, а не все).

    Смотрим, что получилось. Если это похоже на правду, выгружаем.
    В верхнем меню нажимаем «Экспортировать» → TSV (для Excel).
    Инструкция по сбору ключей в Яндекс.Метрика
    Выгружаем ключевые слова и количество визитов на нужную страницу из органической выдачи поисковых систем.

    Инструкция:

    1. Логинимся в нужный аккаунт Яндекс Метрики и заходим в статистику сайта.
    2. Заходим в «Новую Метрику».
    3. Переходим на сайт.
    4. Нажимаем «Все отчеты» → «Источники» → «Поисковые фразы».
    5. Нажимаем «Сегментировать» → «Визиты»→ «Поведение» → «Страница входа».
    6. Вводим URL адрес нужной страницы сайта.
    7. Выбираем период «Год».
    8. Выгружаем: в правом верхнем углу нажимаем «Экспорт» → «Экспортировать в xlsx».
    Напишите нам
    Расскажите о целях проекта
    Ответим в течении двух рабочих часов. Нажимая на кнопку, Вы подтверждаете свое согласие c пользовательским соглашением и политикой конфиденциальности.