Как (и зачем) бесплатно парсить ключи и объявления конкурентов из яндекс.директ и google ads

Возможности Парсера и его преимущества

Парсер Wordstat позволяет быстро собрать частотность для отдельных фраз или целого семантического ядра. Вот, что можно сделать с помощью инструмента: 

• собрать частотность по Wordstat для неограниченного количества фраз;
• загрузить списком или файлом фразы для парсинга частотности; 
• собрать частотность по любому региону, поддерживаемому Яндексом; 
• собрать частотность только по фразам в определенном виде (с фиксированным порядком слов или словоформами), используя типы соответствия (операторы « », ! и ). 

Главные преимущества: 

• нет лимитов по количеству запросов: за один раз можно спарсить любое количество запросов (хоть 100, хоть 100 тысяч); 
• весь парсинг выполняется на стороне сервиса. Вам не нужно опасаться бана личного аккаунта в Яндексе или создавать фейковые аккаунты под парсинг;
• при использовании Парсера не нужно применять прокси и вводить капчу; 
• данные по частотности можно просуммировать по всем регионам или вывести отдельно по каждому региону. В этом случае вы фактически получаете отдельный отчет для каждого региона; 
• парсинг работает «в облаке» – нет необходимости загружать ПО и устанавливать на компьютер, не нужно держать вкладку или браузер открытыми. Отчеты также сохраняются «в облаке» и доступны в любое время; 
• готовый отчет формируется в формате XLSX-файла. С ним удобно работать, можно импортировать в Google Таблицы, если для вас они более привычны, чем Excel. 

Какой функционал предоставляет Spywords

Стоит ли спорить о том, насколько полезным может быть данный сервис для любого блогера или вебмастера?

Ведь его довольно богатый функционал позволяет производить множество манипуляций, направленных на seo-продвижение сайта в поисковых системах и охват большей аудитории.

Список заявленных служб выглядит следующим образом:

• Анализ конкурентов;
• Битва доменов;
• Война доменов;
• Рейтинги доменов;
• Умный подбор запросов.

Пройдемся более детально по каждой из них.

Анализ конкурентов

Это очень мощный инструмент, который позволяет узнать на каких позициях и по каким ключевым словам сайт находится в выдаче Яндекса и Google (для примера возьмем сайт самой компании Spywords).

Для чего нам эта информация нужна?

Все очень просто: именно под эти запросы можно написать свои статьи и перехватить немного трафика и себе. А может даже и не немного

Здесь стоит отметить, что в работу лучше брать не все запросы, а только с хорошей частотностью и невысокой конкуренцией. Как проверить эти показатели и какой сервис для этого нужно использовать я расскажу в следующей статье.

Статья уже готова и ждет вас вот здесь.

Так что, кто еще не подписался — подписывайтесь, а то есть вероятность пропустить реально полезную информацию.

Помимо этого, анализ транслирует изменения в позициях за определенное время и показывает основных конкурентов. Также анализ позволяет видеть текст объявлений в кампаниях контекстной рекламы и стоимость клика по каждой из поисковых фраз.

Я пока особо в подробности данной информации не вдавалась, поскольку мы не монетизируем блог. Но на будущее, конечно, эта информация будет необходима. Поэтому нужно знать, где её можно получить. Вот мы с вами теперь знаем где — сервис SpyWords.

Итак, какую информацию мы можем получить, проведя анализ своих конкурентов:

1. запросы в поиске;
2. позиции в поиске;
3. сниппеты и урлы страниц;
4. динамика позиций;
5. запросы и позиции в контексте;
6. оценка трафика.

Также анализировать конкурентов можно и в этом сервисе. Подробнее про него можно прочитать здесь.

Битва доменов

Это уникальный инструмент, который позволяет производить сравнение одновременно двух или трех доменов. Сравнение проводиться по таким основным параметрам, как запросы и трафик из контекста, запросы в топ 10 и 50 и, соответственно, трафик из поиска.

Благодаря этой услуге, можно посмотреть по каким пунктам ваш сайт не дотягивает до основных конкурентов, и направить все силы на восполнение и исправление этого недочета.

Сравним сайты Spywords и его конкурента xtool:

Также сервис предоставляет сравнительные диаграммы, на которых можно визуально наблюдать источники наибольшего количества трафика для каждого из доменов.

Война доменов

В отличие от Pro тарифа, функция «Война доменов» доступна только в тарифном плане Unlim. Он практически дублирует возможности «Битвы доменов», но главной его особенностью является то, что для сравнения можно добавлять до 20 разных доменов.

Такое дополнение превращает этот инструмент в настоящий исследовательский центр. Если в вашей нише много конкурентов, анализ каждого из них в отдельности может отнять достаточно времени.

Благодаря функции «Война доменов» можно не только ускорить этот процесс, но и значительно его автоматизировать, так как одна сводка дает детальную информацию по каждому из конкурирующих сайтов.

Рейтинг доменов

Это самый новый инструмент на сайте, который позволяет отслеживать позиции сайтов в поисковой выдаче, однако он доступен лишь в продвинутом тарифном плане.

Там можно просматривать текущую ситуацию в топе выдачи систем Яндекс и Google, следить за взлетами и падениями в выбранный период времени. Это значительно облегчает работу, потому что больше нет необходимости ежедневно отслеживать изменения в выдаче, перебирая вручную тысячи разнообразных запросов.

Умный подбор запросов

Еще один незаменимый помощник в работе вебмастера или блогера, который позволяет в считанные секунды составить полное семантическое ядро.

Вводим в строку необходимый запрос и нажимаем на кнопку «Найти все лучшие слова!»

И выбираем те запросы, которые считаем нужными.

Отличительной чертой этой функции на Spywords является ее большая практичность, так как ядро составляется из тех фраз, которые рекламодатели используют в своих контекстных кампаниях. В то время как большинство похожих сервисов по подбору ключевых фраз не делают детальную выборку по всем доступным фразам, перемешивая качественные слова с откровенно мусорными, Spywords отсеивает нерелевантные и некачественные варианты.

Для любого блогера такой инструмент станет отличной находкой и помощником в генерации новых идей и составлении семантические ядра.

Кому и зачем нужны парсеры сайтов

Парсеры экономят время на сбор большого объема данных и группировку их в нужный вид. Такими сервисами пользуются интернет-маркетологи, вебмастера, SEO-специалисты, сотрудники отделов продаж.

Парсеры могут выполнять следующие задачи:

Кому и для каких целей требуются парсеры, разобрались. Если вам нужен этот инструмент, есть несколько способов его заполучить.

1. При наличии программистов в штате проще всего поставить им задачу сделать парсер под нужные цели. Так вы получите гибкие настройки и оперативную техподдержку. Самые популярные языки для создания парсеров — PHP и Python.
2. Воспользоваться бесплатным или платным облачным сервисом.
3. Установить подходящую по функционалу программу.
4. Обратиться в компанию, которая разработает инструмент под ваши нужды (ожидаемо самый дорогой вариант).

С первым и последним вариантом все понятно. Но выбор из готовых решений может занять немало времени. Мы упростили эту задачу и сделали обзор инструментов.

Маркерные запросы

Маркерные запросы — это запросы, которые четко отвечают продвигаемой странице. Такие запросы обычно имеют значимую частотность ключевых слов по Wordstat и являются средне-частотными (СЧ), или «жирными» низкочастотниками (НЧ), и могут породить «хвост» запросов, например при добавлении слов «купить», «цена», «отзывы».

Примеры:
Платья
Красные платья
Красные платья в пол
Телевизоры
Телевизоры Samsung
Телевизоры Самсунг
LED телевизоры Samsung
Стиральные машины
Стиральные машины для дачи
Стиральные машины шириной 40 см

Другими словами, эти ключевые слова часто являются названием страниц/категорий/статей/карточек товара и прочих типов страниц, которые вообще можно продвигать в поисковых системах.

Часто задаваемые вопросы про маркеры:

Q: Могут ли для страницы быть несколько маркеров?

A: Да — конечно — это довольно частый случай.

Например, на одну страницу могут идти такие маркеры как:
Телевизоры Samsung
Телевизоры Samsung купить
Телевизоры Самсунг
Телевизоры Самсунг купить
Телевизоры самсунг цена
Все эти запросы четко отвечают одной странице
Так же на одну страницу могут идти два маркера-синонима, не связанных лингвистически:
Спецоджеда
Рабочая одежда
или
электроплита бош
электрическая плита bosch
Это вполне нормально и логично.

НЕ маркеры — облако запросов. Это все второстепенные запросы, которые уточняют маркерные запросы — т.е. по факту это маркеры + 1/2/3 слова или синонимы маркеров. Как правило запросы из облака — менее частотные и поэтому мы будем привязывать их к маркерам

Как найти маркерные запросы?

Вариант №1: можно получить поисковые запросы из Яндекс Метрики. Плюсы такого метода — что вы сразу будете знать релевантные URL для этих запросов.

Вариант №2: Берем названия категорий/услуг своего сайта и расширяем их логическими гипотезами:«Как, по каким запросам пользователи еще могут искать эту страницу моего сайта? Какие есть синонимы?»

NB!: Отличным подспорьем в определении маркеров является старый добрый Яндекс Wordstat, при всех его недостатках. Рекомендуем использовать браузерный плагин Yandex Wordstat Assistant от компании Semantica — очень удобный — выполняет роль своего рода «заметок на полях» — в него можно в один клик добавить интересующие слова.

Мы понимаем, что не у каждого оптимизатора/владельца бизнеса есть под рукой департамент разработки, который быстро сможет выгрузить для сайта связку URL — название категории/страницы.

Что такое связка URL-название категории/страницы?

Поэтому есть 3 варианта как получить связку URL — название категории/страницы:

Фактически маркеры для вашего сайта будут состоять из:

1. Запросов, выгруженных из Яндекс Метрики
2. Названий категорий/страниц, взятых с сайта
3. Расширений названий категорий/страниц т.е. логических гипотез

Важно выполнить эту часть работы по подбору семантического ядра максимально тщательно т.к. если вы потеряете большую часть маркеров — вы потеряете большую часть семантического ядра

Часто задаваемые вопросы по подбору маркеров:

Q: У меня большой сайт и маркеров сотни или тысячи — как быть?!

Q: На сколько низкочастотное слово может быть маркером?

A: Здесь все зависит от тематики. В узких тематиках даже ключевые слова с частотностью 15 по кавычкам «» могут быть маркерными запросами. Главное правило — спросите себя — хотел бы мой пользователь видеть отдельную страницу под этот запрос (и связанные с ним?). Удобно ли ему будет пользоваться той структурой, что я создаю?

Q: Как мне держать маркеры в Excell, чтобы потом мне было удобно с ними работать?

A: Идеальный и единственно правильный вариант — всегда держать связку URL-маркер в Excel — так вы всегда сможете понимать какие маркеры идут на один URL, даже если ваш список перемешается.
В дальнейшем таким образом вы сможете фильтровать целые кластеры, которые идут на одну страницу — это может быть и 10 и 50 ключевых слов. Очень удобно.

Пример правильного оформления маркеров в Excel

Итак, после N времени работы мы собрали маркеры для всего сайта (или части сайта), что дальше?

Естественно, что маркеры, это далеко не полная семантика — теперь нам нужно собрать облако запросов — расширить наше семантическое ядро.

SEARCH — находим данные в строке

С помощью этой функции вы быстро найдете необходимые вам строки с большом массиве данных.

Синтаксис:

Функция используется в разных ситуациях:

• выделить ключевые фразы с необходимым интентом (например, брендированные или связанные с определенной тематикой, товаром или услугой);
• найти определенные символы в URL (например, UTM-параметры или знак вопроса);
• найти URL для целей линкбилдинга — например, содержащие слова «guest-post»).

Но в таком виде формула при отсутствии слова «porta» в ключе выведет нам #VALUE!.. Кроме того, при наличии этого слова в искомой ячейке функция будет проставлять номер символа, с которого начинается это слово. Выглядит результат так:

Для получения результата поиска в удобной для нас форме используем дополнительно функции IF и IFERROR:

Будущее

В этот исторический момент мы поняли, что полноценное развитие ввода на мобильных связано с множеством различных аспектов: это и качество данных, и интерфейс, и сеть. Дальнейшее развитие должно было осуществляться во всех этих направлениях и, возможно, в ещё каких-то новых, которые ещё не были нами замеченными.

Кроме того, подсказки присутствуют не только в поиске, но также в наших приложениях, в браузере, в сервисах, отличных от Поиска, и с ними тоже нужно было что-то делать. Кроме того, ввод не обязан быть только текстовым.

И всем этим мы занялись в 2017 году. О том, к чему это привело, мы поговорим в следующей статье.

Что такое поисковые подсказки и зачем они нужны

Поисковые подсказки — это фразы, которые появляются в виде списка автозаполнения, как только пользователь начинает вводить искомую фразу в поисковой строке.

Поисковые подсказки в Google:

Поисковые подсказки в Яндексе:

Поисковые подсказки в YouTube:

По одной и той же фразе поисковики выдают разные подсказки. Дело в том, что каждый поисковик формирует подсказки по собственным алгоритмам. Но есть ряд общих факторов, которые объединяют все поисковые системы.

Что учитывают поисковые системы при подборе поисковых подсказок:

• Популярность поискового запроса в данный момент времени (актуальные и трендовые запросы вроде «что такое инаугурация» или «что такое криптовалюта» выводятся в первую очередь).
• История пользовательского поиска (каждый пользователь склонен просматривать страницы определенных тематик чаще других, и поисковики формируют подсказки в зависимости от интересов).
• Местоположение пользователя (учитывается актуальность запросов для конкретного региона).
• Фактор разнообразия (поисковые системы «подмешивают» варианты подсказок из разных тематик, чтобы повысить вероятность того, что пользователь воспользуется автоподстановкой).

Подсказки обновляются не реже одного раза в день, в отличие от баз Вордстата и Keyword Planner. Поэтому они более актуальны на данный момент времени, отражают текущие тренды и потребности аудитории.

Фразы из подсказок значительно расширяют и дополняют базовую семантику (в том числе LSI-фразами), позволяют поймать «горячий» и сезонный трафик. Среди них вы наверняка найдете ключи, которых не выдаст ни Вордстат, ни Keyword Planner.

В итоге у вас целый перечень дополнительных LSI-фраз (названия популярных моделей газонокосилок Bosch и комплектующих), которые стоит упомянуть в тексте.

Поисковые подсказки Яндекса, Гугла — зачем это нужно

Здравствуйте друзья! Как известно, поисковые подсказки Яндекса и Гугла – это ключевые слова. С помощью ключей находятся те или иные статьи в Интернете. Начинающие пользователи веб-мастера, собирают ключевые запросы для своих статей вручную, а мы сделаем более упрощённый вариант – через сервисы и программу.

Дело в том, что парсер поисковых подсказок будет осуществляться автоматически, и главное, за несколько минут. Итак, зачем собирают поисковые подсказки? Следует выделить три основные фактора, на основе которых это делают:

1. Источник ключевого запроса. Поисковые подсказки будут уникальными и живыми запросами людей в Интернете.
2. Всегда новые поисковые запросы. Этот фактор влияет на продвижение ресурсов в Сети. Поскольку новые ключи – возможность вывести статью на первую позицию в Яндекс и Гугле сразу.
3. Ключи, которые будут Вам приносить трафик. Во время парсера ключей, отбираются только те, которые относятся к действующим запросам пользователей.

Если сказать одним словом, то поисковые ключи, нужны чтобы Вашу статью «увидели в Интернете». Об этом мы подробнее поговорим дальше.

Как правильно настроить Словоеб

Основные инструменты

При помощи программы Словоеб можно:

1. Осуществить пакетный подбор слов используя правую и левую колонку Yandex.Wordstat. Можно данные действия провести и вручную, зайдя на сайт статистики поисковых запросов Яндекс, но это довольно долго и не весьма удобно, лучше использовать данную программу.
2. Осуществить пакетный подбор слов используя Rambler. Adstat. Возможность аналогична с 1 пунктов, только на основании данных статистики запросов поисковика Rambler. Я эти возможности не использую, мне вполне хватает данных Яндекса.
3. Определить конкурентность по данному запросу. Тут всё просто, чем выше конкурентность данного запроса, тем сложней его продвинуть и войти по нему в ТОП по поисковой выдаче.
4. Определить релевантные страницы по данному запросу в Яндекс и Google. Программа поможет определить релевантную страницу по каждому ключевому запросу и место в выдаче Яндекса и Google по вашему КС. К примеру, если я ранее подбирал ключевые слова и написал под них заметку, то через время можно проверить, есть ли в выдаче основных поисковиков мой сайт по данным запросам.
5. Проверить сезонность поисковых запросов, определить KEI (Keyword Effectiveness Index (KEI) — оценка ключевого слова, выраженная в цифровом значении, дающая представление о его эффективности, с точки зрения поискового продвижения). Эти возможности считаю дополнительными и использую редко))

Вот, в принципе, все возможности программы, рекомендую всем, кто пишет статьи, использовать её возможности. Это поможет вам правильно подбирать ключевые фразы и слова и использовать их грамотно в теле заметки. Подробно о том, как правильно писать статьи, рекомендую почитать:

Где скачать программу Словоеб и Key Collektor

Как всегда, рекомендую вам скачивать софт с официальных сайтов разработчика

Скачать бесплатную программу Словоеб и Key Collektor можно тут — http://seom.info/tools/

На странице ищите нужную вам программу и скачивайте самую актуальную версию.

После того, как программу скачаете, распакуйте архив, запускайте программу файлом Slovoeb, после чего нужно внести корректные настройки и данные своих аккаунтов Яндекс и Рамблер, чтобы была возможность парсить запросы.

Настройка программы Словоеб

Любой инструмент для корректной работы необходимо правильно настроить, будь то пианино или софт для вебмастера

После запуска программы находим слева вверху иконку в виде шестеренки (настройки) и переходим в эту вкладку.

Мы пройдёмся детально только по первому разделу «Парсинг», про остальные расскажу коротко, они не столь важны.

Парсинг => Общие

Настройки, которые я выделил на скриншоте выше желтым, вам необходимо сверить со своими. Дело в том, что по умолчанию, с выходом обновлений программы эти цифры могут изменяться. Я выбрал оптимальные и предлагаю вам выбрать такие же параметры, если у вас своё мнение, пожалуйста, выбирайте те цифры, которые для вас являются оптимальными, не возражаю ))

Парсинг=> Yandex.Wordstat

Тут настройки я также слегка подкорректировал и выставил следующие:

Я установил минимальное значение «фразы с частотностью» не менее 25, поскольку для ключевых слов менее 25 писать заметки не стоит, не будет результата и трафика))

Парсинг=> Yandex.Direct

Далее 3 подраздела главы «Парсинг» я пропускаю ( Rambler, поисковая выдача и подсказки) и обращаю ваше внимание на то, что необходимо обязательно внести данные своего аккаунта Яндекс в последний подраздел/

Настоятельно вам рекомендую создать новый аккаунт в Директ и внести его данные в настройках программы Словоеб. Внесите данные название аккаунта и пароль к нему через двоеточие-

логин: пароль
Внимание!
Если вы установили программу на новый ПК, то пароль и логин делайте
новый! Программа не будет работать с одним логином Яндекса на разных
устройствах! У меня на рабочем компе одни логин и пароль, на другом
другие данные Яндекса. Теперь ваша программа готова к обработке данных)) Если у вас часто выскакивает капча при работе программы и вам лень ее вводить ручками, можете воспользоваться сервисами, которые это сделают за вас (раздел настроек «Антикапча») Меня «капча» особо не беспокоит, поэтому я справляюсь сам, без помощи подобных сервисов

Теперь ваша программа готова к обработке данных)) Если у вас часто выскакивает капча при работе программы и вам лень ее вводить ручками, можете воспользоваться сервисами, которые это сделают за вас (раздел настроек «Антикапча») Меня «капча» особо не беспокоит, поэтому я справляюсь сам, без помощи подобных сервисов.

Также можно убрать при помощи настроек лишние колонки (я Рамблером не использую, мне Яндекса вполне хватает), изменить шрифт в программе (я размер на 14 выставил) и прочие мелочи, но это уже каждый сам сможет сделать.

Классификация семантики

При сборе семантического ядра, важно учитывать какой тип семантики отвечает вашему сайту. Всю семантику можно поделить на:

• коммерческая / информационная;
• геозависимая / геонезависимая;
• сезонная / несезонная;
• высококонкурентная / среднеконкурентная / низкоконкурентная;
   
• Коммерческая семантика — это так-называемая «продающая» семантика с целью конвертировать посетителя сайта в потенциального покупателя / клиента. Зачастую в нее входят такие слова как: купить, цена, заказать, продать, обмен и так далее. Их еще называют транзакционными запросами.  

Информационная семантика — это семантика, у которой нет коммерческой цели, основной целью является рассказать о чем-то / ком-то, например о продукте, товаре или персоне и т.д. Это может быть статья, справочная информация, просто текст — но информационного характера.

Геозависимая семантика — это семантика, которая имеет четкую привязку к конкретному населенному пункту. Например, «стоматологический кабинет “Арника” в Москве». И преимущественно — это коммерческая семантика. Такая семантика нацелена на поисковую выдачу по конкретному городу, а значит при сборе семантического ядра необходимо максимально учитывать ключевые слова именно по этому региону — все остальные населенные пункты игнорировать. 

Геонезависимая семантика  — это преимущественно информационная тематика, без привязки к конкретному населенному пункту. Например, новостные сайты, информационные порталы, статейники, аналитические ресурсы и так далее. То есть, это та семантика, которая не привязана к региону. 

Ваша задача заключается в том, чтобы точно определить какой вид семантики отвечает вашему сайту и по ней собрать семантическое ядро. 

Ядра смешанных типов семантики создавать не рекомендуется — запросы могут не правильно сгруппироваться и вы получите, грубо говоря, кривую структуру.  Если же у вас сайт, на котором планирует несколько типов семантики — рекомендую разместить их на разных разделах и собрать отдельное семантическое ядро под каждый. 

Google Ad Planner

Отличный сервис с живыми запросами пользователей и их частотностью.

Плюсы:

• Живые запросы пользователей и частотность по Google
• Позволяет посмотреть частотность по порядку слов в запросе

Минусы:

• Сервис актуален больше для англоязычных рынков, подавляющее большинство находит с помощью парсера Wordstat и поисковых подсказок
• Сложный интерфейс
• Медленная скорость загрузки данных

Подводя итоги, мы рекомендуем использовать для сбора базовых гипотез в семантике левую колонку Wordstat, далее собирать поисковые подсказки по этим гипотезам. Только так вы сможете получить наибольшую полноту и актуальность данных!

Для максимальной полноты, к получившемуся облаку запросов стоит добавить запросы, выгруженные из счетчиков статистики, далее удалить дубликаты и кластеризовать.

Для чего нужен парсинг частотности

Оценка объема трафика по определенным ключевым словам 

Частотность в Яндекс.Вордстат отображает количество показов по выбранному ключевому слову за месяц в определенном регионе. С помощью этих данных можно примерно рассчитать потенциальный объем трафика, который можно получать в поисковой выдаче на разных позициях. 

Сделать это можно так: 

1. Соберите целевую семантику (список ключевиков, по которым вам нужно получать поисковой трафик). Собрать семантику можно с помощью медиапланера от Click.ru. 

2. Спарсите частотность ключевых слов. Для примера мы возьмем ключевик «купить Samsung Galaxy в Москве» и проверим его частотность непосредственно в Вордстате. Итого, по данному запросу – 11757 показов в месяц. 

3. Найдите в интернете средние значения CTR для каждой из позиций первой страницы поисковой выдачи. 

Если ваш сайт добавлен в Яндекс.Вебмастер и работает как минимум несколько месяцев, данные по CTR будут доступны в отчете «Поисковые запросы» → «Все запросы и группы». 

К примеру, CTR для второй позиции – 18%. Теперь мы можем посчитать примерный уровень трафика, который можем получить. Формула для расчета: 

(Частотность * CTR)/100 

Подставляем в формулу наши данные: (11 757 * 18)/100 = 2116. 

Конечно, нет гарантии, что мы получим точно такое количество посещений, но для примерной оценки потенциала запроса такие расчеты будут очень полезными. 

Еще одна причина для сбора частотности ключей – фильтрация запросов с околонулевой частотностью

Фразы, по которым нет показов (или показов совсем мало – от 1 до 10), лучше убрать из семантического ядра и не тратить время на оптимизацию страниц под такие запросы. 

По ним практически не будет трафика, а если запускать контекстную рекламу, объявления получат статус «мало показов» и не будут показываться. 

Обратите внимание! Иногда семантику с низкой частотностью не нужно исключать из ядра. Это касается узкоспециализированных тематик, например дорогого медицинского или производственного оборудования

Там ключевые запросы с указанием точной спецификации оборудования могут иметь всего пару запросов в месяц, но приводить максимально целевую и горячую аудиторию. 

На что ориентироваться 

В зависимости от ниши и типа сайта нижний порог частотности, по которому нужно отсекать бесперспективные запросы, отличается. Для ориентира можете использовать следующие данные: 

Ниша	Отсеиваем запросы с частотностью
Узкие тематики
Масс-маркет	до 5
Информационные ресурсы	до 30–35

При удалении низкочастотных фраз будьте внимательны: НЧ-запросы приводят качественный трафик, поэтому удаляйте фразы аккуратно, оставляя целевые. 

Парсеры сайтов по способу доступа к интерфейсу

Облачные парсеры

Облачные сервисы не требуют установки на ПК. Все данные хранятся на серверах разработчиков, вы скачиваете только результат парсинга. Доступ к программному обеспечению осуществляется через веб-интерфейс или по API.

Примеры облачных парсеров с англоязычным интерфейсом:

• http://import.io/,
• Mozenda (есть также ПО для установки на компьютер),
• Octoparce,
• ParseHub.

Примеры облачных парсеров с русскоязычным интерфейсом:

• Xmldatafeed,
• Диггернаут,
• Catalogloader.

У всех сервисов есть бесплатная версия, которая ограничена или периодом использования, или количеством страниц для сканирования.

Программы-парсеры

ПO для парсинга устанавливается на компьютер. В подавляющем большинстве случаев такие парсеры совместимы с ОС Windows. Обладателям mac OS можно запускать их с виртуальных машин. Некоторые программы могут работать со съемных носителей.

Примеры парсеров-программ:

• ParserOK,
• Datacol,
• SEO-парсеры — Screaming Frog, ComparseR, Netpeak Spider и другие.

IMPORTRANGE — импортируем данные из других таблиц

Функция позволяет вставить в текущий файл данные из других таблиц.

Синтаксис:

Пример:

Пример. Вы продвигаете сайт клиента. Над проектом работает три специалиста: линкбилдер, SEO-специалист и копирайтер. Каждый ведет свой отчет. Клиент заинтересован отслеживать процесс в режиме онлайн. Вы формируете для него один отчет с вкладками: «Ссылки», «Позиции», «Тексты». На эти вкладки с помощью функции IMPORTRANGE подтягиваются данные по каждому направлению.

Преимущество функции в том, что вы открываете доступ только к конкретным листам. При этом внутренние части отчетов специалистов остаются недоступны для клиентов.

Сбор поисковых подсказок, используем сервис Пиксель Тулс и программу Кей Коллектор

В этом разделе статьи, мы рассмотрим сервис Пиксель Тулс для сбора подсказок и программу Кей Коллектор. Для того чтобы собирать ключевые подсказки в Пиксель Тулс, Вам необходимо там зарегистрироваться, и пополнить баланс на сумму 300 рублей. Этого вполне хватит для покупки лимитов сервиса для обслуживания.

После входа на данный ресурс, у Вас станет доступна его панель управления. С левой стороны сайта ищем в самом низу две функции: поисковые подсказки Яндекса и Гугла. Далее, нажимаем на одну из них и пишем в специальном поле, ключевое слово (Скрин 3).

После этого кликаете «Проверить». Когда проверка закончится, Вы получите результаты. Это будут готовые поисковые подсказки Яндекса.

Утилита Кей Коллектор в данный момент является платной программой. Её основной лицензионный софт стоит 1800 рублей. Если её покупать оптом, ее стоимость составит 1100 рублей — цены можно посмотреть здесь – (www.key-collector.ru). Покупайте программу, скачивайте и устанавливаете её на компьютер.

Далее, заходите в раздел «Настройки» программы и устанавливаете там поисковые системы Яндекс, Гугл. Затем, в разделе «Подсказки» нужно установить регион поиска «Авто-определение» и «Сохранить изменения».  Далее, загружаете из файла заготовленные ключевые слова и запускаете программу с помощью кнопки «Начать сбор». В конце работы, она также, как и сервис Пиксель Тулс выдаст Вам все поисковые запросы.

Сбор поисковых подсказок Яндекса и Гугла

Сейчас в Интернете есть сервисы и программы, которые осуществляют сбор поисковых подсказок Яндекса и Гугла. Далее, нами будут рассмотрены такие сервисы и программа:

• Пиксель Тулс;
• Раш Аналитикс;
• Программа Кей Коллектор.

Парсер поисковых подсказок выглядит в Яндексе таким образом (Скрин 1).

Например, мы введём поисковый запрос – «заработок в Интернете». И если нажать на клавиатуре кнопку «Пробел» можно получить сразу ещё 9 таких аналогичных подсказок. Тоже самое дело обстоит и с Гуглом (Скрин 2).

Правда он больше подходит для продвижения иностранных ресурсов, чем сайтов, блогов русскоязычного Интернета. Веб-мастера в основном «упираются» на Яндекс, но о Гугле не забывают.

Как собирать маски ключевых слов

Каждый, кто составлял список базисов, понимает основные сложности:
 

• Придумать все варианты из головы нереально — мы многое упускаем и теряем охват;
• Ни один даже самый идеальный сервис не подбирает на 100% корректные маркеры — без ручной чистки «мусорных» запросов не обойтись.

 
Мы применим подход, который дает охват, близкий к 100%. Принцип, как у всех семантических инструментов:
 
1) Задаете в Wordstat слово / фразу и получаете выборку;
 
2) Минусуете всё нерелевантное и некоммерческое;
 
3) Расширяете список за счет похожих фраз и других источников;
 
4) Проверяйте частотность полученных фраз в Вордстате.
 
Довольно трудозатратный процесс, но он позволяет достичь оптимального сочетания усилий и охвата.
 
Итак, всё по порядку. Пример — курсы английского языка.