Содержание

Как узнать частотность запросов в Google и Яндекс

Эффективность SEO-продвижения напрямую зависит от выбранной стратегии подбора ключевых слов, а также оценки уровня их частотности. Поэтому так важно иметь под рукой статистику запросов. Давайте разбираться, как её можно получить.


Содержание:




Как посчитать количество запросов в Google


Лидер среди поисковых систем имеет собственный инструмент статистики запросов — Планировщик ключевых слов, или Google Keyword Planner. Он находится внутри рекламного кабинета Google Ads. Чтобы им воспользоваться, необходимо пройти обязательную регистрацию с указанием своих платёжных данных и создать рекламную кампанию. При этом запускать показ платных объявлений необязательно. 


После этого в правом верхнем углу экрана найдите ссылку на этот инструмент и перейдите по ней.



Для проверки частотности запросов выберите окно «Новые ключевые слова». 



В нём введите интересующие вас фразы в специальное поле, уточните регион и язык поиска, нажмите «Показать результаты».



Вас перебросит на страницу со статистическими данными для введённых ключевых слов, а также похожих фраз:


  • Среднее число запросов в месяц, причем не точное количество, а довольно большой диапазон;
  • Уровень конкуренции в контекстной рекламе;
  • Стоимость показа рекламного объявления вверху поисковой выдачи. 

Для составления семантического ядра нас интересует информация о частотности и вариантах ключевых слов.



При желании, в верхней части экрана вы можете изменить настройки, указав период времени, язык и регион поиска. А также с помощью фильтра исключить из списка нежелательные слова. 



Как собрать частотность запросов в Яндексе


Разработчики российской поисковой системы также создали сервис по работе со статистикой ключевых слов — Яндекс Вордстат. При этом он гораздо проще и удобнее, чем Google Keyword Planner. Чтобы воспользоваться инструментом, достаточно авторизоваться в своём Яндекс аккаунте.


Введите ключевую фразу в строку поиска и нажмите кнопку «Подобрать». Сервис отобразит запросы, в составе которых есть эти слова, а также их прогнозируемую частотность в месяц.



С помощью специальных операторов вы можете задать минус-слова или узнать статистику точного словосочетания без предлогов и изменения окончаний.


В Вордстат есть возможность выбрать сортировку по регионам, а также просмотреть историю изменений частотности запросов за последние 2 года.




Сторонние сервисы, где можно посмотреть количество поисковых запросов


Не только поисковики готовы предоставить информацию об использовании ключевиков пользователями. Некоторые сторонние сервисы также формируют статистические данные. Рассмотрим наиболее популярные и удобные программы, с помощью которых можно посмотреть количество запросов по ключевым словами.


Serpstat


Многофункциональная платформа для SEO, в которой имеется инструмент подбора ключевых слов. Serpstat — платный сервис. Вместе с тем в нём можно найти массу полезных данных для эффективного продвижения, наличие которые полностью оправдывает стоимость подписки.


Здесь есть возможность:


  • посмотреть статистические данные как по Яндексу, так и по Google с привязкой к стране продвижения; 
  • выполнить сортировку от самых популярных поисковых запросов к низкочастотным и наоборот;
  • отфильтровать данные по определённому параметру.

Полученные данные можно выгрузить, например, в Excel для дальнейшего комфортного использования.



Букварикс


В этом сервисе можно проводить бесплатный анализ ключевых слов на основе данных из Яндекс Вордстата.


Букварикс весьма прост в использовании, в нём нет ничего лишнего: ключевое слово, похожие комбинации запросов и их частотность.



Здесь же можно произвести бесплатный анализ продвигаемых ключевиков конкурентами.


Keyword Tool


Платный сервис, который собирает данные по частотности использования ключевых фраз не только в Яндекс и Google, но и на других платформах: YouTube, Instagram, Bing, Amazon и др.


Keyword Tool также прост в использовании, как и большинство подобных сервисов. С работой в нём без проблем справится даже начинающий оптимизатор.




Выводы


Поиск и анализ ключевых фраз — основа работы оптимизатора, без которой вывести сайт в ТОП довольно сложно. С помощью сервисов подбора запросов и анализа их частотности можно разработать эффективную стратегию продвижения и привлечь именно тех пользователей, которые точно нуждаются в ваших товарах или услугах.


А какой сервис используете вы для анализа частотности ключевых слов?


P.S. На курсе «Поисковик» вы узнаете все тонкости и особенности работы с ключевыми словами для продвижения вашего сайта, и самое главное — уже в процессе обучения сможете применить полученные знания на практике. Переходите по ссылке выше, и бронируйте участие. А с промокодом «SEO-25» вас будет ожидать приятный бонус.

Работаем с Yandex Wordstat. Автоматический сбор Яндекс Wordstat Парсер запросов яндекс

Один из наиболее популярных модулей в Rush Analytics – парсер Яндекс Вордстат, и это не случайно. При сборе семантического ядра необходимо точно знать частотность собранных запросов, чтобы правильно расставить приоритеты по продвижению и избавится от «мусорных» и нулевых запросов. Часто стоит задача пробить несколько десятков тысяч запросов на частотность в Яндексе, но это не совсем простая задача для самописных парсеров Вордстата и десктопных программ, и вот почему:

  1. Yandex Wordstat имеет хорошую защиту от парсинга, например бан IP-адресов с которых осуществляется парсинг и выбрасывание капчи в ответ на запросы от ботов. Чтобы эффективно собирать данные с Wordstat, нужен эффективный алгоритм подключения IP-адресов и другие хитрости
  2. Для парсинга большого количества данных с помощью десктопных программ понадобится много IP-адресов (прокси), которые Яндекс с легкостью банит при неоптимальном алгоритме подключения, а прокси – удовольствие недешевое
  3. Так же для парсинга понадобится автоматическое введение большого количества капчи (например подключение Antigate для этой задачи). Данный фактор, при неоптимальном алгоритме парсинга, может сделать сам парсинг нерентабельным, так как стоимость капчи будет чрезмерно высока
  4. Большинство десктопных программ не имеют защиты от потери данных при сборе. Так, например, собрав половину данных и потратив на это деньги, при сбое в парсере, вы рискуете не только не получить оставшиеся данные, но и потерять уже собранные

Парсинг Яндекс Вордстат в Rush Analytics

Учитывая все трудности которые могут возникнуть при парсинге Вордстата, мы сделали свой парсер Wordstat максимально быстрым, удобным и устойчивым к максимальному количеству проблем, связанных с парсингом:

  • Никаких прокси и капчи! Вам больше не нужно думать о бане ваших прокси или огромном количестве капчи, которую выдает Яндекс. Просто создайте проект, загрузите ключевые слова и ждите готовый файл с результатом
  • Высокая скорость парсинга. Наши алгоритмы используют оптимальную схему подключения IP-адресов и другие хитрости, чтобы сделать скорость парсинга феноменально высокой – вы и не заметите, как ваш проект будет выполнен!
  • Сохранность данных. Создавая проект в нашем парсере, вы можете быть уверены, что он будет успешно завершен и доступен для скачивания в любое время и из любой точки мира – все данные хранятся в облаке!
  • Поддержка всех регионов Яндекса. У многих пользователей есть потребность определять частотность запросов в Яндексе не только по региону «Москва» или «Россия», но и по другим, включая «Украину» и «Беларусь». В Rush Analytics вы сможете определить частотность запросов по любому региону, который поддерживает Яндекс на данный момент.
  • Сбор всех частотностей. С помощью нашего парсера вы сможете собрать все частотности: поисковый запрос, «поисковый запрос», «!поисковый!запрос».

  • Сбор левой колонки Wordstat. Помимо проверки частотности запросов, доступен сбор ключевых слов из левой колонки Wordstat с настройкой глубины парсинга от одной страницы до сбора всех имеющих в левой колонке страниц.
  • Сбор правой колонки Wordstat. Доступен сбор ключевых слов из правой колонки Wordstat.

Если вам нужен скоростной сбор частотностей Яндекс Wordstat – Rush Analytics лучшее решение, особенно если вам нужно собирать большие объемы данных. Для пользователей с потребностью сбора боле 100 000 запросов в месяц предусмотрены индивидуальные условия, просто напишите в нашу поддержку на

Если у вас крупный проект с семантическим ядром на несколько сотен или тысяч запросов, согласитесь, сидеть в Вордстате и подбирать их вручную покажется изощрённой пыткой. Хорошо, что существуют программы-помощники, способные взять основную часть рутинной работы на себя. Одна из таких программ называется Словоёб.


Что такое Словоёб

Словоёб (Slovoeb)
– бесплатная (и значительно урезанная по функционалу) версия программы , полюбившейся профессиональным оптимизаторам. Большинство функций КейКоллетора обычному пользователю вряд ли понадобится, поэтому можно обойтись Словоёбом для решения главной задачи – подбора ключевых слов.

Кстати, платный KeyCollector позволяет парсить слова и из Google AdWords – это особенно полезно, если ваш сайт ориентирован в первую очередь на страны, где основной трафик даёт именно Гугл. Бесплатный Slovoeb ограничен только Яндексом.

Для начала нужно скачать программу Словоёб. Сделать это можно по ссылке в блоге SEOM.info .

Программа не требует установки. Просто распакуйте архив в любое удобное место на компьютере и запустите Slovoeb.exe. В дальнейшем все ваши настройки будут храниться в выбранной папке. Перед началом работы не забудьте прочитать материал о – информация в статье актуальна и для этой программы.

Настройка Slovoeb

Вот что мы увидим после запуска:

Прежде чем приступить к работе, необходимо выполнить ряд настроек. Первое – указать аккаунты Яндекса для парсинга ключевых слов. Напоминаю, что работать в Вордстате можно только после авторизации. Поэтому советую , штук пять аккаунтов, специально предназначенных для Словоёба. Не используйте спецсимволы в
паролях этих аккаунтов!

Не советую использовать свой настоящий аккаунт, так как программа делает очень много запросов к Яндексу за единицу времени, за что можно получить санкции.

Нажмите на значок шестерёнки в верхней левой части окна программы и перейдите в настройки.

Выберите вкладку Yandex.Direct и введите данные аккаунтов в формате логин:пароль
. По желанию можно указать и прокси. Обязательно прочтите памятку в окне настроек!

Советую изучить и изменить другие настройки софта.

Автоматическое распознавание капчи

Следующим шагом является автоматизация распознавания капчи. Согласитесь, какой смысл в программе, если она каждый раз требует от вас вручную вводить капчу, выдаваемую Яндексом. Так как Словоёб будет много раз отправлять запросы к Яндексу за короткий промежуток времени, капчи неизбежны.

Я пользуюсь сервисом Antigate
. По желанию вы можете воспользоваться и другими программами. Slovoeb поддерживает следующие:

  • Antigate
  • CaptchaBot
  • RIPCaptcha
  • ruCaptcha
  • SocialLink

О многих из них я прежде никогда не слышал.

В случае с Антигейтом есть нюанс: они переехали на новый сайт (хотя старый всё ещё доступен). Они используют общую базу, поэтому на обоих сайтах единый аккаунт. На каком регистрироваться – решать вам. Первый более классический, спартанский, более привычный для веб-мастеров со стажем. Второй же более современный.

Учтите, что Antigate платный. Но недорогой. Мне хватает 1 доллара на 2 месяца работы (а то и больше).

Перейдите на страницу настроек антикапчи, щёлкнув по вкладке в левой части окна настроек.

В поле Antigate Key
введите ваш ключ антикапчи. Получить его можно в настройках профиля Antigate.

На этом базовая настройка Словоёба завершена.

Подбор ключевых слов с помощью Словоёб

Пора приступить непосредственно к подбору запросов. Для этого нужно создать новый проект. Все его данные сохранятся в файл. Таких файлов может быть неограниченное количество, так что вы легко сможете переключаться между проектами.

Нажмите на кнопку “Создать проект”:

В открывшемся окне выберите, куда сохранить файл и как его назвать. Я обычно называю файлы по имени сайта и сохраняю в папку проекта (там, где лежат все остальные данные по нему). Кто-то держит все файлы Словоёба в единой папке. Кому как удобнее.

Следующий шаг после создания проекта – настройка региона. Если ваш сайт ориентирован только на определённый регион (или регионы), вам нужна статистика поисковых запросов именно по нему, а не по всему миру. Нажмите на кнопку выбора региона и установите нужные вам галочки.

Здесь всё так же, как в интерфейсе Вордстата:

Настало время подбора ключевых слов!

Для начала подбора запросов кликните по кнопке “Пакетный сбор запросов из левой колонки Yandex.Wordstat
“, как показано на скриншоте.

В открывшемся окне введите ключевые слова, на основе которых вы хотите подобрать запросы. Всё точно так же, как в интерфейсе Вордстата. Главное отличие – в программе вы можете ввести сразу несколько слов, и программа будет работать с ними по очереди, а в Вордстате нужно работать с каждым словом по очереди, вручную, что значительно увеличивает время работы.

Нажмите на кнопку “Начать сбор
“. Ура, теперь можно пойти сделать кофе или переключиться на другие задачи. Словоёбу понадобится время, чтобы собрать запросы.

Стоп-слова

После того как программа отпарсила ключевые слова, необходимо отфильтровать их, отбросив не интересующие нас сочетания и формулировки. Это можно сделать с помощью стоп-слов. Нажмите на большую кнопку “Стоп-слова
” с изображением щита. В открывшемся окне кликните по кнопке “Добавить списком
“. В ещё одном открывшемся окне перечислите стоп-слова (каждое с новой строчки), которых не должно быть в вашем поисковом запросе. Например, нас не интересуют запросы со словами “скачать”, “торрент”, “новая версия”, “последняя версия” и т. д., так как мы распространяем не саму программу, а только её описание.

После введения стоп-слов нажмите на кнопку “Отметить фразы в таблице
” в левом нижнем углу окна стоп-слов.

Работа с частотностью в Словоёб

Остался один нюанс: частотность запросов, отображаемая в колонке, – это базовая частотность, то есть фраза со всеми словоформами. Чтобы определить частотности с помощью операторов, кликните по кнопке с изображением лупы и выберите пункт “Собрать частотности вида
” ”
“.

Самое первое, что потребуется выяснить: что такое парсить. Возможно, Вы знаете это определение, а даже если и нет, понять будет легко. Парсить (Parsing)
– значит собирать информацию из какого-либо источника с последующей обработкой данных. Если говорить о частных случаях, парсинг в seo (по-другому парсинг поисковой выдачи) – это сбор и анализ статистики запросов пользователей.

Поисковые системы тоже используют парсинг. Так, поисковые роботы парсят, анализируя веб-страницы и занося информацию о них в базу данных поисковиков.

Яндекс.Вордстат – сервис очень полезный в seo. Но работать с ним возможно только при наличии аккаунта Яндекс. Он позволяет подбирать ключевые слова на основе запросов пользователей, чтобы далее составить из них семантическое ядро.

Первым делом, необходимо определить тематику. Что Вы продаете? Какие услуги Вы предоставляете? Определив свою тематику и что будете запрашивать, можно начинать пользоваться Вордстат.

В строку поиска вводите свой запрос. И расширяете его с помощью выданных результатов.

Результаты формируются в две колонки. Цифра рядом с запросом – прогнозируемое количество показов в месяц, которое можно получить, выбрав понравившийся запрос ключевой фразой. Прогноз идет за последние 30 дней до даты обновления статистики.

Можно настроить, чтобы выдача показывалась по регионам. Если Вы предоставляете услуги только в Москве, выберите вкладку «Все регионы» (она находится чуть ниже поисковой строки) и настройте под себя.

В левой колонке все фразы со словами Вашего запроса, и слова в ней отсортированы по убыванию частоты показов. Вам важно сразу выделить те варианты расширенных ключей, которые будут являться для вашего проекта целевыми. Целевые — это те запросы, по которым пользователь, вводящий запрос в поисковую систему, может найти нужное ему на Вашем сайте. Целевые фразы будут более низкочастотными, и пользователи, пришедшие по ним с выдачи, смогут найти то, что хотели, а значит не покинут Ваш сайт сразу. Вам важны эти посетители, ведь именно они могут совершить целевое действие – купить товар или заказать услугу.

Проверьте выбранные фразы – исключите те, у которых частотность близка к нулю. Для этого используйте оператор “ “ (Кавычки).

После чего переходите к правой колонке.

В правой колонке показываются запросы, похожие на Ваши. Собрав нужное, не забудьте проверить фразы оператором “ “ (Кавычки).

Набрав достаточное количество ключевых фраз, Вы приступаете к следующему этапу: делите фразы по частотности. На этом Ваша работа с Вордстатом завершена.

По некоторым ключевым словам Вордстат выдает неправильную информацию. Как же ее проверить? Перейдите на вкладку «История запросов» и обратите внимание на статистику.

Показания статистики представлены в 2-х графиках: абсолютное и относительное.

Абсолютный показатель
– это фактическое значение показов в разные периоды времени. А относительный показатель – это отношение показов по интересующему запросу к общему числу показов в сети. Он демонстрирует популярность запроса среди всех других.

Если график относительного значения выше абсолютного, то, может быть, идет автоматическая накрутка запроса, или интерес к запросу выше нормы. Возможно, это связано с сезоном. Так спрос на лыжи выше зимой.

Процесс парсинга можно автоматизировать. В этом случае возможно использование не только платных и бесплатных программ, но и расширений для браузера.

1. Расширение для браузера Yandex Wordstat Assistant.
Устанавливаете его в браузер, и при работе с Яндекс.Вордстат слева появится панель, в которую вы сможете собрать понравившиеся ключевые слова.

2. Key Collector
– программа платная, но высокофункциональная.

  • В настройках есть вкладка «Yandex.Wordstat». Перейдя на нее, Вы сможете установить глубину парсинга. Так можно собрать большее число ключей. Но рекомендуется ставить 0, чтобы не увеличивать время. А ключи можно расширить и другим способом, а времени на их собирание уйдет меньше. Максимальное количество страниц для парсинга в Yandex.Wordstat равно 40. На каждой странице при этом находится до 50 фраз. Таким образом, максимальное количество результатов по одной фразе в Вордстат – 2000. И если Вы хотите собрать больше данных, Вам нужно расширить входной список слов, добавив уточняющие слова. Например, не просто «капуста», а «цветная капуста», «производство капусты» и т.д.;

Скачать архив с парсером
Данный парсер собирает ключевые слова и частотность в эксель файл из сервиса яндекс wordstat.
Если в Ваших частых задачах присутсвует сбор статистики по ключевым словам из сервиса yandex водстат, то одним из способов оптимизации рабочего процесса — является делегирование парсеру задачу парсинга ключевых слов.
Данный парсер не является оригинальным в функциональности, но оригинален в простоте настроек и получения данных по ключевым словам.


Функциональность данного парсера позволяет собрать кллючевые слова из сервиса wordstat.yandex.ru , статистику запрашиваемости собранных ключей, точную частоту ключей, а так же разгруппировать на кластеры собранные ключи.

Настройки парсера:

1. Логин от yandex.ru — в данное поле необходимо ввести адрес Вашего почтового ящика от яндекс почты

2. Пароль от yandex.ru — в данное поле необходимо ввести пароль от Вашей почты на яндексе

3. Файл с ключевыми словами — в данное поле указывается файл со списком ключевых слов (файл должен быть сохранён в формате utf-8, каждый ключ с новой строки), если Вы планируете активировать кластеризацию запросов после сбора, то в данном файле должна находится только 1 базовая ключевая фраза (все слова только в нижнем регистре (маленькими буквами))

4. Файл с минус-словами — в данное поле указывается файл со списком минус-слов (файл должен быть сохранён в формате utf-8, каждое минус-слово с новой строки)

5. Глубина взятия — до какой глубины парсить

6. Исследовать результаты — данная опция активирует этап кластеризации запросов, после того, как будут собраны ключи по базовой фразе (активируя данную опцию Вы обязательно должны указать файл для сохранения исследования)

7. Проверять на точную частоту — данная опция активрует сбор точной частотки по собранным ключам

8. Глубокое сканирование — данная опция активирует глубокое сканирование

9. Ключ для капч — указывать необязательно

10. Файл для сохранения ключей — эксель файл, в который будут сохраняться ключевые слова из сервиса wordstat.yandex.ru

11. Файл для сохранения исследования — эксель файл, в который будут сохраненны сгруппированые кластеры после кластеризации

Если есть вопросы или пожелания — пишите на почту [email protected]
skype — vipvodu
Скачать архив с парсером

Пример файла с кластерами по ключу — база клиентов.

Советы:
1. Тщательно проверяйте настройки перед запуском.
2. Если программа, после нажатия на кнопку — запустить — выключается — то скорее всего, что-то не так с настройками, либо есть повисшие процессы после предыдущего прерванного парсинга, повисшие процессы надо либо убить в диспетчере задач, либо перезагрузить компьютер.
3. Не прерывайте парсинг, дожидайтесь надписи — Все данные сохранены

Парсер ключевых слов — это настройка Datacol, которая автоматически собирает запросы из статистики сервиса Wordstat
по заданным пользователем ключевым словам.
Таким образом, вам необходимо всего лишь задать базовые ключевые слова, после чего Datacol самостоятельно соберет информацию по производным запросам. Наряду с запросами сохраняется частота показов каждого запроса в месяц. При парсинге Datacol проходит по всем страницам выдачи Wordstat.

  • С помощью парсера Wordstat
    Вы сможете собрать запросы и частоту показа из статистики;
  • Вам нужно указать только список ключевых слов, данные по которым Вам необходимо собрать;
  • Сохраняйте собранную информацию в любом удобном формате (Excel, TXT, WordPress, MySQL
    и т. д.).

Парсинг Wordstat
подразумевает обработку Javascript, а также необходимость авторизации для сбора данных. Такую возможность мы получаем благодаря плагину . При запуске кампании Datacol
откроет один или более экземпляров браузера Chrome
для загрузки через них вебстраниц. Количество работающих экземпляров Chrome
равно количеству потоков кампании. Обратите внимание, что инициализация экземпляров браузеров может занять некоторое время.

Кем и для чего используется парсер ключевых слов яндекса

Парсер ключевых слов чаще всего используется специалистами по поисковому продвижению сайтов. В частности, это касается реализации задачи составления семантического ядра сайта. Оговоримся, что ниже речь пойдет о продвижении сайтов в рунете. В данном контексте более актуален парсер ключевых слов яндекс директа.

Парсер поисковых запросов директа

Для начала опишем стандартную схему работы парсера директа.

1.
Пользователь задает поисковые запросы, производные которых необходимо собрать.
2.
Парсер авторизуется на яндексе и начинает парсить яндекс вордстат поочередно для каждого запроса.
3.
Для каждого запроса получаются производные ключевые слова не только с первой страницы выдачи директа, но и со всех последующих.

В результате на выходе мы имеем достаточно большое количество вариантов ключевых слов, которые в дальнейшем используются для формирования семантического ядра сайта.

Парсер ключевиков и количества показов — “скользкий момент”

Отметим, что помимо ключевых слов мы получаем так называемое “прогнозируемое количество показов” — показатель к которому стоит относиться очень осторожно. Для начала разберемся, что об этом значении пишет сам Яндекс:

В результатах выводится статистика запросов поисковой системы Яндекс, содержащих заданное слово или словосочетание, и других запросов, которые осуществляли искавшие его люди (справа).
Цифры рядом с каждым запросом в результатах выдачи вордстат дают предварительный прогноз числа показов в месяц, которое вы будете иметь, выбрав данный запрос в качестве ключевого слова.

Ошибкой многих оптимизаторов является то, что они читают только первую часть описания, и при этом — читают не совсем внимательно. Идем дальше:

Цифра рядом со словом «телевизор» обозначает число показов по абсолютно всем запросам, включающим слово «телевизор»: «купить телевизор» , «плазменный телевизор», «купить плазменный телевизор», «купить новый плазменный телевизор» и т.п.

Вы уже наверное догадались, на что мы намекаем? Итак, вы должны понять главное — при парсинге производных запросов по Wordstat не стоит обращать внимание на показатель их частотности, поскольку данное значение суммируется из частотностей всех производных запросов.

Но как в таком случае определить какие ключевики более “жирные” а какие менее? Сразу развенчаем ошибочное мнение, что производные ключевики всегда имеют меньше реальных показов, что основные. Это откровенная чушь! Найти реальные количества показов ключевиков (с вычетом количества показов производных) нам позволит операторы кавычки. Таким образом, для поиска запросов и определения самых “жирных” необходимо применять следующую схему:

1.
Запустить парсер ключей для поиска производных.
2.
Взять все производные запросы и отпарсить количество показов каждого, задавая запрос в кавычках.

Мы согласны, что это несколько более длинный и сложный путь. Однако представьте ситуацию. У вас есть около 500 запросов, по которым вы хотите продвинуть основной сайт. 30 из них являются (по вашему первоначальному мнению, то есть по изначально спарсенной статистике Wordstat) наиболее высокочастотными. Далее вы тратите 3 месяца времени и несколько тысяч убитых енотов (да ребята — качественное продвижение это дорогостоящее и длительное мероприятие) и в итоге оказывается, что поискового трафика в несколько раз меньше чем ожидалось. Вы сильно расстраиваетесь, ищите профессионального специалиста по продвижению и он вам открывает глаза на то, что вы продвигали совсем не те запросы, которые приводят трафик (в частности, он показывает вам реальную статистику по запросам в кавычках).

Тестирование парсера запросов

На нашем сайте вы можете бесплатно скачать парсер ключевых слов яндекса и протестировать его. Мы также можем обсудить настройку парсера кеев, которая будет проверять значения собранных запросов в кавычках.

Тестирование парсера Wordstat

Чтобы протестировать работу парсера Wordstat
:

Шаг 1.
Установите . Демо-версия программы имеет все возможности платной, но сохраняет только первые 25 результатов
парсинга.

Шаг 2.
В дереве кампаний присутствует кампания seo-parsers/wordstat-keywords-parser.par
. Выберите ее и нажмите кнопку Запуск (Play)
. Перед запуском можно отредактировать Входные данные
, чтобы изменить набор базовых запросов
, по которым будет собираться статистика.

кликните на изображении для увеличения

После запуска кампании открывается окно браузера, в которое необходимо ввести авторизационные данные для доступа к статистике Wordstat.

Как пользоваться Wordstat — как работать с операторами Яндекс Вордстат и статистикой поисковых запросов


В этой статье мы расскажем:

  • как работать со статистикой поисковых запросов Яндекса с самых азов;
  • рассмотрим на примерах основные и дополнительные операторы;
  • научимся определять сезонность спроса;
  • дадим полезные советы по использованию софта, облегчающего работу.


Яндекс Вордстат – это бесплатный сервис компании Yandex, призванный помочь оптимизаторам и владельцам сайтов узнать, как люди ищут товары или услуги и собрать ключевые слова для продвижения сайтов.


Помимо этого, сервис позволит:


  • узнать частотность;

  • определить сезонность по каждому продвигаемому запросу;

  • определить спрос по конкретным регионам;

  • определить долю популярности фраз по устройствам (смартфон, десктоп, планшет).


Вы сможете собрать полное семантическое ядро и разработать структуру проекта. Сделать это проще с помощью специализированного софта, но вернемся к этому позже.

Начало работы


Для доступа к статистике сначала необходимо зарегистрироваться в Яндексе.


  • заведите почтовый ящик на Яндекс и авторизуйтесь;

  • откройте инструмент по ссылке https://wordstat.yandex.ru/.


Готово, можно приступать к работе.

Поиск по словам


Осуществляется поиск запросов, в которых присутствует введенная фраза (в левой колонке), а также всех похожих (в правой колонке). В колонке «Показов в месяц» выводится базовая частотность за последний месяц (суммарная частотность фраз из левой колонки).

Частота по регионам


Отражает частотность запроса в отдельности по регионам, во второй и третьей колонках отражена популярность в числовом и процентном соотношении. Можно вывести списком и на карте для наглядности.

История запросов — сезонность запроса


С помощью этого инструмента можно проанализировать сезонность спроса по товару или услуге. Показывает популярность поискового запроса по месяцам или неделям. По скриншоту ниже видим, что спрос на услугу по «созданию сайтов» имеет значительный рост популярности в период с апреля по июнь.

Регион отображаемой статистики


Выбираем регион, статистика по которому нас интересует. При продвижении, скажем, по Москве – выбираем «Москва и область».


Инструмент позволяет сделать выгрузку по всей России, а также СНГ, Европе, Азии, Африке, Северной и Южной Америке, Австралии и Океании.

Статистика по устройствам


Вкладки «десктоп, мобильные, только телефон, только планшеты» содержат информацию с каких конкретно устройств наиболее часто вводят поисковый запрос.

Операторы Wordstat


Операторы необходимы для уточнения формулировки запроса и точного определения частотности ключевых фраз. Если ввести интересующие слова без применения специальных символов, то получим их базовую частотность, то есть – суммарную частоту поисковых запросов пользователей Яндекс с применением данной фразы.

Пример:


Частотность всех ключей со словом «велосипед» – купить велосипед, детский велосипед, трехколесный велосипед и т.д.


Ниже предлагаем рассмотреть основные операторы.

“Кавычки”


Фразы, зафиксированные оператором “кавычки”, например «создание сайтов», отобразят частотность только данного словосочетания без хвостов, во всех возможных формах и в любом порядке.

Сбор статистики запросов определенной длины


С помощью оператора “кавычки” можно вывести на экран статистику запросов, состоящих из заданного количества слов – из 2, 3, 4 и так далее.


Например, чтобы получить список ключей из 2 слов по фразе «велосипед», введите в Wordstat следующую конструкцию – “велосипед велосипед”.


В итоге получаем ключевые слова и базовую частотность по всем запросам из двух слов с заданной фразой. Данная конструкция применима для произвольного количества слов в запросе и любых тематик.

!Восклицательный !знак


Если перед введенными фразами применить оператор «восклицательный знак», то получите частотность по всем фразам с их присутствием именно в том виде и с тем окончанием,  как вы ввели.

“!Кавычки !с !восклицательным !знаком”


Если совместить использование операторов Яндекс Вордстат “кавычки” и !восклицательный !знак, сервис покажет частотность четко по заданной фразе слово в слово, без учета порядка.

Дополнительные операторы


Операторы, предназначенные для более сложной сортировки данных при работе со статистикой запросов Wordstat.

[Квадратные скобки]


С помощью данной конструкции фиксируется порядок слов в запросе.

Пример – [стол для обеда]

Абсолютно точная частота запроса с учетом порядка, состава слов и окончаний.


Для получения точной частотности, используйте конструкцию вида – «[!стол !для !обеда]».

(Или|Или)


Вводится с применением вертикального разделителя “|” между словами и заключением их в круглые скобки. Чаще всего применяется, когда необходимо сравнить статистику по двум одинаковым по смыслу запросам, но с разным написанием.

Пример


(Iphone|айфон), (сайт|вебсайт), (раскрутка|продвижение).


Таким образом, Вордстат показывает все ключи и число их показов сразу по обеим фразам – “iphone” и “айфон”.

Оператор “+”


Если перед любым словом указать символ «плюс», то оно становится обязательным для программы. Также его использование очень полезно для выделения предлогов, так как сам Вордстат их не учитывает.

Пример #1. Вводим поисковый запрос с предлогом


Как мы видим, инструмент проигнорировал наличие предлога и мы не получили статистику в том виде, в каком хотели.

Пример #2. Указываем перед предлогом «+»


Теперь видим, что в левой колонке все запросы содержат нужное нам слово.


С помощью данной конструкции удобно готовить контент-план для публикаций в блоге. Для этого используйте вместе с основным запросом вопросительные плюс-фразы: «как, зачем, почему, своими руками» и так далее.

Оператор “-”


Добавление символа “минус” перед словом поможет исключить все ключи с его участием. Можно добавлять неограниченное количество минус-фраз.


Например, вы хотите создать сайт веб-студии и ваш основной запрос «Создание сайтов». Вам необходимо оценить количество коммерческих запросов и их частотность для понимания целесообразности продвижения в данной тематике.


Для этого соберите список всех минус-фраз, либо найдите в интернете (существует множество готовых списков почти под любую тематику) и введите их все по данной конструкции: создание сайтов -бесплатно -самостоятельно -обучение -курсы и так далее.

Группировка запросов с использованием различных операторов


Пример конструкции:


В данному случае, мы сгруппировали фразы «seo, сео, поисковое, поисковая система, поисковик, яндекс, google» с фразами «продвижение, раскрутка, оптимизация» и убрали ключевые слова с вхождениями «бесплатно, самостоятельно, самому, инструкция».

Как автоматизировать работу со статистикой Вордстат?


Сбор семантического ядра через Вордстат для крупного ресурса или интернет-магазина – очень трудоемкий процесс. Его можно автоматизировать с помощью дополнительного программного обеспечения, сильно сэкономив свое время. Существует большое количество различного ПО для подбора, расширения семантики, анализа видимости конкурентов. Ниже перечислим самые основные и популярные.


1. Yandex Wordstat Helper – бесплатное расширение для браузера Chrome, с помощью которого вы сможете добавлять выбранные запросы в отдельное поле (нажатием на «+»), а потом копировать вместе с частотами одним нажатием кнопки.


Скачать его можно здесь


2. KeyCollector — инструмент для автоматического парсинга статистики с Wordstat. Использование КейКоллектор исключает необходимость ручного сбора и копирования. Для формирования полного семантического ядра вам понадобится только список базовых запросов:


  • вносите их в инструмент;

  • выбираете регион сбора статистики;

  • запускаете процесс.

  • Программе понадобится от нескольких часов до нескольких дней, в зависимости от количества ключевых слов в вашей тематике. После окончания сбора ядра необходимо произвести чистку от ненужных фраз и кластеризацию. Но это уже тема для отдельной статьи.


    2. Just Magic – содержит модуль парсинга статистики из левой колонки Wordstat с функцией поддержки всех операторов.


    3. Букварикс – готовая онлайн база ключевых слов. Для моментальной выгрузки достаточно ввести базовые запросы и инструмент предоставит полный список необходимых вам фраз.


    4. SpyWords – позволяет выгрузить видимость сайта конкурента в Яндекс и Google, определив по каким запросам его находят в поиске.

    Итог


    Надеемся, наша инструкция по Яндекс Вордстат помогла вам разобраться с сервисом. В этой статье мы рассказали о функциях и возможностях программы, а также упомянули инструменты, помогающие упростить и автоматизировать работу.


    Еще мы помогаем с продвижением сайтов. Делаем полный анализ тематики вашей деятельности, составляем стратегию, оптимизируем ресурс для выхода в ТОП поисковых систем. Заполните форму ниже, мы вам перезвоним и проконсультируем.

Как пользоваться Яндекс.Вордстат: инструкция с примерами – статьи про интернет-маркетинг

Время прочтения: 15 минут


Тэги: SEO, Яндекс, интернет-маркетинг


О чем статья?

  • Зачем маркетологам и бизнесу работать с запросами
  • Простота и нюансы интерфейса Яндекс.Вордстат
  • Работа с операторами
  • Как получить данные о запросах по регионам
  • Как попадать в тренды


Кому полезна эта статья?

  • Digital-маркетологам, не являющимся оптимизаторами
  • Руководителям отделов маркетинга
  • Владельцам и директорам бизнеса


Wordstat предназначен для определения частотности запросов и подбора ключевых слов. Казалось бы, сервис чисто для семантиков, зачем он кому-то еще? Тем не менее, аналитики и маркетологи работают в сервисе, чтобы оценить степень интереса пользователей, с каких устройств они чаще заходят, сезонные тренды рыночной ниши, перспективу расширения продаж в регионы.


Руководители пользуются Вордстатом, когда хотят оценить работу своего маркетингового отдела или стороннего агентства, особенно если тот активно расходует бюджет на продвижение или контекстную рекламу. Умение перепроверить частотность запросов поможет, например, убедиться в том, что наемный специалист по рекламе ориентирован на продажи, а не просто сливает бюджет в траффик по информационным запросам. Аналогично можно проверить, что ищут потенциальные клиенты вашего бизнеса, и запланировать создание новых страниц на сайте.


Главное, что работать с Wordstat относительно проста (по сравнению с другими инструментами автоматизации SEO) и его базовое освоение не займет много времени.

Начало работы


Яндекс. Вордстат располагается по адресу https://wordstat.yandex.ru/. Для его использования нужен аккаунт в Яндексе (почта) и больше ничего. Вот так выглядит начальная страница.


Итак, у вас уже есть набор ключей, которые вы хотите проверить (а заодно с ними и вашего специалиста по контекстной рекламе или по продвижению). Или же запросов нет, но есть тема или поисковые подсказки, для которых вы хотите собрать ключи. Вводите все по очереди в поисковую строку. Учтите, что словосочетание длиннее 8 слов Вордстат не воспринимает.


В нашем примере берем ключевой запрос «контекстная реклама».

Что показывает левая колонка Яндекс.Вордстат


Здесь мы видим количество показов по данному запросу за последний месяц. Обратите внимание: верхний запрос в колонке содержит в себе все последующие (вложенные запросы). В примере запрос «контекстная реклама» искали 66 975 раз. При этом 10430 из них пользователи искали «контекстная реклама яндекс», а 4309 — «настройка контекстной рекламы». Вложенных запросом может быть несколько сотен или даже тысяч, поэтому внизу, как правило, есть постраничная навигация.


Учтите, что:

  • Это не гарантированные цифры показа на следующий месяц, а статистика запросов за прошлый!
  • Яндексом пользуется примерно 55% пользователей поисковых систем, а Вордстат использует данные только поиска Яндекса. Чтобы работать с ключевиками в Googlе, нужен аналогичный сервис Googlе Keyword Planner.
  • Сервис дает цифры только по тем запросам, которые ищут регулярно. Если какого-то запроса в прошедшем месяце не было, в левой колонке вы его не увидите.

Что показывает правая колонка Яндекс.Вордстат


Вернемся к рисунку с поиском и посмотрим на содержимое правой колонки.


Здесь алгоритм Вордстата собрал запросы, похожие на наш. Не вложенные, как в левой колонке, а похожие по смыслу. Это позволяет нам расширить количество ключей за счет словосочетаний, синонимичных по смыслу, но использующих другие слова.


Учтите, что: при оценке правой колонки, предложенной нейросетью, следует включать критическое мышление. Потому что чем сложнее по смыслу то, что вы ищете, тем труднее роботу правильно оценить, что, собственно, имеется в виду.


«Неглиже» — женская легкая ночная рубашка. Вордстат (как и многие люди) не очень представляет, что это такое, и предлагает в правой колонке более общие запросы. По сути «неглиже» действительно входит в понятие «женское нижнее белье». И тут уже задача маркетолога оценить, нужно вам продвигаться по более распространенному запросу «белье девушка нижний» или необходимо остаться в более узкой нише «неглиже».

Запросы для бизнеса


Слова «купить, заказать, цена, стоимость» и т.п., указывающие на желание что-то приобрести, делают запрос коммерческим. Запросы без этих слов считаются информационными: возможно, человек когда-нибудь и купит данную вещь, но пока он хочет только узнать о ней.


Как правило, для бизнеса важнее коммерческие запросы, так как они чаще конвертируются в продажи. Они часто оказываются вложенными у информационных.


Яркий пример: по информационному запросу 6 из первых 10 вложенных — коммерческие.


При этом нужно отсекать запросы со словами, которые делают ключ бесполезным для конверсии. Это слова типа «бесплатно», «своими руками», «сделать самому» и т.п.


Если те, кто ищет просто «стол на дачу», вполне могут его купить, то те, кто ищет его со словами «своими руками» и «сделать», явно не намерены ничего покупать. Запросы со словами «дешево», «недорого» тоже могут не давать конверсию, если вы не торгуете реально дешевыми столами.


Чтобы сразу избавиться от неподходящих запросов, используйте операторы Вордстата.

Работа с операторами в Яндекс.Вордстате


Операторы — это символы типа «+», «-» и им подобных знаков. Они задают условия для поиска.

  • «+» перед словом требует обязательно учитывать это слово при поиске. При поиске на русском языке многие предлоги, союзы, частицы игнорируются, а их отсутствие может стать критичным для смысла запроса.


Пример запроса «участок с домом».


Обратите внимание, что Вордстат сам предлагает варианты запросов как с предлогом «с», так и без него. При этом в запросах без предлога смысл — «на участке уже есть дом» — размывается: здесь и «участок под дом», и «участок под строительство дома».


Если мы используем знак «+» сразу в поиске, Вордстат покажет более целевые ключи.

  • «-» перед словом удаляет его из поиска. Очень полезный оператор, который позволяет отсеять те ключи, которые нам не нужны. Например, если мы продаем или покупаем сланцы (пляжную обувь), то нас не интересуют пользователи, которые ищут город Сланцы, расписание автобусов и погоду в нем или полезные ископаемые сланцы.


Чтобы не отсеивать эти запросы вручную, просто используем оператор «-» сразу в поиске. Ненужные ключи вводите через пробел без запятой.


Если по-прежнему остались «мусорные» запросы, нужно добавить их в строку поиска. На сужение аудитории также хорошо работают специфические для бизнеса термины. Сравните разницу в запросе на просто «носки» и специализированные «носки для батута».

  • «!» требует искать запрос дословно. Это важно, например, если вы хотите привести на сайт оптовиков, которые буду закупать «чехлы для смартфонов», а не обычных людей, которым нужен один-единственный «чехол для смартфона».


По умолчанию Вордстат покажет все словоформы.


А с оператором «!» можно увидеть, сколько на самом деле пользователей горит желанием покупать чехлы для смартфонов в количестве больше 1.

  • «» — если взять запрос в кавычки, вы получите данные только по нему, без дополнительных слов (хвостов). По умолчанию Вордстат прибавляет к вашему запросу уточняющие слова.


А если взять запрос в кавычки, в левой колонке вы получите данные только по тем словам, которые задали. Раскладка клавиатуры при вводе кавычек неважна.


Теперь вы видите точку роста — сколько возможных посетителей вы можете привлечь, если ваш сайт выйдет в топ по этому запросу. Кстати, чем более похожи цифры без кавычек и с ними — тем качественнее сформулирована ключевая фраза.

  • [] – если взять запрос в квадратные скобки, то его порядок слов при поиске не будет меняться. Это обычно важно для тематик грузоперевозок, продажи билетов на транспорт, логистики, туризма — тех, где важно расположение конечных пунктов.


Здесь, как вы видите, показываются рейсы и туда, и обратно.


А при фиксированном порядке слов потенциальных пользователей оказывается примерно в 2 раза меньше. Это важно для получения целевого трафика по ключевой фразе, чтобы не платить деньги за приход на страницу и тех, кто летит в заданном направлении, и тех, кому нужно наоборот.

Работа с фильтрами: по регионам


Вернемся к поисковой строке работы с Вордстат. До сих пор мы использовали подбор запросов с опцией «по словам», а рядом есть еще «по регионам».


Этот фильтр полезен, если вы продаете свои товары/услуги только в определенном регионе. Или, наоборот, хотите оценить перспективу распространения бренда по стране.


Данные по региональной популярности в процентах нужно читать следующим образом. 100% — норма, то есть регион ничем не выделяется в показах по данному запросу. Региональная популярность выше 100% показывает, что интерес к запросу повышен, есть смысл выходить на рынок данного региона. Цифра меньше 100% означает пониженный интерес в данном регионе. Планируя развитие бизнеса, необходимо также учитывать количество населения региона как общее число потенциальных покупателей.


Вкладка «Все» отражает данные по регионам (странам, областям, краям) и городам, «Регионы» — без городов, «Города» — только по городам (включает городские округа и городские образования).

Работа с фильтрами: по типам устройств


Вернемся опять в начало и оценим количество обращений пользователей с различных устройств.


На примере видно, что есть некоторое различие между тем, что ищут люди с настольных компьютеров (вероятно, офисные работники) и те, кто предпочитает входить в интернет с мобильного устройства. Этим стоит воспользоваться при настройке показов рекламных объявлений.


Также данные по мобильным устройствам могут существенно отличаться от реальных. В России распространены смартфоны и планшеты на Android, где имеется встроенная поисковая строка Google, а Вордстат с ним не работает.

Как находить тренды?


Мы уже упомянули, что Wordstat оценивать частотность запросов за последний месяц, причем не в режиме реального времени, а с задержкой примерно недели на две. Но, как правило, бизнес сам знает нужные сезонные тренды. Например, понятно, что к летнему сезону растут продажи купальников и товаров для дачи, а к зимнему — теплых курток. В Яндекс.Вордстате есть вкладка «история запросов», которая позволяет как оценить вашу гипотезу, так и проанализировать тренды прошлых лет.


Здесь вы можете увидеть ожидаемый рост продаж пляжной обуви в начале лета. Данные по месяцам или по неделям позволят более точно прогнозировать рекламную кампанию.


Анализ Вордстата может показать рост новых запросов в связи с выходом на рынок новых товаров и создание моды на них.


Например, попыт — резиновую версию полиэтиленовой пленки «с пупырышками», которыми многие любят хлопать — год назад не искал никто просто потому, что ее не было на рынке. А в последние 2 месяца запросы пошли вверх и составляют уже достойное количество.


Однако следует учитывать, что мода непостоянна, и долгосрочным такой тренд, скорее всего, не будет. Это подтверждает история запросов на покупку сквишей — резиновых игрушек для сдавливания, предшественников попыта в категории релакс-игрушек.


На таком спросе можно подняться, но, очевидно, ненадолго.

Расширения для работы с Вордстатом


Собирать большие объемы данных в ручном режиме и тем более работать с ними – нерациональный подход. Прежде чем осваивать более сложные инструменты, можно попробовать браузерные расширения, облегчающие обработку массивов слов.

Yandex Wordstat Helper


Нарядный виджет доступен по адресу arcticlab.ru/yandex-wordstat-helper/. Предназначен для Mozilla Firefox, Google Chrome и Яндекс.Браузер. Он позволяет все проверяемые ключи добавлять в перечень и сразу по этому списку видеть некоторые данные. Правда, не полные. Расширение покажет количество внесенных ключей и базовую частотность, а также позволит отсортировать запросы по алфавиту, частотности или времени добавления в список

Yandex Wordstat Assistant


Дополнение для браузеров Google Chrome, Яндекс.Браузер, Opera, Mozilla Firefox можно бесплатно взять на страничке разработчика semantica.in/tools/yandex-wordstat-assistant. Оно выполняет все те же функции, что и вышеописанное дополнение, только сортировку, по мнению специалистов, делать чуть менее удобно.


Конечно, эти дополнения не позволяют полностью автоматизировать процесс, и подходят только при небольших объемах работы или для проверочных действий.

Выводы

  • Сервис дает лишь прогноз на основании статистики за месяц и предлагает довольно много нецелевых запросов. Эти недостатки можно компенсировать, сравнивая данные с разных вкладок и используя операторы.
  • Яндекс.Wordstat оперирует данными Яндекса, соответственно, это лучший выбор для продвижения и рекламы в Яндексе.
  • Вордстат особенно полезен тем, кто работает с коммерческими запросами и собирает ключи для контекстной рекламы.
  • Сервис дает владельцу бизнеса возможность проверить работу своих маркетологов, оценить популярность запросов, ширину ниши, региональные перспективы. Анализируя данные Вордстата можно подкрепить гипотезы о трендах и найти точки роста для бизнеса.

Как быстро уточнить частотность запросов в Wordstat. Как проверить частоту запросов

В нашей статье о видах поисковых запросов, было рассказано о том, что запросы делятся на ВЧ, СЧ, НЧ и МНЧ. Подробнее почитать обо всех видах Вы можете в статье – Виды поисковых запросов . Сегодня хотелось бы поговорить о том, как проверить частотность запроса и узнать к какому именно виду он относится. Мы рассмотрим наиболее удобный способ проверки – с помощью сервиса Яндекс Wordstat или подбор слов Яндекса. Данный сервис предназначен для показа статистики по поисковым запросам в этой системе.

Частотность запросов в ПС Яндекс

Поисковая система Яндекс, помимо своих основных функций для пользователей – поиск сайтов для ответа на поставленные вопросы, имеет отличный сервис для владельцев сайтов, который позволяет узнать, насколько популярен тот или иной запрос, то есть определить его частотность.

Частотность поисковых запросов

– это число раз вводимых пользователем определенного запроса в поисковой системе за промежуток времени (в Яндексе за 1 месяц). То есть при проверке запроса «Квартиры в Москве» на его частотность, мы узнаем, сколько раз в месяц пользователи вбивали это словосочетание в поисковую строку.

Определяем частотность запроса

Как было сказано выше мы имеем 4 вида поисковых запросов: высокочастотные, среднечастотные, низкочастотные, микронизкочастотные. Теперь пришло время научиться определять это. Нам понадобится сервис Вордстат — wordstat.yandex.ru
. Так же стоит отметить, что для использования этого сервиса Вам необходима регистрация в самом Яндексе (достаточно завести почтовый ящик). Сервис полностью бесплатный, что не может не радовать.

Как видите, страница имеет лишь адресную строку для ввода запроса и несколько дополнительных функций. Нас же в настоящий момент интересует определение частотности запроса. Для этого вбиваем в поисковую строку необходимый запрос и получаем результат. Для примера возьмем запрос «Новости политики»
.

Как видите, данный поисковый запрос имеет 23 473 показа в месяц
. Соответственно запрос является высокочастотным
. Так же в левом столбце Вы можете посмотреть на запросы в Яндексе, которые содержали данное словосочетание, а в правом столбце показаны похожие запросы.

Итак, давайте еще раз рассмотрим, какие запросы у нас будут высокочастотными, а какие относится к другим видам.

Высокочастотный запрос – более 5 000 показов в месяц

Среднечастотный запрос – от 500 до 5 000 показов в месяц

Низкочастотный запрос – от 50 до 500 показов в месяц

Микронизкочастотный запрос – Менее 50 показов в месяц.

Важно!

Данные цифры не являются точными, и частотность поискового запроса для определенного вида может меняться в зависимости от тематики. Например, для некоторых тематик высокочастотными будут являться запросы, имеющие более 10 000 показов в месяц.

Давайте попробуем ввести в Вордстат микронизкочастотный запрос. Например «исследования коронарного шунтирования»

Как видите, в Яндексе такой запрос вводится всего 35 раз в месяц, и его стоит отнести к МНЧ. Продвижение по такому запросу самое простое, но при этом количество посетителей, пришедших на сайт, будет очень низким.

Важно!

Данные, которые Вы видите в графе «показов в месяц», не являются точными. Яндекс предоставляет Вам информацию обо всех запросах, которые содержали данное словосочетание.

Например, у запроса «Зубной врач Москва»
— 500 показов в месяц. Но в эти показы будут так, же входить запросы «Зубной врач на дому в Москве», «Платный зубной врач Москва»
и другие. Для определения количества точных вхождений необходимо использовать дополнительные возможности Вордстата. Как именно это сделать рассмотрим ниже.

Определение числа точных и морфологических вхождений запроса

Показанные выше результаты, как уже было сказано, не дают точной картины по определенному запросу. Чтобы определить точное вхождение слов в Вордстате нам понадобится использовать некоторые дополнительные функции.

Давайте возьмем запрос «Купить мопед»
.

Как видите, у данного запроса 105 048 показов в месяц. Однако эти показы будут включать в себя фразы «Купить мопед б/у», «Купить мопеды Альфа» и другие.

Для того, чтобы определить точное вхождение поискового запроса нам необходимо поместить запрос в кавычки.

Как видите, у данного запроса стало всего 4 400 показов. Именно такое количество раз пользователи вводят этот запрос в Яндексе за месяц. При этом, 4 400 показов включают в себя морфологические изменения этого запроса. То есть, здесь же показаны результаты запросов «Купить мопеды», «Покупаю мопед», «Куплю мопедик»
и другие.

Чтобы получить точное число показов запроса в определенной форме, времени и падеже, необходимо перед каждым словом в этом запросе поставить восклицательный знак.

Типы поисковых запросов

В этой статье разбираем вопросы, связанные с частотностью запросов в 2 крупнейших поисковых системах Рунета: Яндеса и Гугла. Разберем какие сервисы существуют для определения частотности запросов, в чем отличие точных вхождений и размытых, как анализировать частотность точных вхождений и анализировать, какие запросы будут уместны в рамках нашего блога и они способны привлекать посетителей на наш сайт, а какие являются лишь только на первый взгляд, востребованными, но на самом деле от них лучше отказаться при написании статьи.

Частотность запросов в яндексе

Перед тем,как наполнять сайт или блог () контентом, необходимо определить, на какую целевую аудиторию будет направлена информация нашего сайта и, соответственно, проанализировать частотность запросов
, дабы найти наиболее востребованные и способные привлечь заинтересованных в данной информации читателей. Исходя из того, что ищут пользователи в сети, мы будем определять план развития сайта, составлять семантическое ядро и писать оптимизированные статьи под данные ключевые запросы. Для того, чтобы определить, с какой частотой ищут определенную информацию в поисковой системе Яндекс, воспользуемся услугами сервиса wordstat.yandex.ru (ссылка неактивна, чтобы перейти на сайт, скопируйте домен в адресную строку браузера). Изначально перед глазами получается следующая картина:

Первое, что необходимо сделать, так это определить географию поисковых запросов. К примеру, мой блог направлен на посетителей со всей страны, в то время, как нишевые только по конкретному региону или городу. Исходя из этого, сужаем географию запросов путем отделения ненужных регионов в контекстном меню сбоку. Выглядит это примерно так:

Что нужно сделать дальше? Определить, о чем вы хотите написать статью. К примеру, захотели вы написать статью о том, как взять кредит, и ищете нужный поисковый запрос, под который будет оптимизирована ваша статья. К примеру, решили вы сделать основным поисковым запросом фразу «как взять кредит», дабы привлекать посетителей на ваш сайт, которые будут искать именно информацию на данную тему. Если забить данную фразу в сервис поисковой статистики Яндекса, то вы увидим, что, казалось бы, информацию по данной теме ищет большое количество людей.

Но на самом деле, действительно ли это так? Можете не думать, скажу сразу, что нет! В действительности, данная статистика означает лишь то, что в поиске связанной с данной тематикой информации заинтересовано значительное число людей, но на самом деле, им может быть интересна совершенно другая тема, вроде той, «как взять кредит с плохой кредитной историей». И тем более, если вы пропишите мета-тег title и название статьи только под один (главный) поисковый запрос, то упустите всю оставшуюся часть потенциальной аудитории, ибо они в большей степени заинтересованы в конкретной информации, но не общей. Чем же хорош анализ вложенных фраз и графы «что еще искали пользователи»? В первую очередь тем, что используя данную информацию, мы можем:

  1. добавлять ключевые слова, которые сопутствуют данной исходной фразе. К примеру, в тексте, который оптимизируется под исходный запрос очень желательно также употребить выражения: «без справок», «без поручителей» и т.д. (из левой колонки сервиса) и, к примеру,»кредит под залог квартиры» из правой колонки. Зачем это нужно? В первую очередь для того, чтобы охватить как можно больше ключевых слов в статье и повысить доверие к статье со стороны поисковых систем (что статья действительно тематическая, так как включает слова смежных тематик)
  2. построить на их основе сильную систему внутренней перелинковки
  3. учесть более конкретное направление материала статьи, то есть не просто добавление ключевых слов, но и более детальная проработка текста

В принципе, это основные моменты, на которые стоит обратить внимание. Идем далее. Теперь нам нужно убедиться в целесообразности написания статьи именно на данную тему, то есть просчитать количество запросов в поисковой системе яндекс данного словосочетания без сопутствующих фраз. Сделать это можно, откинув все сопутствующие корневые фразы, путем закавычивания фразы. Если быть точным закавыченная фраза показывает не только прямое вхождение, но и разные склонения слова или словосочетания. Отсюда делаем вывод, что истинная частотность запроса определяется лишь при добавлении к искомой фразе кавычек и знака восклицания:

Естественно, не всегда полученные результаты отражают действительность, поскольку конкурентные коммерческие запросы бывают искусственно завышены, дабы сбить конкурента с верного направления, но мы не берем данные факторы в расчет.

Сервисы статистики от Google

Если вы решили сделать целенаправленный упор на продвижение сайта в поисковой системе Гугл, то сервис по определению частотности от Гугл вам будет нужен как нельзя кстати. Лично я пока не использую данный сервис в полную мере, ибо не делаю особого упора на продвижение сайта под Гугл, обходясь вышеописанным сервисом Яндекса, но думаю, что не было бы лишним воспользоваться информацией со второго ресурса. Вообще-то, у иностранного конкурента яндекса существуют аж 2 сервиса, но более информативным я считаю только один. А вот собственно и адреса данных сервисов:

  • Статистика от Google Adwords — https://adwords.google.com/select/KeywordToolExternal
  • Google тренды — http://www.google.ru/trends/

ссылки неактивны, просто скопируйте их в адресную строку браузера, чтобы перейти на выше указанные сайты. Ну с первым я думаю ничего сложного не будет, поскольку это сервис подбора ключевых слов в первую очередь для контекстных объявлений и его механизм похож на механизм действия первого сервиса Wordstat.Yandex. Плюс ко всему сервис выдаст конкурентность запроса по наличию контекстных объявлений, оценит сходные запросы и так далее. Второй сервис как я понял, оценивает динамику тренда в относительных величинах и особого смысла его использовать я сейчас не вижу (все-таки лучше использовать абсолютные показатели в данном случае).
Частотность запросов
в других сервисах (точнее в сервисах других поисковиков) в принципе считать не имеет смысла. Ну разве, что сервис статистики Rambler (адрес http://adstat.rambler.ru/wrds/) поможет вам оценить популярность поисковых запросов в данной поисковой системе.

Один из наиболее популярных модулей в Rush Analytics – парсер Яндекс Вордстат, и это не случайно. При сборе семантического ядра необходимо точно знать частотность собранных запросов, чтобы правильно расставить приоритеты по продвижению и избавится от «мусорных» и нулевых запросов. Часто стоит задача пробить несколько десятков тысяч запросов на частотность в Яндексе, но это не совсем простая задача для самописных парсеров Вордстата и десктопных программ, и вот почему:

  1. Yandex Wordstat имеет хорошую защиту от парсинга, например бан IP-адресов с которых осуществляется парсинг и выбрасывание капчи в ответ на запросы от ботов. Чтобы эффективно собирать данные с Wordstat, нужен эффективный алгоритм подключения IP-адресов и другие хитрости
  2. Для парсинга большого количества данных с помощью десктопных программ понадобится много IP-адресов (прокси), которые Яндекс с легкостью банит при неоптимальном алгоритме подключения, а прокси – удовольствие недешевое
  3. Так же для парсинга понадобится автоматическое введение большого количества капчи (например подключение Antigate для этой задачи). Данный фактор, при неоптимальном алгоритме парсинга, может сделать сам парсинг нерентабельным, так как стоимость капчи будет чрезмерно высока
  4. Большинство десктопных программ не имеют защиты от потери данных при сборе. Так, например, собрав половину данных и потратив на это деньги, при сбое в парсере, вы рискуете не только не получить оставшиеся данные, но и потерять уже собранные

Парсинг Яндекс Вордстат в Rush Analytics

Учитывая все трудности которые могут возникнуть при парсинге Вордстата, мы сделали свой парсер Wordstat максимально быстрым, удобным и устойчивым к максимальному количеству проблем, связанных с парсингом:

  • Никаких прокси и капчи! Вам больше не нужно думать о бане ваших прокси или огромном количестве капчи, которую выдает Яндекс. Просто создайте проект, загрузите ключевые слова и ждите готовый файл с результатом
  • Высокая скорость парсинга. Наши алгоритмы используют оптимальную схему подключения IP-адресов и другие хитрости, чтобы сделать скорость парсинга феноменально высокой – вы и не заметите, как ваш проект будет выполнен!
  • Сохранность данных. Создавая проект в нашем парсере, вы можете быть уверены, что он будет успешно завершен и доступен для скачивания в любое время и из любой точки мира – все данные хранятся в облаке!
  • Поддержка всех регионов Яндекса. У многих пользователей есть потребность определять частотность запросов в Яндексе не только по региону «Москва» или «Россия», но и по другим, включая «Украину» и «Беларусь». В Rush Analytics вы сможете определить частотность запросов по любому региону, который поддерживает Яндекс на данный момент.
  • Сбор всех частотностей. С помощью нашего парсера вы сможете собрать все частотности: поисковый запрос, «поисковый запрос», «!поисковый!запрос».

  • Сбор левой колонки Wordstat. Помимо проверки частотности запросов, доступен сбор ключевых слов из левой колонки Wordstat с настройкой глубины парсинга от одной страницы до сбора всех имеющих в левой колонке страниц.
  • Сбор правой колонки Wordstat. Доступен сбор ключевых слов из правой колонки Wordstat.

Если вам нужен скоростной сбор частотностей Яндекс Wordstat – Rush Analytics лучшее решение, особенно если вам нужно собирать большие объемы данных. Для пользователей с потребностью сбора боле 100 000 запросов в месяц предусмотрены индивидуальные условия, просто напишите в нашу поддержку на

Мы начинаем серию статей под названием «Как ориентироваться в мире SEO». Таким образом мы попытаемся ответить на частые вопросы наших клиентов и начать говорить на одном с ними языке. В нашем первом материале речь пойдет о частоте Wordstat и о том, как владельцы сайтов зачастую идеализируют этот показатель, полагая, что:

  • частота Wordstat равняется количеству запросов в Яндексе;
  • по частоте Wordstat можно предсказать объем трафика на сайт;
  • по частоте Wordstat можно собрать семантическое ядро запросов.

Так ли это на самом деле, мы и попытаемся выяснить в данной статье.

Миф 1: Частота Wordstat = количеству запросов в Яндексе

Многие клиенты ошибочно полагают, что вводя запрос в http://wordstat.yandex.ru/ можно узнать, сколько данное слово или словосочетание в течение месяца запрашивали в поисковой системе Яндекс. На самом деле этот инструмент предназначен для подбора ключевых слов рекламной кампании в Яндекс.Директ
, о чем говорит и сам поисковик:

«Цифры рядом с каждым запросом в результатах подбора дают предварительный прогноз числа показов в месяц, которое вы получите, выбрав этот запрос в качестве ключевого слова. Так, цифра рядом со словом «телефон» обозначает число показов по всем запросам со словом «телефон»: «купить телефон», «сотовый телефон», «купить сотовый телефон», «купить новый сотовый телефон в крапинку» и т.п.».

Чтобы получить верные данные, необходимо понимать, как работает Wordstat. При подборе слова обязательно указывайте регион, где функционирует ваша компания. Не стоит забывать, что по умолчанию Wordstat считает все запросы, содержащие интересующее слово (словосочетание). Для того чтобы узнать реальную частотность фразы, необходимо использовать специальные операторы. Всего их пять, самые актуальные из них — кавычки (« ») и восклицательный знак (!).

Кавычки позволяют учитывать показы только по данной фразе, а не по всем словосочетаниям, содержащим ее:

Поставленный перед словом восклицательный знак исключает его словоформы (склонения). Узнать статистику точного вхождения фразы можно, если использовать одновременно два оператора «!»:

В наших примерах частота указана по Москве и области.

Оператор Название Описание
минус-слова Позволяет исключать из статистики запросы, включающие то или иное слово. Оператор «-» ставится вплотную к исключаемому слову, без пробела. Перед оператором ставится пробел.
Пример: ремонт -гарантийный
+ плюс Позволяет принудительно учитывать в статистике предлоги или союзы, которые игнорируются поисковой системой и, соответственно, статистикой подбора слов.
Пример: товары +для автомобиля
!

Восклицательный

Знак

Позволяет учитывать слова в запросе точно в указанном написании. Может использоваться для исключения (-) ненужных форм.
Пример: кий -!киев или!кий
() группировка Позволяет составить выражение из нескольких слов, объединенных логическим оператором, например «или» (|).
| или Позволяет определить логику группировки слов.
Пример: ремонт (автомобилей | автомашин)
« » кавычки Позволяет учитывать только словоформы указанного слова, исключая его словосочетания.
Пример: «камин»

Миф 2: По частоте Wordstat можно предсказать количество трафика на сайт

Бытует мнение, что частота Wordstat показывает трафик, который получит сайт компании, если займет высшую позицию (ТОП-1) по данному запросу. Давайте предположим, что частота Wordstat косвенно указывает нам о потенциале ключевого слова — если его часто рекламируют, значит, по нему может быть много переходов из поиска.

Чтобы проверить это утверждение, мы провели эксперимент. Собрав по нашим текущим проектам ключевые слова, находящиеся более 20 дней подряд в ТОП-3 поисковой выдачи Яндекса, мы сравнили трафик на сайт с этих слов/словосочетаний с их частотой Wordstat.

Ключевое слово Кол-во дней в ТОП-3
Частота Wordstat
Переходы с GA
бытовки 30 5 212 3
автокредит калькулятор 30 1 010 415
1с управление торговлей 973 0
161 фз 30 942 0
ботинки тимберленд зимние 21 333 21
алт анализ крови 30 303 0
интернет магазин больших размеров 30 202 95
взять микрозайм 30 121 5
адонис весенний купить 30 35 3
автокружка от прикуривателя 30 16 2
бесконтактный измеритель температуры 30 14 1
хранение бухгалтерских документов 30 13 0

Как видно из таблицы, высокие позиции в поисковой выдаче по словам с большим «потенциалом» не дали ощутимого трафика на сайт. Даже если ресурс займет ТОП-3 по данным запросам, максимальный трафик, на который можно рассчитывать, будет не более 20% от частоты Wordstat.

Миф 3: По частоте Wordstat можно собрать семантическое ядро запросов

Многие полагают, что одного Wordstat достаточно для сбора поискового ядра запросов. Ориентироваться на этот показатель можно, но с некоторыми оговорками. Не стоит забывать, что очень часто слова с минимальной частотой остаются конкурентными в выдаче и могут принести поисковый трафик. Если частота запроса равняется нулю, это совершенно не означает, что его не ищут пользователи. Справедливо и обратное – слова с высокой частотой не обязательно обладает высоким трафиковым потенциалом (в этом мы смогли убедиться в ходе нашего первого эксперимента). Это мы и решили проверить, собрав трафик за месяц со слов с нулевой частотой Wordstat в регионе Москва. В итоге, мы получили следующие данные:

Наш эксперимент подтвердил, что запросы с нулевой частотой приводят трафик на сайт, а значит, при сборе семантического ядра нельзя ориентироваться только на данные Wordstat.

Запросы
Частота Wordstat
Переходы с GA
универсальный язык моделирования unified modeling language 0 39
основы ibm tivoli smartcloud control desk 7 5 0 27
utg9002c цена 0 58
тестер измеритель емкости и индуктивности купить ut603 0 37
мультиметр yx-360treb стрелочный инструкция 0 26
выбор lcr измерителя 0 22
купить комнатно-уличный термометр с влажностью 0 16
термометр улично-комнатный барнаул 0 15
мультиметры интеллектуальные в митино 0 9
термометр кт-905 0 8
галоши для модельной обуви 0 9

Мы в iSEO для подбора семантического ядра используем одновременно несколько сервисов, например, Google AdWords , Adstat Rambler и ряд других. Каждый сервис имеет свои преимущества и особенности, в Google AdWords слова можно подбирать с учетом категории сайта, статистика Рамблера дает данные по показам для первой страницы, для всех страниц и суммарные показы.

Подбор поисковых запросов в GoogleAdWords.

Подбор поисковых запросов в Adstat Rambler.

Но знание примерного количества показов по тому или иному запросу не достаточно для понимания, какой объем трафика удастся привлечь из поиска. Немаловажное значение имеет кликабельность сайта, на которую оказывают влияние различные факторы:

В заключение

Итак, мы наглядно продемонстрировали, что не стоит слишком сильно идеализировать такой показатель, как Wordstat. Он несет определенную пользу при формировании семантического ядра запросов и прогнозе потенциального трафика на сайт, но является лишь одним из инструментов, но далеко не единственным.

В следующих статьях мы поговорим о том, как правильно читать расчет на продвижение сайта и ежемесячный отчет оптимизатора, а также рассмотрим основные подводные камни договоров по
SEO.

В данном обзоре представлены он-лайн сервисы для проверки плотности ключевых слов на странице. Данный показатель нужно проверять, чтобы убедиться: текст не переспамлен ключевыми словами и плотность нужных слов на странице позволит сайту находиться в ТОПе поисковых систем.

В общем случае плотность ключевых слов не должна превышать 5%, но в ряде тематик она может быть выше.

Бесплатные онлайн сервисы для проверки плотности ключевых слов

  1. http://istio.com/rus/text/analyz/ — хороший сервис для анализа контента на сайте. При расчете плотности может допускать небольшие погрешности, из-за того, что не знает некоторых слов и считает их словоформы за разные слова. Сервис сам загружает текст с указанного URL, что очень удобно. На наш взгляд, выдает наиболее корректный результат для SEO-специалистов.
  2. http://seop.ru/services/page_analyzer_2.html – наиболее полный анализ контента: проверяет плотность слов не только в тексте, но и в мета-тегах. Также проверяет заголовок на релевантность тексту на странице. Загружает текст с указанного URL автоматически. В отличие от сервиса Istio.com, считает плотность без учета стоп-слов, из-за чего показатель плотности получается несколько выше, чем при учете стоп-слов. Как считать плотность ключевых слов на сайте – с учетом стоп-слов или нет – каждый SEO решает сам.
  3. http://advego.ru/text/seo/ — на этом сервисе можно проверить плотность ключевых слов, но текст приходится добавлять вручную (копировать с сайта). Это не удобно. Плюс сервиса – проверка текста на наличие грамматических ошибок.
  4. http://seobuilding.ru/keyword-density-analyzer.php – проверяет плотность ключей, не только слов, но и популярных фраз, которые встречаются в тексте. В сервисе можно задавать дополнительные настройки – это плюс, но новичкам может быть сложно разобраться с параметрами проверки – это минус. Сервис может загружать текст с указанного URL.
  5. http://seogift.ru/content-analiz – сервис считает плотность каждой словоформы (например, словоформы работа и работы понимаются сервисом как 2 разных слова и для каждого плотность считается отдельно). На наш взгляд, расчет плотности по такому алгоритму не совсем корректен.
  6. http://site-submit.com.ua/ru/servis_analizing – сервис показывает плотность слов без учета словоформ и иногда считает за слова странные сочетания (например, два слова «июля 2014» посчитал как одно). Пользоваться сервисом для SEO-целей сложно.
  7. http://seotxt.com/service/content_analyzer/ — достаточно подробный анализ плотности ключей. После введения url сайта показывает все данные в виде таблички, в которой отображается наличие слов в наиболее важных тегах (Title, description, keywords, h2, h3, B, I, A и ALT). Минусы сервиса: разные словоформы считаются как разные слова, стоп-слова не учитываются.
  8. http://be1.ru/stat/ — сервис позволяет проверить основные параметры сайта (тИЦ, PR и ряд других) и в том числе рассчитывает количество слов в тексте, количество уникальных слов и плотность, но последний параметр считается «хитро»: берется отношение числа вхождений слова к числу лемм, которые встречаются в тексте. На наш взгляд, такая методика расчета завышает показатель плотности.

Программы для анализа плотности слов

Кроме он-лайн сервисов для анализа контента на сайте, существуют программы, выполняющие подобные функции. Наиболее известными из них являются:

  • Semonitor – мощная программа для решения SEO-задач. В этой программе есть html-анализатор, именно он позволяет проверить плотность ключевых слов на страницах сайта. Программа является платной, цена зависит от версии и количества компонентов. Демо-версию можно скачать на сайте semonitor.ru
  • CS Yazzle – программа позволяет собирать внешние ссылки на сайт, анализировать уровень конкуренции по запросам и выполнять ряд других функций, в том числе — выполнять проверку частотности слов на странице. Программа платная, скачать ее можно с сайта yazzle.ru

Мы описали наиболее популярные сервисы для проверки плотности ключевых слов. Формулы расчета плотности у разных сервисов отличаются, как и получаемые результаты. По какой методике считать плотность, учитывать или нет стоп-слова, считать плотность каждой словоформы в отдельности или нет – каждый SEO специалист должен решить сам.

что такое, методы определения частоты – Блог TRINET

Что такое частотность поисковых запросов

Частотность – это количественная величина, показывающая сколько раз пользователь обращался к поисковой системе с конкретным запросом. Как правило, рассчитывается за последний месяц. Зная спрос, SEO-специалист поймет, есть ли поисковый спрос, нужно ли создавать посадочную страницу, а также сможет спрогнозировать трафик, который получит продвигаемый сайт при ранжировании в ТОП-10.

В данной статье пойдет речь о том, какой может быть частотность запроса и как ее определить.

Виды частотностей в поисковой системе Яндекс

Один из инструментов определения частотностей является сервис от поисковой системы (далее ПС) Яндекс – WordStat. Он показывает популярность фразы в одноименной поисковой системе. Причем, посмотреть можно несколько видов частотностей, в зависимости от операторов, которые применяются. На примере запроса «поисковое продвижение» разберемся подробнее.

  • Поисковое продвижение – такой запрос без каких-либо операторов покажет общую частотность по фразе, ее аналогам и словоформам.

Число 23 504 на рисунке выше означает, какое количество показов было со словом «поисковое продвижение» в ПС Яндекс за последний месяц. Нужно учитывать, что в эту цифру входят и более длинные фразы, например, «поисковое продвижение сайтов» и фразы с измененными словоформами, например, «услуги поискового продвижения».

  • Оператор «кавычки» («поисковое продвижение») фиксирует количество слов в запросе, а значит фразы формата «поисковое продвижение Москва» учитываться не будут. Как видно ниже, частота спроса стала значительно меньше.
  • Оператор «кавычки и восклицательный знак» («!поисковое !продвижение») фиксирует количество слов, а также форму первого и второго слова, перед которыми стоит знак восклицания. В такой расчет не войдут запросы «поисковым продвижением» и т.д.
  • Оператор «квадратные скобки» ([поисковое продвижение]) фиксирует порядок слов. Сюда не войдет фраза «продвижение поисковое помогает». Но необходимо иметь в виду, что будут посчитаны все словоформы, а также не будет зафиксировано количество слов.
  • Оператор «кавычки и квадратные скобки» («[поисковое продвижение]») как раз может фиксировать и порядок слов, и их количество в запросе.

При этом словоформы все еще учитываются. Это означает, что сюда могут попасть запросы «поисковому продвижению». Для того, чтобы зафиксировать форму слова используем «!» перед ним, как в примере ниже.

  • Оператор «кавычки, квадратные скобки и знак восклицания» («[!поисковое продвижение]») — фиксирует количество и порядок слов в запросе, а также словоформу первого слова, перед которым стоит знак восклицания.
  • Спецоператор «плюс» (+в поисковое продвижение) в обязательном порядке фиксирует служебные части речи, местоимения, цифры и другие слова, не несущие дополнительного смысла. В нашем случае обязательным стал предлог «в» и ниже на рисунке видно, как поменялись статистика и список запросов.

В результате можно максимально точно определить, как часто пользователи интересуются той или иной тематикой в поисковой системе Яндекс.

Частотность запросов в поисковой системе Google

ПС Google не дает специального сервиса для определения частотности поисковых фраз в отличие от Яндекс. Для сбора статистики можно использовать «Планировщик ключевых слов» в сервисе для запуска рекламы – Google Ads.

Там есть два варианта: «Посмотреть количество запросов и прогнозы» или «Найти новые ключевые слова». Первый покажет лишь приблизительные значения, а вот с помощью второго их можно уточнить. Как именно это можно сделать описано ниже в пункте «Инструменты для определения частотностей».

Высоко- средне- и низкочастотные запросы

Существует еще одна важная классификация, на которую точно стоит обратить внимание при составлении семантического ядра. Согласно ей запросы подразделяются на следующие виды:

  • высокочастотные или ВЧ (частотность от 5 000)
  • среднечастотные или СЧ (частотность от 1 000 до 5 000)
  • низкочастотные запросы или НЧ (частотность от 1 до 1 000)

Цифры очень условные и мы – рекомендуем ориентироваться на нишу и географию продвигаемого сайта. Ниже приводим несколько характеристик, которые способны помочь в классификации запросов.

Высокочастотные запросы

Данный вид запросов включает в себя максимально общие фразы. Они состоят, как правило, из 1-2 слов. По такому ключевику не всегда очевидно, что хочет пользователь, из-за этого они часто имеют более низкую конверсионность. Но всегда есть исключения, поэтому рекомендуем анализировать именно конкретную ситуацию. Если сайт молодой лучше начинать с НЧ и СЧ запросов, а ВЧ подключать со временем.

Пример ВЧ запроса показан ниже:

Среднечастотные запросы

Эти запросы содержат более точные фразы, обычно состоят из 3-4 слов. Хотя они все еще и охватывают большое количество пользователей, но имеют уже более понятный интент. Пример указан ниже на рисунке.

Низкочастотные запросы

Это наиболее точные запросы, показывающие намерения пользователя. Как правило, содержат 5 и более слов. Мы советуем всегда добавлять в СЯ часть НЧ фраз, которые привлекут целевой трафик на сайт. При этом они помогают более эффективно продвигать страницы за счет текстовой оптимизации.

Пример НЗ запроса показан ниже:

Отличие частотности от конкуренции

Еще один параметр – это конкуренция поискового запроса. Здесь они делятся на:

  • высококонкурентные (ВК)
  • среднеконкурентные (СК)
  • низкоконкурентные (НК)

Низкочастотный запрос еще не значит, что по нему низкая конкуренция. На показатель конкурентности влияет множество факторов. Например, количество главных страниц в ТОП-10, прямые вхождения ключевой фразы в заголовок страницы, рекламные блоки в выдаче и т.д.

Данная тема будет затронута в другой публикации.

Зачастую, конкуренция высокая, когда запросу подходит большое количество сайтов выдачи, и низкая, если оптимизированных под запрос сайтов немного.

Одна из методик определения конкуренции, посмотреть количество результатов по запросу. Например, “продвижение сайтов спб” — 10 млн. подходящих результатов.

Показано ниже на рисунке:

Другая методика – анализировать показатель, рассчитываемый по количеству внешних входящих ссылок/доменов. В разных сервисах он может называться по-разному. Например, в сервисе Ahrefs от компании Google он называется Keyword Difficult.

Пороги значений обозначены ниже:

Что такое сезонность запроса и где её посмотреть

Частотность поисковой фразы часто сильно зависит от сезонности. Например, запрос «купить елку» ежегодно начинает набирать популярность в ноябре, пик в декабре, а в феврале уже не интересен пользователям.

Другой пример – запрос «купить септик». Актуален в течение всего года, но популярность повышается весной и летом, когда люди перебираются в частные дома и на дачи.

Сезонность – это изменения (подъемы или падения) трафика, повторяющиеся ежегодно под влиянием каких-то внешних событий. Например, смена времени года, праздники и т.д.

Проверить ее можно в Яндекс WordStat. Необходимо:

  • зайти в сервис
  • ввести запрос
  • выбрать регион
  • нажать «История запросов»

Под графиком находятся данные по месяцам за последние два года:

Еще один инструмент для определения сезонности – сервис Google Trends.

Необхидимо:

  • ввести запрос
  • выбрать регион, источник и временной промежуток

Данные можно посмотреть, начиная с 2004 года. Можно сравнить до пяти запросов. Google показывает значения в баллах. Например, курсор на скриншоте ниже наведен на пик популярности поискового запроса – это 100 баллов.

Что такое геозависимость запроса и как ее проверить

Геозависимость запроса показывает нам, зависит ли показ по этому ключевому слову от местонахождения пользователя. Например, по запросу «услуги нотариуса» человек из Санкт-Петербурга увидит одни сайты в выдаче, а человек из Тулы – совершенно другие. Яндекс считает, что до 30 % обращений к ПС являются геозависимыми. Как правило, к ним относятся коммерческие запросы.

Вручную проверить геозависимость запроса можно методом сравнения ТОП-10 по двум разным регионам или подсветке топонима в поисковой выдаче.

Заходим в ПС Яндекс, смотрим выдачу по двум разным регионам и анализируем. Регион можно поменять внизу страницы поиска:

На примере запроса «услуги нотариуса» видим, что выдача для Санкт-Петербурга и Тулы разная и поисковая система в обеих выдачах подсвечивает актуальный для пользователя город.

Ниже представлен пример для г. Санкт-Петербург:

Мы видим преимущественно региональные сайты Петербурга.

На следующем скриншоте показаны результаты для пользователя из г. Тула:

В данном случае преимущественно региональные сайты Тулы.

Инструменты для определения частотностей

А теперь к самому интересному – как же определить частотность?

Для этого можно использовать различные сервисы.

В Яндекс WordStat необходимо ввести запрос, выбрать регион, интересующее устройство, нажать «Подобрать», далее сервис покажет результат:

Можно посмотреть статистику по регионам и городам:

Яндекс.Директ – сервис для запуска рекламы в поисковой системе Яндекс. Посмотреть частотность запроса можно при создании рекламной кампании. Доходим до второго шага «Выбор аудитории», задаем регион и нажимаем «Подобрать фразы». При вводе фразы получаем статистику по ним.

Частота запросов в Яндекс.Директ может несколько отличаться от показателей Яндекс.Вордстат. Это происходит, потому что последний не учитывает вложенные запросы с прогнозом меньше пяти. Кроме того, данные берутся за последние 30 дней, но в Директе они обновляются чаще из-за чего могут быть расхождения в пару дней. И наконец, необходимо отслеживать нет ли минус-слов в Яндекс.Директе, которые могут повлиять на статистику.

В случае снятия данных за год, они могут отличаться от данных в сервисе WordStat и быть некорректными.

Google Keyword Planner – инструмент для подбора ключевых слов при создании рекламы в ПС Google. Поможет при сборе статистики по запросам в Google.

Необходимо зайти в инструмент, авторизоваться и выбрать «Найдите новые ключевые слова»:

Далее нужно ввести слова через запятую и нажать «Показать результаты»:

Далее необходимо отметить добавленные слова галочкой (расширить список можно будет дальше), выбрать соответствие (точное, широкое, фразовое) и нажать «Добавить ключевые слова»:

Рядом с каждым запросом появляется зеленый значок «В плане»:

Переходим в пункт меню «Ключевые слова», выбираем корректный регион вверху страницы, раскрываем график по стрелочке, выставляем максимальную цену за клик:

Для анализа нужно использовать столбец «Показы»:

Этот способ покажет точную статистику по Google, насколько это возможно в рамках данной поисковой системы.

SemRush – сервис, который может показать подробную информацию по ключевому слову, в том числе уровень конкурентности, вариации ключевого слова, поисковую выдачу и другие параметры. Часть инструментов в нем платная.

Ahrefs – еще один сервис для просмотра статистики по ключевому слову и подбора аналогов. Также является платным.

Серверы SemRush, Ahrefs и другие подобные инструменты получают данные о количестве запросов методом покупки сlickstream у крупных провайдеров, поэтому их данные будут отличаться от данных в Google Keyword Planner.

Софт для ручного и автоматического съема частотностей

В продолжение предыдущего пункта, приведем несколько примеров софта для ручного и автоматического сбора частотностей.

Плагин WordStarter – бесплатное расширение для Яндекс.Вордстат, которое позволяет собирать ключевые слова и их частоту, задавать минус-слова и экспортировать все это для последующей обработки.

KeyCollector – платный софт (есть бесплатный аналог Словоеб), с помощью которого можно быстро собрать ключевые фразы и их параметры, в том числе частотность, конкурентность, стоимость, посмотреть сезонность запроса и т.д.

TopVisor – платный сервис для сбора статистики из Яндекс и Google.

Для проверки частоты необходимо:

  • создать проект
  • перейти на страницу «Поисковые запросы»
  • добавить запросы
  • выбрать источник, регион

RushAnalytics – еще один платный сервис, в котором есть инструмент для парсинга ключевых слов и частотностей из Яндекс и Google на высокой скорости.

Serpstat – этот сервис позволяет автоматизировать процесс, оперативно собирать большие объемы данных по запросам и выгружать их в удобном формате. Сервис также платный.

Для того, чтобы выбрать максимально удобный и полезный сервер в конкретном для вас случае, лучше попробовать каждый из представленных выше.

Заключение

Есть много нюансов в определении частотности запросов, о каждом из которых важно помнить при составлении и корректировке семантического ядра. Необходимо обязательно

проверять сезонность, конкурентность ключевых слов, регулировать соотношение высоко-, средне- и низкочастотных запросов и выбирать для сбора статистики те источники и инструменты, которые лучшего всего решат задачи конкретного проекта.

Если у вас остались вопросы, мы с удовольствием разберем их в комментариях. Возможно, вам требуется помощь с составлением семантики и разработкой структуры для вашего проекта? Пишите, наши профессионалы смогут помочь вам.

Подбор ключевых слов в Яндекс Вордстате — анализ статистики вручную и с помощью программ Slovoeb или Key Collector

Обновлено 24 января 2021 Просмотров: 347111 Автор: Дмитрий Петров

  1. Как работает «Подбор слов» от Яндекса
  2. Операторы Вордстата
  3. Семантическое ядро
  4. Подбор ключевых слов в Вордстате
  5. Автоматизация процесса в Slovoeb
  6. Сбор другой статистики в Slovoeb

Здравствуйте, уважаемые читатели блога KtoNaNovenkogo.ru. Хочу еще раз коснуться темы подбора ключевых слов для отдельных статей и всего сайта в целом. Это позволит вам более прицельно попадать в ту аудиторию, которой может быть интересна ваша публикация.

Потенциально. Т.е. это не гарантирует успех, но позволяет на него надеяться. Другими словами, это необходимое условие для успешного развития сайта, но вовсе не достаточное.

Самым популярным инструментом, позволяющим анализировать статистику использования различных слов и фраз в запросах пользователей поисковых систем, является инструмент «Подбор слов» от Яндекса (знаменитый WordStat). Предназначен он для рекламодателей дающих объявления в контекстной рекламе Яндекс Директ, но это не суть важно, ибо выдаваемая им статистика может быть полезна и для оптимизации своего собственного сайта.

Работать с Вордстатом можно как вручную, так и с помощью специальных программ. Если нужно пробить одну-две ключевые фразы по статистике запросов Яндекса, то проще будет зайти на указанный чуть выше сайт, а вот если вы хотите набрать для себя базу ключевых слов по нужной вам тематике, то без автоматизации будет не обойтись.

Онлайн сервис «Подбор слов» от Яндекса

Я понимаю, что публикаций на тему составления семантического ядра в интернете более чем достаточно. Но, как мне кажется, они написаны в основном теми, кто занимается этим делом профессионально, т.е. оптимизаторами из SEO контор или фрилансерами. Описанные ими методы довольно-таки интересны, ибо позволяют автоматизировать и упростить процесс сборки ядра, но лично на меня они нагоняют скуку при чтении.

Описываемые ими мелочи и нюансы помогают сэкономить время при большом потоке проектов, которые проходят через их руки, но вот если у вас стоит задача подбора ключевых слов для своего собственного сайта, то в большинстве случаев излишняя автоматизация может даже помешать, ибо можно что-то упустить или не учесть.

Тут, как мне кажется, спешить не надо. Например, я когда-то купил на бонусы Профит Партнера замечательную программу Key Collector. Вот. Покрутил ее, повертел, да и отложил на дальнюю полку. Почему? Да просто она не для меня — сложна в освоении и понимании полезности всего имеющегося в ней богатейшего функционала. По той же причине я пользуюсь Яндекс Метрикой, а не Гугл Аналитиксом.

Конечно, я не прав и надо было упереться рогом и добиться понимания всех имеющихся в Key Collector фишечек (полезных безусловно). Но в реалии, я скачал с сайта того же разработчика облегченную версию этой программы по подбору слов, правда под непрезентабельным названием Slovoeb (написанное русскими буквами оно не очень-таки и печатно).

Все, теперь работаю исключительно с ним, а Кей Колектор у меня в очередной раз после обновления системы заблокировался (в нем имеется привязка к конфигурации компьютера) и мне лень опять списываться с автором, чтобы его реанимировать.

Поэтому сегодня буду говорить только про ручное использование инструмента «Подбор слов» от Яндекса, про использования Slovoeb в целях быстрого получения статистики по тысячам ключевых фраз разом и отсеивание пустышек. Есть и другие инструменты, подобные Вордстату (о них можно прочитать в статье про работу со статистикой поисковых запросов Яндекса, Google и Рамблера), но они такой широкой популярности не снискали.

Вообще, конечно же, работа с Вордстатом до безобразия проста в плане теории, но достаточна муторна в плане практики. Кстати, не так давно у них поменялся дизайн, но не только. По субъективным ощущениям, скорость парсинга новой версии онлайн инструмента по подбору слов существенно увеличилась.

С чего начать? Со спокойного обдумывания сложившейся ситуации и того, что вы хотели бы получить в результате. У вас есть тематика вашего ресурса (будущего или уже имеющегося). Под эту тематику можете сходу подобрать десяток-другой фраз или слов, которые могут иметь к ней отношение. Как понять, какие именно из вертящихся у вас в голове фраз имеют перспективу?

Нужно посмотреть статистику их использования при обращении к поисковой системе Яндекс. Для этой цели и нужен Вордстат. Правда с недавних пор он доступен только для зарегистрированных пользователей, поэтому вам предварительно придется получить паспорт от Яндекса, а в нагрузку к нему еще и бесплатный почтовый ящик.

Если все это добро у вас уже есть, то не помешает вспомнить свои данные авторизации, ибо их придется вводить в Slovoeb для придания ему работоспособности. Дальше вводите ваш первый запрос в соответствующую форму на странице сервиса Подбор слов:

О, как много получилось. Вордстат выдает статистику по ключевым словам за последний календарный месяц. Значит за год можно будет получить число еще на порядок больше. Хотя это не совсем так. Одной из причин может являться колебание частотности запроса от времени года (т.е. сезонности).

Это можно проверить, переставив галочку в поле «История запросов». Для наглядности возьмем, действительно, что-то с ярко выраженной сезонностью, где частотность ввода данного ключевого слова в поисковую строку Яндекса в зависимости от времени года может меняться в шесть раз.

Если интересующий вас запрос имеет региональную привязку, то это тоже существенно повлияет на частоту его ввода в Яндекс. Для того, чтобы это понять, достаточно кликнуть по ссылке «Все регионы» и выбрать нужную вам географическую привязку.

Например, вот так будет выглядеть статистика по аудитории Яндекса, которая интересуется доставкой пиццы в маленьком городе.

Кроме этого многие сеошники и владельцы сайтов проверяют позиции своих сайтов (например, в ТопВизоре) по всевозможным ключевым словам, и не всегда для этого используют свои лимиты в Яндекс XML. А это значит, что происходит накрутка (не специальная) частотности. Поэтому не стоит безоглядно верить цифрам этой статистики и не стоит ее воспринимать буквально.

Да и без этого все не так просто. Будь это статистика исключительно по использованию одного только этого слова (словосочетания), которое вы ввели, то все было бы замечательно. Но сервис подбора слов Яндекса при вводе в него запроса без каких-либо дополнительных операторов учитывает в показанной цифирьке все фразы, в которых данное словосочетание использовалось (в любой словоформе).

Например, если вернуться к первому скриншоту, то можно с уверенностью сказать, что почти 900 000 раз за месяц пользователи яндекса вводили запросы, в которых встречалось слово Joomla (например, «шаблоны для Joomla» или «самые популярные в мире сайты на системе управления сайтами Joomla»).

Данная статистика поможет вам оценить перспективу создания сайта или отдельного раздела на данную тематику, но вот при написании конкретных статей нужно будет использовать уже другие цифирьки, обладающие большей конкретикой. Где их взять? Хороший вопрос, на который мы сейчас и постараемся ответить.

Как собрать статистику реальной частотности запросов (операторы Вордстата)

Прежде, чем приступать к практике, хочу остановиться на тех операторах Вордстата, которые можно использовать в сервисе подбора ключевых слов Яндекса. Собственно, их совсем немного. Думаю, что никто не сможет рассказать о них лучше, чем собственный хелп этого сервиса.

Лично я использую только два из них — кавычки и восклицательный знак. Вы вольны поступать так, как считаете нужным.

Итак, кавычки заставляют поисковую систему делиться статистикой по вводу только данной фразы. Однако, при этом будут учтены все возможные словоформы содержащихся в ней слов (падежи, числа). Например, так:

А вот если поставить перед каждым словом из ключевой фразы по восклицательному знаку, то мы заставим Яндекс поделиться статистикой уже исключительно только по тем словоформам, которые были использованы в запросе. Например, так:

Странно, не правда ли? В три раза уменьшилась цифирька. А как же еще можно сформулировать данный запрос поисковой системе? Ну, если подумать, то скорее всего во множественном числе, тем более, что и оставшиеся цифирьки сразу видно куда подевались:

Ну вот, с теорией, считайте, покончили, пора приступать к практике. Все мои проекты носят информационный характер и поэтому сезонность и региональность запросов меня мало волнуют. Если у вас другая ситуация, то эти данные вам тоже придется учитывать, чтобы понимать перспективность.

Что нужно учесть при сборке семантического ядра сайта

Раз уж речь зашла о перспективности. Сборка семантического ядра для сайта состоит из нескольких этапов:

  1. Подбор ключевых слов и определение их реальной частотности в Яндекс Вордстате (с использованием кавычек или их связки с восклицательными знаками). Ниже мы об этом поговорим поподробнее.
  2. Определение перспективности продвижения по данным запросам. Что я имею в виду? Все довольно просто. Если данную фразу в свое семантическое ядро включили тысячи сайтов, то у вас будут проблемы с попаданием в ТОП 10, ибо конкурс слишком высок. Как оценить конкуренцию по вашим намеченным ключевым фразам, которые вы подобрали в Вордстате?

    Можно набрать ее в Яндексе и посмотреть на число ответов, которое предлагает поисковая система по данному запросу. Вот пример низкоконкурентного варианта:

    Принято считать, что по низкоконкурентным запросам Яндекс выдает меньше 100 000 результатов. Высококонкурентеные — более 1 000 0000. Ну, а все что по середине — это среднеконкурентные.

    Если у вас подобранные ключевые запросы коммерческие, то можно будет посмотреть на данные по стоимости продвижения по ним, которые вам выдаст Мегаиндекс (читайте статью про бесплатные сервисы MegaIndex) или Сеопульт (платить за это не потребуется).

    Эту же информацию умеет собирать с этих же и подобных им агрегаторов Кей Коллектор, о котором я упоминал в самом начале.

  3. Вы должны распределить ключевые слова по страницам вашего сайта. Их можно группировать, чтобы не писать под каждое ключевое слово найденное в Вордстате отдельную статью. Определить, какие именно запросы можно объединять на одной вебстранице, а какие нельзя, вам помогут успешные конкуренты, которые попали в ТОП. Вообще, списывать у конкурентов не такая уж и плохая идея.

    В случае информационных ресурсов для объединения запросов в одной статье нужно использовать обычную логику. Иногда бывает логичнее написать одну большую публикацию, а иногда — десяток маленьких. Какой вариант будет наиболее выигрышным проверить, скорее всего, получится только на практике. Собственно, можно это все совмещать, делая обзорную статью со ссылками на множество поясняющих.

При разработке семантического ядра очень важно с чего-то начать (за что-то зацепиться). Несколько ключевых фраз почерпнутых у ваших конкурентов, взятых из головы или же очевидно напрашивающихся, станут вашей отправной точкой. Но обязательно продолжайте процесс поиска и всегда имейте под рукой бумажку, чтобы можно было записать возникшую идею и потом посмотреть статистику в сервисе подбора слов от Яндекса, чтобы убедиться в ее состоятельности.

Из любого высокочастотного запроса можно с помощью Вордстата или Slovoeb получить десятки или даже сотни ключевых слов для ваших будущих статей. Как это сделать? Для начала нужно найти такие высокочастотники. Это самые очевидные фразы, которые используют пользователи при обращении к Яндексу, когда хотят получить ответ на вопрос по той тематике, в которой вы хотите подвязаться на создание сайта.

Например, для моего блога это могут быть слова Joomla, WordPress, продвижение сайтов, раскрутка сайтов, заработок и т.д. С них можно начинать. Но так поступают многие, поэтому было бы не плохо, если все приходящие вам идеи будущих статей вы пытались бы оформить в те запросы, по которым их могли бы найти пользователи Яндекса. Надо попытаться думать, как рядовой пользователь интернета задающий вопрос поисковику.

Да, еще про деление запросов на высокочастотные, низкочастотные и среднечастотные. Все это очень и очень условно. Если в вашей тематике вы смогли найти самую частотную ключевую фразу в статистике Яндекса с цифирькой 5000 (заключенной в кавычках, естественно), то в вашей теме запросы с частотой использования ниже 100 в месяц можно считать низкочастотными. А если в вашей теме ВЧ измеряются сотнями тысяч, то НЧ может быть все, что ниже 1000. Подробнее читайте про НЧ, СЧ, ВЧ и НК, СК, ВК поисковые запросы.

Подбор слов для семядра непосредственно в Яндекс Вордстате

Ладно. Воду лить можно долго. Давайте наберем запрос «Продвижение сайтов» в Вордстате и посмотрим, что он нам с вами сумеет подобрать.

Замечательно. Мы получили кучу информации, которую теперь нужно будет попробовать как-то обработать. Яндекс нам подобрал слова на основе введенной нами фразы и распределил их по двух колонкам. Обе они очень важны.

В левой колонке Вордстата собраны все фразы, где непосредственно встречаются введенные ключевые слова. Справа от них отображается частотность их запроса у Яндекса его пользователями. Но не спешите радоваться, ибо частотность эта в большинстве случаев фейковая (что такое фейк). Т.е. написанные там цифры на самом деле могут быть фикцией.

Как же это проверить? Ну, первое что приходит в голову — открыть на новой вкладке браузера еще одно окно Вордстата и ввести в него все эти фразы из левой колонки по очереди, заключив их в кавычки.

Вот тогда вы получите реальную статистику (ну, или более близкую к реальной). Можно скопировать эти фразы в вордовский или экселовский документ и добавить высчитанные таким образом частотности.

Просто? Теоретически да, но на практике, после проверки десятка фраз из левой колонки (с приведенного скриншота) в Вордстате, открытом в новой вкладке, вы захотите на все это забить и пойти напиться (ну или повеситься).

Рутина, она не всем доставляет удовольствие. А ведь левая колонка окна сервиса «Подбор слов» еще и имеет постраничную навигацию. Представляете, там может быть до 50 страниц, что в сумме даст 2000 подобранных ключевых фраз. И все их вручную надо будет проверить, заключив в кавычки. Пожалуй, что такое под силу единицам.

И это еще не все. Мы же забыли про правую колонку Вордстата Яндекса. А ведь это просто-таки замечательная штука. Там отображаются запросы тех же пользователей, что вводили фразу из правой колонки, сделанные ими в ту же самую поисковую сессию. Это позволит вам существенно расширить семантическое ядро сайта и порой даже в очень неожиданном направлении.

Что со всем этим богатством из правой колонки делать? Просмотреть ее содержимое и все фразы, что имеют отношения к вашей тематике, а затем пробить их во вновь открытой вкладке браузера с Вордстатом. В нашем примере в глаза бросается словосочетание «оптимизация сайта» с высокой (потенциально) частотностью.

И что мы тут видим? А опять же много всего интересного. Из левой колонки нужно будет все фразы проверить на фейк с помощью заключения фразы в кавычки. А содержимое правой колонки можно проверить на нахождение там чего-то нового, чего вы еще не добавляли в свое семантическое ядро.

И так на протяжении многих часов можно сидеть с открытыми в разных вкладках браузера страницами сервис Яндекса «Подбор слов», чтобы ничего не упустить из потенциально возможных ключей и в то же время отсеять все пустышки. Через некоторое время, правда, вам захочется все это бросить, ибо усилия и усидчивость здесь нужны во истину не человеческие.

Вот именно на фоне подобных мучений ручного подбора ключевых слов и почувствуешь всю прелесть Key Collector, или его облегченной версии под названием Slovoeb. Какой же это кайф (без преувеличения) загнать в программу какой-нибудь пришедший вам в голову высокочастотный запрос, спарсить автоматически все страницы из левой колонки Вордстата, после чего также на автомате отсеять пустышки.

Полученный в результате список реально востребованных ключей можно будет отсортировать по убыванию частотности и сохранить в формате CSV для последующего анализа и разбивки по статьям. Кстати, процесс распределения ключевых слов по статьям можно тоже автоматизировать. Узнал об этом совершенно недавно из рассылки биржи ContentMonster (покупаю статьи последнее время в основном только у них).

Оказывается, что существует онлайн сервис KeyAssistant под эгидой этой биржи (он бесплатный, как я понял), который позволяет раскидать ключи по страницам, а страницы — по разделам. Объяснять его функционал довольно долго, поэтому предлагаю посмотреть «фильму» на тему и, возможно, оно вас заинтересует:

Ладно, это мы отвлеклись, а тем временем уже пора познакомиться с нашим сегодняшним героем с крайне непритязательным названием.

Как автоматизировать подбор слов из Яндекса в Slovoeb

Скачать Slovoeb можно по приведенной ссылке. Установки он не требует — достаточно распаковать скачанный архив и запустить файлик Slovoeb.exe

Сразу после запуска имеет смысл зайти в настройки программы, где на вкладках «Парсинг» — «Yandex Wordstat» в область «Настройки аккаунтов Yandex» нужно будет ввести хотя бы одну пару логин-пароль (разделенный двоеточием и без пробелов) для доступа к сервисам этой поисковой системы. Зачем? Я уже упоминал, что с недавних пор Вордстат позволяет собой пользоваться только авторизованным пользователям.

Обратите внимание, что аккаунты в Яндексе лучше будет создать новые (фейковые, т.е. не основные, где вы, например, работаете с РСЯ или деньгами). Почему? Парсить свою выдачу напрямую поисковик не разрешает (вместо этого предоставляет лимиты для работы XML выдачей), поэтому можно схватить бан аккаунта за проявление чрезмерной наглости.

Там же имеет смысл поставить максимальное количество страниц из левой колонки сервиса «Подбор слов» Яндекса, которое будет парситься (50). Это пригодится при пробивании ВЧ запросов, т.к. там может быть очень много возможных вариантов. Иногда даже на последней странице общая частотность равняется нескольким тысячам, что говорит о том, что не все ключи можно собрать с помощью Вордстата (к сожалению).

Если не хотите сильно нагружать и злить Яндекс, то на первой вкладке настроек «Общие» увеличьте диапазон таймаутов (перерывов между подачей запросов к поисковой системе).

Сохраняете настройки и жмете на кнопку «Создать проект», либо на «Открыть проект», если не закончили какую-то работу раньше.

Даете проекту название, после чего вводите в появившуюся строку интересую вам ключевую фразу или слово. Ввели? Хорошо, жмите на Энтер на клавиатуре.

Да, есть альтернативный вариант. Нажать на кнопочку «Левая колонка Yandex Wordstat» и ввести в открывшуюся форму сразу несколько фраз (по одной в строке), статистику по которым вы хотите спарсить. Потом жмете кнопку расположенную внизу и получаете за раз несколько списков слитых воедино.

В современной версии Slovoeb придется подождать пяток или чуть меньше минут, пока он состыкуется с Вордстатом (это происходит только после запуска программы, а в дальнейшей работе таких задержек не будет).

Потом начнется парсинг левой колонки сервиса «Подбор слов» по данной фразе на ту глубину (число страниц), которое вы установили в настройках. У меня там всегда 50 установлено. В итоге получите не более 2000 ключей включающих ваше исходное словосочетание.

Для примера я взял супер ВЧ запрос «работа». Как видите, даже на последней странице Вордстата общая частотность фраз зашкаливает за десять тысяч. Следовательно, мы в этом случае не можем с помощью данного инструмента охватить весь пул запросов и многое остается за кадром. Вытащить «хвост» тоже, наверное, можно, но это уже гораздо сложнее и менее надежно.

Так, это мы просто спарсили ключи, но ведь нужно еще отделить зерна от плевел, т.е. понять, какие из этих ключевых слов имеет смысл дальше использовать в семантическом ядре, а какие отбросить в силу их крайне низкой реальной частотности. Последняя вычисляется благодаря заключению фразы в кавычки или еще с добавлением восклицательных знаков.

В Slovoeb для этого нужно будет всего лишь выбрать из выпадающего меню кнопки «Частотности Yandex.Wordstat» последний или предпоследний пункты. Разницу между ними вы уже должны понимать, поэтому выбирайте то, что считаете нужным. Я почему-то предпочитаю последний вариант, но это, возможно, излишне ограничивает результаты.

Пробивка реальной частотности в Slovoeb идет гораздо медленнее парсинга и что важно, не заходите в этом время в Вордстат через браузер, ибо выскочит капча, на которой данная программа у меня зависает. Возможно, что это проблема имеет место быть только на моем компьютере, но все же стоит предупредить.

За процессом проверки реальной частотности вы можете следить воочию — в соответствующей колонке в реальном времени будут появляться новые цифры. Хотя имеет смысл это дело пустить на самотек и пойти заняться чем-то более полезным, а в программу можно лишь периодически заглядывать. По окончании процесса сбора красный шестиугольник в верхнем левом углу станет серым.

При желании вы сами можете остановить процесс, выбрав соответствующий пункт из контекстного меню этой кнопки. Проект можно будет сохранить, а Slovoeb закрыть. А потом опять открыть программу и сохраненный проект, после чего описанным выше способом продолжить сбор статистики. Очень удобно и, главное, просто до безобразия.

Вот. После окончания процесса вы можете отсортировать результаты по убыванию частотности, кликнув по заголовку столбца со статистикой фраз заключенных в кавычки, или с ними и восклицательными знаками перед каждым словом. Получится очень наглядно, ибо самые перспективные (пусть зачастую и не реальные в силу высокой конкуренции) запросы будут находиться вверху списка.

Советую сохранять все полученные в результате подбора ключевых слов списки в файл. Делается это в Slovoeb с помощью показанной на скриншоте иконки, расположенной в верхней части окна программы. Сохранение идет в формате CSV, который при желании можно открыть и обычным Экселем, главное указать правильный разделитель столбцов, чтобы все срослось.

Если не получается, то в настройках программы на вкладке «Интерфейс» — «Экспорт» выберете другой формат сохранения (xlsx). Там же можно посмотреть и разделитель используемый при экспорте в CSV.

Лишние столбцы в Экселе можно удалить (либо убрать в тех же самых настройках экспорта простым удалением галочек с не нужных вам столбцов — см. приведенный чуть выше скриншот), дабы они не снижали наглядность. Лично я оставляю только саму ключевую фразу и ее реальную частотность, а все остальное — в топку.

Собственно, с этими списками уже можно работать, что-то беря оттуда напрямую, а что-то опять пробивая через Вордстат на предмет получения новых ключей (например, не полную фразу, а встретившееся в ней слово или словосочетание, которое само по себе может породить массу вариантов). В общем, процесс весьма творческий и в силу его сильной автоматизации не шибко утомительный, особенно в сравнении с описанным выше ручным методом использования сервиса «Подбор слов».

Другие возможности Slovoeb по сбору статистики

Да, забыл еще упомянуть, что Slovoeb умеет собирать и поисковые подсказки. Это то, что выпадает при вводе запроса в поисковую строку Яндекса или Гугла.

Среди них тоже могут содержаться вполне себе интересные варианты ключевиков, которые потом можно будет проверить описанным чуть выше способом на предмет реальной их частотности.

Раньше для этого существовала отдельная утилита (СловоДер) от того же разработчика (Александра Люстика), а сейчас этот функционал заключен в одной программе. Для сбора поисковых подсказок достаточно нажать соответствующую кнопку на панели инструментов Slovoeb.

В открывшемся окне нужно поставить галочки напротив тех поисковиков, откуда эти подсказки будут дергаться.

Собственно, следует также указать ключевые слова, для которых эти подсказки будут собираться и нажать кнопку «Начать сбор». Собранные ключи из подсказок добавятся к общему списку, чтобы потом можно было их все скопом проверить и собрать статистику частоты использования.

В общем списке они будут помечаться другим значком, чтобы вам было нагляднее с ними работать и различать парсинг Вордстата и поисковых подсказок.

Тоже самое касается и сбора слов из правой колонки Вордстата (Slovoeb умеет ее парсить тоже).

Чуть выше по тексту я говорил, что очень важно при сборке семантического ядра обращать внимание не только на частотность подобранных слов и фраз, но и на то, насколько высокая конкуренция существует в выдаче Яндекса и Гугла по данным запросам. Чем она выше, тем сложнее вам будет пробиться в ТОП.

Для ее оценки многие предлагают использовать число ответов поисковых систем, которые они дают на данный запрос. Чуть выше я писал об этом подробнее. Так вот, наша замечательная программа умеет парсить это самое число ответов из выдач Яндекса и Гугла.

Т.е. по всем собранным словам вы сможете пробить их конкурентность с помощью кнопочки KEI на панели инструментов Slovoeb:

Параметр KEI получается несколько утрированным и, чтобы на него опираться, лучше будет воспользоваться Key Collector (платная версия данной бесплатной программы с существенно более расширенным функционалом).

Как вы можете видеть, даже у упрощенной версии программы имеется довольно-таки богатый функционал. Что уж говорить о Key Collector. Другое дело — нужен ли вам этот функционал? Лично мне оказалось очень трудно выкроить время на его освоение, тем более, что я не видел в этом особых перспектив. Я не прав? Разубедите меня в комментариях тогда.

Тем не менее, не у всех есть время и силы на проведения подобной работы (сбор полного семядра), но делать ее все равно нужно обязательно. Однако, если есть спрос, то будет и предложение. Всегда найдутся люди, которые готовы будут проделать это за вас, другое дело, что они могут оказаться не всегда честными и исполнительными.

Позволю себе наглость и приведу в завершении видео, взятое с блога Максима Довженко, где он рассказывает про настройки и подбор слов в Slovoeb:

Удачи вам! До скорых встреч на страницах блога KtoNaNovenkogo.ru

Частота запросов | API безопасного просмотра (v4) | Разработчики Google

Этот документ применим к следующим методам:

  • Обновить API (v4):
    fullHashes.find
  • Обновить API (v4):
    угрозаListUpdates.fetch
  • Запросы на обновление

    Чтобы предотвратить перегрузку сервера и получить оптимальную защиту, API обновления (v4) требует
    временные интервалы, определяющие, как часто клиент может отправлять запросы на сервер безопасного просмотра, чтобы
    выполнить проверку URL
    (fullHashes.найти)
    или обновить локальную базу данных
    (ThreatListUpdates.fetch).

    Первоначальный запрос данных должен происходить через случайный интервал от 0 до 1 минуты после
    клиент запускается или просыпается. Последующие запросы могут происходить только после
    минимальная продолжительность ожидания или
    ограничение по времени режима отсрочки было
    наблюдаемый.

    Минимальная продолжительность ожидания

    Оба
    fullHashes.find ответ и
    угрозаListUpdates.fetch ответ
    иметь поле minimumWaitDuration , которому должны подчиняться клиенты.

    Если поле minimumWaitDuration не установлено как в ответе, клиенты могут
    обновлять так часто, как они хотят, и отправлять столько угрозListUpdates или fullHashes запросов, сколько
    они хотят.

    Если поле minimumWaitDuration установлено как в ответе, клиенты не могут
    обновлять чаще, чем продолжительность ожидания. Например, если ответ fullHashes
    содержит минимальную продолжительность ожидания 1 час, клиент не должен отправлять запросы fullHashes
    до тех пор, пока не пройдет этот час, даже если пользователь посещает URL-адрес, хэш-префикс которого совпадает с локальным
    база данных.(Обратите внимание, что клиенты могут обновляться реже, чем минимальная продолжительность ожидания, но это
    может отрицательно повлиять на защиту.)

    Режим ожидания

    Автоматическая обратная отсрочка применяется как к
    fullHashes.find ответ и
    угрозаListUpdates.fetch ответ.

    Клиенты, получившие неудачный HTTP-ответ (то есть любой код состояния HTTP, кроме
    200 OK ) должен перейти в режим отката. Находясь в режиме отката, клиенты должны ждать вычисленное время.
    продолжительность, прежде чем они смогут отправить другой запрос на сервер.

    Клиенты должны использовать следующую формулу для расчета продолжительности времени отсрочки:

     МИН ((2  N-1  * 15 минут) * (RAND + 1), 24 часа) 

    N соответствует количеству последовательных безуспешных запросов, с которыми сталкивается клиент.
    (начиная с N = 1 после первого неудачного запроса). RAND — случайное число от 0 до 1
    который нужно выбирать после каждого неудачного обновления.

    Как только клиент получает успешный HTTP-ответ, он должен выйти из режима отката и следовать
    минимальная продолжительность ожидания
    указанное выше.

    apache 2.4 — Почему резко увеличивается время отклика при падении частоты запросов?

    Чем больше я смотрю на это, тем больше склоняюсь к мысли, что есть проблема со сбором данных.

    Во-первых, с вашим TPS происходит что-то действительно странное. Хотя в целом картина выглядит нормально, есть очень резкий излом , который происходит примерно в 9 вечера, а затем снова примерно в 7 утра. Нормальный график будет намного более плавным во время перехода в непиковые часы.

    Это говорит о том, что в профиле произошли изменения, и у вас, возможно, есть 2 разных типа клиентов:

    1. Тот, который работает только с 7:00 до 21:00, при большой громкости и
    2. другой, который, вероятно, работает круглосуточно, на меньших объемах.

    Вторая подсказка около 18:00. Большую часть времени до и после мы имеем профиль громкости high — высокий TPS и низкая задержка. Но примерно в 18:00 происходит резкое падение с 800-1000 об / мин до менее 400 об / мин.Что могло быть причиной этого?

    Третья подсказка — это уменьшение времени отклика 5-го процентиля. На самом деле я предпочитаю смотреть на минимальное время отклика (но 5-й процентиль, возможно, лучше) по двум причинам: он говорит мне, что время обслуживания (то есть время отклика минус очередь), и время отклика, как правило, соответствует распределению Вейбулла, что означает, что режим (или наиболее распространенное значение) чуть выше минимума.

    Таким образом, понижение в 5-м процентиле говорит мне, что произошел внезапный разрыв в ряду, и время обслуживания фактически снизилось, хотя и дисперсия, и среднее время отклика значительно увеличились.

    Следующие шаги

    На этом этапе я бы глубоко погрузился в журналы, чтобы выяснить, чем отличаются сэмплы малого объема 18:00 от сэмплов большого объема до и после него.

    Я бы поискал:

    • различий в географическом расположении (в случае, если задержка влияет на $ request_time)
    • разницы в URL (не должно быть)
    • различий в методе HTTP (POST / GET) (не должно быть)
    • повторных запроса с одного IP
    • и любые другие отличия…

    Кстати, «событие» в 18:00 является для меня достаточным доказательством того, что оно не имеет ничего общего с перегрузкой / активностью центра обработки данных. Чтобы это было правдой, перегрузка должна вызвать падение TPS, которое возможно в 18:00, но крайне маловероятно, чтобы вызвать устойчивое и плавно изгибающееся падение TPS в течение 10 часов с 21:00 до 7:00.

    Настроить частоту опроса и сбор данных для облачных интеграций

    Наши облачные интеграции получают данные из API облачных провайдеров.В New Relic вы можете изменить некоторые настройки, связанные со сбором данных, для облачной интеграции. Читайте дальше, чтобы узнать, какие изменения вы можете внести и по каким причинам.

    Обзор настроек

    Облачные интеграции New Relic получают данные из API облачных провайдеров. Данные обычно собираются из API-интерфейсов мониторинга, таких как AWS CloudWatch, Azure Monitor и GCP Stackdriver, а метаданные инвентаризации собираются из API-интерфейсов конкретных сервисов.

    Вы можете использовать панель состояния учетной записи, чтобы увидеть, как ваши облачные интеграции обрабатывают данные от поставщика облачных услуг.Если вы хотите сообщать о большем или меньшем количестве данных из облачных интеграций или если вам необходимо контролировать использование API-интерфейсов облачных провайдеров, чтобы предотвратить достижение лимитов скорости и дросселирования в вашей облачной учетной записи, вы можете изменить параметры конфигурации, чтобы изменить количество. данных, которые они сообщают. Два основных элемента управления:

    Примеры бизнес-причин, по которым вы хотите изменить частоту опроса, включают:

    • Биллинг: Если вам нужно управлять своим счетом AWS CloudWatch, вы можете уменьшить частоту опроса.Перед тем как сделать это, убедитесь, что это сокращение не влияет на условия оповещения, установленные для облачных интеграций.
    • Новые службы: Если вы развертываете новую службу или конфигурацию и хотите собирать данные чаще, вы можете временно увеличить частоту опроса.

    Изменить частоту опроса

    Конфигурация частоты опроса определяет, как часто New Relic передает данные от вашего облачного провайдера для каждой услуги. По умолчанию частота опроса установлена ​​на максимальную частоту, доступную для каждой службы.

    Чтобы изменить частоту опроса для облачной интеграции:

    1. Перейдите на one.newrelic.com> Инфраструктура .
    2. Выберите вкладку, соответствующую вашему поставщику облачных услуг.
    3. Выберите Настроить рядом с интеграцией.
    4. Используйте раскрывающиеся списки рядом с интервалом опроса данных каждые , чтобы выбрать, как часто New Relic будет собирать данные облачной интеграции.

    Укажите данные для выборки

    Вы можете указать, какую информацию вы хотите собирать для облачной интеграции, включив сбор дополнительных данных и применив несколько фильтров к каждой интеграции.

    Чтобы изменить эти настройки для облачной интеграции:

    1. Перейдите на one.newrelic.com> Инфраструктура .
    2. Выберите вкладку, соответствующую вашему поставщику облачных услуг.
    3. Выберите Настроить рядом с интеграцией.
    4. В разделе Сборники данных и фильтры , поверните переключатели, которые хотите. Включите .
    5. Для фильтров выберите или введите значения, которые вы хотите включить в отчетные данные.

    Сбор данных

    Для некоторых облачных интеграций требуется дополнительное количество вызовов API облачного провайдера для сбора данных.Например, для получения тегов для кластеров AWS Elastic Map Reduce требуется дополнительный вызов API службы.

    Чтобы лучше контролировать количество вызовов API, которые отправляются в вашу облачную учетную запись для этих интеграций, вы можете указать, когда вам нужно собирать эти типы данных. Доступны различные переключатели сбора данных в зависимости от интеграции.

    Toggle

    Описание

    Сбор тегов

    Для некоторых интеграций требуются дополнительные вызовы API к поставщику облачных услуг для сообщения тегов.Сбор тегов включен по умолчанию.

    Установите значение Выключено , если вы не хотите, чтобы интеграция собирала теги ваших облачных ресурсов и, таким образом, уменьшала объем вызовов API.

    Сбор расширенной инвентаризации

    Некоторые интеграции могут собирать расширенные метаданные инвентаризации о ваших облачных ресурсах, делая дополнительные вызовы API к поставщику облачных услуг. Метаданные, включенные в расширенный перечень для каждой облачной интеграции, описаны в документации по интеграции.

    Расширенная инвентаризация отключена по умолчанию .

    Измените это значение на На , если вы хотите отслеживать расширенные запасы. Это увеличит объем вызовов API.

    Сбор данных сегментов

    Доступно для интеграции AWS Kinesis Streams.

    По умолчанию мы не сообщаем метрики сегментов. Переключите это на на , если вы хотите отслеживать метрики сегментов в дополнение к метрикам потока данных.

    Сбор данных Lambda @ Edge

    Доступно для интеграции AWS CloudFront.

    По умолчанию мы не сообщаем данные Lambda @ Edge. Переключите это на на , если вы используете Lambda @ Edge в AWS CloudFront и хотите получить метаданные местоположения выполнения Lambda.

    Сбор данных узла

    Доступно для интеграции AWS Elasticsearch.

    По умолчанию мы не сообщаем метрики узлов Elasticsearch.Переключите это на на , если вы хотите отслеживать метрики узла в дополнение к метрикам кластера.

    Сбор данных шлюза NAT и Сбор данных VPN

    Доступно для интеграции AWS VPC.

    По умолчанию мы не сообщаем метрики шлюза NAT и VPN. Переключите их на на , если вы хотите отслеживать метрики и инвентаризацию шлюза NAT и VPN, в дополнение к инвентаризации других объектов, связанных с VPC.

    Сбор IP-адресов

    Доступно для интеграции AWS EC2.

    По умолчанию мы собираем метаданные экземпляра EC2, которые включают общедоступные и частные IP-адреса и сведения о сетевом интерфейсе. Установите значение Off , если вы не хотите, чтобы New Relic сохраняла и отображала эти IP-данные.

    Фильтры

    Если фильтр равен На вы указываете данные, которые хотите собирать; Например, если предел для региона AWS равен На , выбранные вами регионы будут теми, для которых будут собираться данные.В зависимости от интеграции доступны различные фильтры:

    Фильтр

    Описание

    Регион

    Выберите регионы, в которых есть ресурсы, которые вы хотите отслеживать. .

    Префиксы очередей

    Доступно для интеграции AWS SQS.

    Введите каждое имя или префикс для очередей, которые вы хотите отслеживать.Значения фильтра чувствительны к регистру.

    Префиксы балансировщика нагрузки

    Доступно для интеграции AWS ALB.

    Введите каждое имя или префикс для балансировщиков нагрузки приложений, которые вы хотите отслеживать. Значения фильтра чувствительны к регистру.

    Префиксы названий этапов

    Доступно для интеграции с AWS API Gateway.

    Введите каждое имя или префикс для этапов, которые вы хотите отслеживать.Значения фильтра чувствительны к регистру.

    Ключ тега

    Введите один ключ тега , связанный с ресурсами, которые вы хотите отслеживать. Значения фильтра чувствительны к регистру, и вы можете использовать этот фильтр в сочетании с фильтром значения тега .

    Значение тега

    Введите одно значение тега , связанное с ресурсами, которые вы хотите отслеживать.Значения фильтра чувствительны к регистру, и вы можете использовать этот фильтр в сочетании с ключом тега .

    Группа ресурсов

    Выберите группы ресурсов, связанные с ресурсами, которые вы хотите отслеживать.

    Возможное влияние на предупреждения и диаграммы

    Если вы измените конфигурацию интеграции, это может повлиять на условия предупреждений и графики. Вот некоторые моменты, которые следует учитывать:

    Если вы измените этот параметр…

    Это может иметь такое влияние …

    Любой параметр конфигурации

    При изменении параметров конфигурации данные, которые New Relic отображает в диаграммах инфраструктуры, на странице инвентаризации , а также изменения в ленте событий.

    Любые фильтры

    При создании условий оповещения после вы устанавливаете фильтры, убедитесь, что ваши оповещения не запускаются отфильтрованными ресурсами.

    Фильтр для регионов

    Если вы выполняете фильтрацию для определенных регионов, это может снизить объем данных, передаваемых в New Relic, что может вызвать предупреждение.

    Если вы создадите условие предупреждения для определенного региона, а затем отфильтруете этот регион, регион больше не будет сообщать данные и никогда не будет запускать предупреждение.

    Частота опроса

    При создании предупреждения убедитесь, что вы определяете порог для периода времени, который больше, чем частота опроса.

    Теги и расширенный инвентарь

    Если вы включите теги и / или расширенный инвентарь, New Relic сделает больше вызовов API облачному провайдеру, что может увеличить счет за использование API вашего облачного провайдера.

    Для получения дополнительной помощи

    Если вам нужна дополнительная помощь, ознакомьтесь с этими ресурсами поддержки и обучения:

    Ограничения скорости | Документы | Платформа разработчика Twitter

    HTTP-заголовки и коды ответов

    Используйте заголовки HTTP, чтобы понять, где находится приложение для заданного предела скорости в только что использованном методе.

    Обратите внимание, что заголовки HTTP являются контекстными. При использовании аутентификации только приложения они указывают предел скорости для контекста приложения. При использовании аутентификации на основе пользователя они указывают предел скорости для этого пользовательского контекста.

    • x-rate-limit-limit: потолок ограничения скорости для данной конечной точки
    • x-rate-limit-Осталось: количество запросов, оставшихся для 15-минутного окна
    • x-rate-limit-reset: оставшееся окно до сброса ограничения скорости, в секундах эпохи UTC

    Когда приложение превышает ограничение скорости для данной конечной точки Twitter API, API возвращает код ответа HTTP 429 «Too Many Requests», и в теле ответа будет возвращена следующая ошибка:

    {«ошибки»: [{«код»: 88, «сообщение»: «Превышен предел скорости»}]}

    Восстановление после ограничения скорости

    Когда эти ограничения скорости превышены, от конечной точки возвращается ошибка 429 «Слишком много запросов».Как обсуждается ниже, при возникновении ошибок ограничения скорости рекомендуется изучить заголовки HTTP, которые указывают, когда ограничение сбрасывается, и приостановить запросы до этого момента.

    Когда возникает ошибка «слишком много запросов» или ограничение скорости, необходимо снизить частоту выполнения запросов. При обнаружении ошибки ограничения скорости можно проверить заголовок HTTP x-rate-limit-reset:, чтобы узнать, когда будет сброшено ограничение скорости.

    Другой распространенный шаблон основан на экспоненциальной отсрочке, когда время между запросами начинается с малого (например,грамм. несколько секунд), а затем удваивается перед каждой повторной попыткой. Это продолжается до тех пор, пока запрос не будет успешным или пока не будет достигнуто разумное максимальное время между запросами (например, несколько минут).

    В идеале клиентская сторона знает о существующих ограничениях скорости и может приостанавливать запросы, пока не истечет текущее превышенное окно. Если вы превысите 15-минутный лимит, то подождите минуту или две, прежде чем повторить попытку.

    Обратите внимание, что сверх этих ограничений на количество запросов уровень доступа Standard Basic обеспечивает до 500 000 твитов в месяц с конечных точек последнего поиска и отфильтрованного потока.Если вы превысили месячный лимит на количество твитов, то для вашего приложения имеет смысл поднять уведомление и узнать день регистрации месяца и отложить запросы до этого дня.

    Советы, как избежать ограничений по количеству оценок

    Приведенные ниже советы помогут вам защитить код и снизить вероятность ограничения скорости. Некоторые функции приложения, которые вы, возможно, захотите предоставить, просто невозможны в свете ограничения скорости, особенно в отношении свежести результатов.Если информация в реальном времени является целью вашего приложения, изучите конечные точки отфильтрованного и дискретизированного потока.

    Кэширование

    Сохраните ответы API в своем приложении или на своем сайте, если вы ожидаете интенсивного использования. Например, не пытайтесь вызывать API Twitter при каждой загрузке целевой страницы вашего веб-сайта. Вместо этого вызывайте API нечасто и загружайте ответ в локальный кеш. Когда пользователи попадают на ваш сайт, загружается кешированная версия результатов.

    Расставить приоритеты для активных пользователей

    Если ваш сайт отслеживает множество пользователей Twitter (например, извлекает их текущий статус или статистику об их использовании Twitter), рассмотрите возможность запроса данных только для пользователей, которые недавно вошли на ваш сайт.

    Адаптироваться к результатам поиска

    Если ваше приложение отслеживает большое количество поисковых запросов, реже запрашивайте поиски, которые не дают результатов, чем те, которые дают. Используя задержку, вы можете быть в курсе самых популярных запросов, но не тратить циклы на запросы, которые очень редко меняются. В качестве альтернативы рассмотрите возможность использования конечной точки отфильтрованного потока и фильтрации с вашими поисковыми запросами.

    Denylist

    Если приложение нарушает ограничения скорости, оно будет отклонено.Запрещенные приложения не могут получить ответ от Twitter API. Если вам или вашей заявке было отказано и вы считаете, что произошла ошибка, вы можете использовать наши формы поддержки платформы, чтобы запросить помощь. Пожалуйста, укажите следующую информацию:

    1. Объясните, почему вы считаете, что ваша заявка была отклонена.
    2. Если вы больше не ограничены по скорости, подробно опишите, как вы устранили проблему.

    Мониторинг ваших API | Центр обучения Postman

    Postman Monitoring поможет вам быть в курсе работоспособности и производительности ваших API.За считанные секунды вы можете настроить службу мониторинга Postman и интегрировать ее в свой конвейер разработки API.

    Содержание

    Что такое мониторинг?

    Monitoring — это способ быть в курсе работоспособности и производительности ваших API. Встроенная служба мониторинга Postman помогает консолидировать дополнительный этап в жизненном цикле разработки API.

    Мониторы Postman основаны на коллекциях. Мониторы будут обрабатывать каждый запрос в вашей коллекции, аналогично бегуну коллекции.Вы также можете присоединить соответствующую среду с переменными, которые хотите использовать при каждом запуске коллекции.

    Ценность мониторов заключается в ваших тестовых сценариях. При запуске вашей коллекции монитор будет использовать ваши тесты для проверки полученных ответов. Когда один из этих тестов завершается неудачно, вы можете автоматически получать уведомление по электронной почте или настроить доступные интеграции для получения предупреждений в таких инструментах, как Slack, PagerDuty или HipChat.

    Вы можете настроить мониторы на работу так часто, как хотите.Для платных планов можно запланировать запуск мониторов каждые пять минут. Для бесплатных тарифных планов мониторы можно запланировать на запуск каждый час.

    Хотите увидеть мониторы Postman в действии? Посетите общедоступную рабочую область «Примеры мониторинга API Postman», чтобы найти коллекции примеров для некоторых распространенных сценариев использования мониторинга. Вы можете совместно работать над коллекциями в рабочей области, создавая вилку, или изменять коллекции для использования вашей командой, экспортируя и импортируя их в рабочую область вашей группы.

    Стоимость

    Мониторинг Postman можно использовать с любым платным или бесплатным тарифным планом.

    Пределы использования

    Вы можете узнать месячные лимиты использования вашего типа учетной записи, просмотрев свой обзор использования.

    Postman поддерживает ограничения по умолчанию на различные действия команды и пользователей, чтобы обеспечить общую производительность и доступность мониторинга.

    Сюда входят следующие ограничения:

    • Максимальное количество активных и приостановленных мониторов в команде = 300
    • Максимальное количество параллельных запусков нескольких мониторов = 500
    • Максимальное количество параллельных запусков одного монитора = 200

    Почтальон уведомит администраторов группы по электронной почте, если ваша команда столкнется с этими ограничениями, а также уведомит членов команды в приложении.

    Для получения помощи относительно этих ограничений и запроса изменений обратитесь в службу поддержки Postman.

    Избыточное

    При использовании бесплатной учетной записи почтальона, как только вы достигнете предела использования для мониторинга, вы будете автоматически ограничены до конца вашего месячного цикла. Чтобы продолжать использовать мониторинг до конца вашего цикла, вы можете обновить свой тарифный план Postman.

    При наличии платной учетной записи почтальона у вас есть возможность ограничить ежемесячное использование мониторинга, перейдя на панель управления счетами> Избыточность и отменив выбор Разрешить мониторинг за превышением .Превышение разрешено по умолчанию и оплачивается по текущему тарифу. Вы также можете купить блоки мониторинга.

    Неиспользованные запросы или блоки мониторинга не переносятся на следующий месяц.

    Узнайте больше о том, как Postman рассчитывает использование.

    Просмотр использования монитора

    Чтобы просмотреть общий обзор использования мониторинга вашей командой, вы можете получить доступ к панели мониторинга использования монитора, перейдя на панель мониторинга использования вашей группы и выбрав Просмотреть подробное использование мониторинга в разделе Мониторинг использования .

    Эта страница позволяет вам просмотреть текущий расчетный период вашей команды, количество сделанных запросов и запущенных мониторов. Он также идентифицирует мониторы по имени, коллекции, среде и создателю.

    Если вы обеспокоены или удивлены излишками, это место, где можно найти все активные мониторы вашей команды в одном месте, а также информацию, которая поможет вам и вашей команде принимать обоснованные решения по таким вопросам, как частота мониторинга.

    Как Postman рассчитывает использование монитора

    Postman рассчитывает использование мониторинга на основе фактического количества запросов, сделанных во время выполнения, которое может быть равно количеству запросов в вашей коллекции, а может и не быть.

    Если вы используете postman.setNextRequest () для пропуска запроса или выполнения запроса несколько раз, Postman учтет это при расчете использования. Почтальон также посчитает все запросы, необходимые для авторизации.

    Запуск сборов в мониторе

    Есть несколько различий между запуском коллекций в мониторе Postman и их запуском через средство запуска коллекций в приложении, поэтому обратите внимание на следующее.

    Переменные

    • Вы не можете импортировать существующие глобальные переменные в монитор, но можете создавать новые во время выполнения.
    • Глобальные переменные и переменные среды могут быть обновлены и впоследствии использованы во время выполнения мониторинга, однако они немедленно вернутся к своим исходным значениям.
      • Если вам требуются постоянные переменные, вы можете добавить вызов для обновления вашей среды с помощью Postman API.

    Вывод на консоль

    • В целях безопасности и конфиденциальности Postman не регистрирует тела запросов и ответов в консоли.
    • Postman также не будет регистрировать заголовки, поскольку они могут включать такие элементы, как файлы cookie и ключи авторизации.

    Сроки

    • Прогоны ограничены пятью минутами, включая все HTTP-запросы, ответы, предварительные запросы и тестовые сценарии.

    Загрузка файлов

    • Вы не можете прикреплять файлы к запросам, в отличие от конструктора запросов, однако вы можете загружать данные в виде необработанного тела запроса.

    Файлы данных

    • Вы не можете прикреплять файлы данных, в отличие от бегуна коллекции, но вы можете получить к ним доступ через API, включая Google Docs, Google Sheets и Dropbox.

    Несколько итераций

    • Мониторы по умолчанию выполняют только одну итерацию, но вы можете использовать setNextRequest () для выполнения нескольких итераций.

    Мониторинг в нескольких регионах

    • При настройке или редактировании монитора вы можете выбрать несколько географических регионов, из которых вы хотите запускать монитор, если у вас платный план, или выбрать почтальон для автоматического выбора региона за вас. Если у вас бесплатный план, вы можете обновить план Postman, чтобы вручную выбирать определенные регионы мониторинга.

    Если вас интересует регион, которого нет в интерфейсе Postman, обратитесь в службу поддержки Postman.

    Доступные API

    • Мониторы требуют, чтобы все URL-адреса были общедоступными в Интернете, поскольку они работают в облаке Postman. Монитор не может напрямую обращаться к вашему локальному хосту или выполнять запросы за брандмауэром. Однако для решения этой проблемы статические IP-адреса доступны в тарифных планах Postman Business и Enterprise.

    Следующие шаги

    Узнайте, как настроить монитор, и ознакомьтесь с API мониторинга и веб-сайтами, чтобы начать работу.

    Пределы скорости — Справочник API

    Пределы одновременных запросов

    Если параллельные запросы выполняются к одному ресурсу (например, параллельные запросы GET / POST / PATCH / PUT / DELETE к одному идентификатору пользователя), то запрос завершится ошибкой с кодом состояния 429 HTTP и сообщением об ошибке.

    Ошибки ограничения одновременной скорости возникают в очень редких случаях, например, когда ваше приложение делает несколько запросов за короткий период времени, чтобы отключить пользователя от вашей учетной записи.В этом случае вы получите сообщение об ошибке, подобное следующему:

    Слишком много одновременных запросов. Запрос на удаление связи с этим пользователем уже отправлен.

    Рекомендации по обработке ошибок

    Лучшим способом обработки ограничений скорости является обработка кодов состояния 429 Too Many Requests и создание механизмов повтора для неудачных запросов и уменьшения частоты запросов. API-интерфейсы с дневными ограничениями будут отправлять заголовок Retry-After с ответом, который указывает, когда вы можете сделать следующий запрос.

    В следующей таблице перечислены ошибки, с которыми вы можете столкнуться:

    Тип предела HTTP-статус Сообщение об ошибке
    Ограничение в секунду 429 Вы достигли максимальной скорости в секунду для этого API. Попробуйте позже. Пример заголовка ответа: X-RateLimit-Category: Light X-RateLimit-Type: QPS
    Суточный лимит 429 Вы достигли максимальной дневной ставки для этого API.Обратитесь к заголовку ответа, чтобы узнать, когда можно сделать еще один запрос. Пример заголовка ответа: X-RateLimit-Category: Heavy X-RateLimit-Type: Дневной лимит
    X-RateLimit-Limit: 30000
    X-RateLimit-Remaining: 0
    Retry — После: 2020-05-31T00: 00: 00Z

    Кэшируйте ответы везде, где это возможно, вместо того, чтобы часто делать один и тот же запрос. Мы также настоятельно рекомендуем использовать webhooks для подписки на события изменения данных вместо опроса изменений.Например, вместо опроса о собраниях пользователя используйте веб-перехватчики, чтобы подписаться на события о новых, обновленных и удаленных собраниях.

    Monitoring 101: Сбор правильных данных

    передовой опыт
    /
    мониторинг 101

    Этот пост из серии, посвященной эффективному мониторингу. Обязательно ознакомьтесь с остальной частью серии: «Оповещение о важных вещах» и «Исследование проблем с производительностью».

    Данные мониторинга поступают в различных формах — некоторые системы выдают данные непрерывно, а другие выдают данные только при возникновении редких событий.Некоторые данные наиболее полезны для при выявлении проблем ; некоторые из них в первую очередь полезны для при исследовании проблем. В более широком смысле, наличие данных мониторинга является необходимым условием для того, чтобы можно было наблюдать за во внутренней работе ваших систем.

    В этом посте рассказывается, какие данные нужно собирать и как классифицировать эти данные, чтобы вы могли:

    1. Получать значимые автоматические предупреждения о потенциальных проблемах
    2. Быстро исследовать и разбираться в проблемах производительности

    Независимо от формы вашего Для сбора данных мониторинга объединяющая тема такова:

    Сбор данных стоит недорого, но отсутствие их, когда вам это нужно, может быть дорогостоящим, поэтому вам следует все контролировать и собирать все полезные данные, которые вы можете разумно использовать.

    Эта серия статей основана на нашем опыте мониторинга крупномасштабной инфраструктуры для наших клиентов. Он также основан на работах Брендана Грегга, Роба Эващука и барона Шварца.

    Метрики фиксируют значение, относящееся к вашей системе в определенный момент времени — например, количество пользователей, вошедших в настоящее время в веб-приложение. Поэтому метрики обычно собираются один раз в секунду, одну в минуту или через другой регулярный интервал для мониторинга системы во времени.

    В нашей структуре есть две важные категории показателей: показатели работы и показатели ресурсов. Для каждой системы, которая является частью вашей программной инфраструктуры, подумайте, какие рабочие метрики и метрики ресурсов доступны в разумных пределах, и соберите их все.

    Рабочие метрики

    Рабочие метрики указывают на верхний уровень работоспособности вашей системы путем измерения ее полезного выхода. При рассмотрении показателей работы часто бывает полезно разделить их на четыре подтипа:

    • пропускная способность — это объем работы, выполняемой системой в единицу времени.Пропускная способность обычно записывается как абсолютное число.
    • успеха метрики представляют процент работы, которая была выполнена успешно.
    • ошибка Метрики фиксируют количество ошибочных результатов, обычно выражаемое как процент ошибок в единицу времени или нормализованное пропускной способностью для получения ошибок на единицу работы. Показатели ошибок часто регистрируются отдельно от показателей успеха, когда существует несколько потенциальных источников ошибок, некоторые из которых более серьезны или требуют действий, чем другие.
    • производительность метрики количественно определяют, насколько эффективно компонент выполняет свою работу. Самая распространенная метрика производительности — задержка, которая представляет время, необходимое для выполнения единицы работы. Задержка может быть выражена как среднее значение или процентиль, например «99% запросов, возвращенных в течение 0,1 секунды».

    Эти показатели невероятно важны для наблюдения. Это масштабные и комплексные меры, которые могут помочь вам быстро ответить на самые насущные вопросы о внутреннем состоянии и производительности системы: доступна ли система и активно ли она выполняет то, для чего она была создана? Насколько быстро он производит работу? Какого качества эта работа?

    Ниже приведены примеры показателей работы всех четырех подтипов для двух распространенных типов систем: веб-сервера и хранилища данных.

    Пример показателей работы: веб-сервер (на время 2015-04-24 08:13:01 UTC)

    пропускная способность запросов в секунду 312
    успех процент ответов 2хх с момента последнего измерения 99,1
    ошибка процент ответов 5хх с момента последнего измерения 0,1
    производительность Время отклика 90-го процентиля в секундах 0.4

    Пример показателей работы: Хранилище данных (на время 2015-04-24 08:13:01 UTC)

    пропускная способность запросов в секунду 949
    успех процентов запросов, успешно выполненных с момента последнего измерения 100
    error процент запросов, дающих исключения с момента последнего измерения 0
    error процент запросов, возвращающих устаревшие данные с момента последнего измерения 4.2
    производительность Время запроса 90-го процентиля в секундах 0,02

    Показатели ресурсов

    Большинство компонентов вашей программной инфраструктуры служат ресурсами для других систем. Некоторые ресурсы являются низкоуровневыми — например, ресурсы сервера включают такие физические компоненты, как ЦП, память, диски и сетевые интерфейсы. Но компонент более высокого уровня, такой как база данных или микросервис геолокации, также может считаться ресурсом, если другой системе требуется этот компонент для выполнения работы.

    Показатели ресурсов могут помочь вам восстановить подробную картину состояния системы, что делает их особенно ценными для исследования и диагностики проблем. Для каждого ресурса в вашей системе попробуйте собрать показатели, охватывающие четыре ключевые области:

    1. использование — это процент времени, в течение которого ресурс занят, или процент используемой емкости ресурса.
    2. насыщение — это мера объема запрошенной работы, которую ресурс еще не может обслужить, часто ставится в очередь.
    3. ошибки представляют собой внутренние ошибки, которые могут не наблюдаться в работе, производимой ресурсом.
    4. доступность представляет собой процент времени, в течение которого ресурс отвечал на запросы. Эта метрика четко определена только для ресурсов, доступность которых можно активно и регулярно проверять.

    Вот примеры показателей для нескольких общих типов ресурсов:

    Дисковый ввод-вывод% времени, в течение которого устройство было занято Длина очереди ожидания # ошибок устройства% времени для записи
    Память% от общего объема используемой памяти Использование подкачки Н / Д (обычно не наблюдается) Н / Д
    Микросервис среднее% времени, в течение которого каждый поток обслуживания запросов был занят # поставлен в очередь запросы # внутренние ошибки, такие как перехваченные исключения% время доступности службы
    База данных средний% времени, в течение которого каждое соединение было занято # поставленные в очередь запросы # внутренние ошибки, например.грамм. ошибки репликации% времени доступности базы данных

    Другие метрики

    Есть несколько других типов метрик, которые не являются метриками работы или ресурсов, но, тем не менее, могут помочь сделать сложную систему наблюдаемой. Общие примеры включают подсчет попаданий в кеш или блокировок базы данных. Если сомневаетесь, запишите данные.

    Помимо показателей, которые собираются более или менее непрерывно, некоторые системы мониторинга также могут фиксировать события: дискретные, нечастые события, которые могут обеспечить решающий контекст для понимания того, что изменилось в поведении вашей системы.Некоторые примеры:

    • Изменения: выпуски внутреннего кода, сборки и сбои сборки
    • Оповещения: внутренние оповещения или сторонние уведомления
    • События масштабирования: добавление или вычитание хостов

    Событие обычно несет достаточно информации, чтобы оно могло интерпретироваться самостоятельно, в отличие от одной точки данных метрики, которая, как правило, имеет смысл только в контексте. События фиксируют , что произошло , в момент времени , с необязательной дополнительной информацией .Например:

    Исправление f464bfe выпущено в рабочую среду 2015–05–15 04:13:25 UTC Истекшее время: 1,2 секунды
    Запрос на вытягивание 1630 объединено 2015–05–19 14 : 22: 20 UTC Коммиты: ea720d6
    Сбой ночного накопления данных 2015–05–27 00:03:18 UTC Ссылка на журналы неудачных заданий

    События иногда используются для генерации предупреждения — кто-то должен быть уведомлен о событиях, таких как третий пример в таблице выше, который указывает, что критически важная работа не удалась.Но чаще они используются для исследования проблем и корреляции между системами. В общем, относитесь к событиям как к метрикам — они представляют собой ценные данные, которые нужно собирать везде, где это возможно.

    Собираемые вами данные должны иметь четыре характеристики:

    • Понятные. У вас должна быть возможность быстро определить, как была захвачена каждая метрика или событие и что они представляют. Во время простоя вам не захочется тратить время на выяснение значения ваших данных. Делайте ваши показатели и события как можно более простыми, используйте стандартные концепции, описанные выше, и четко называйте их.
    • Гранулированный. Если вы собираете метрики слишком редко или усредняете значения за длительные промежутки времени, вы можете потерять способность точно реконструировать поведение системы. Например, периоды 100% использования ресурсов будут скрыты, если они будут усреднены с периодами более низкого использования. Собирайте метрики для каждой системы с частотой, которая не скроет проблемы, не собирая так часто, что мониторинг становится ощутимо обременительным для системы (эффект наблюдателя) или создает помехи в ваших данных мониторинга за счет выборки временных интервалов, которые слишком короткие, чтобы содержать значимые данные .
    • С тегами по объему. Каждый из ваших хостов работает одновременно в нескольких областях, и вы можете проверить общую работоспособность любой из этих областей или их комбинаций. Например: как обстоят дела с производством в целом? Как насчет производства на северо-востоке США? Как насчет конкретной роли или услуги? Важно сохранить несколько областей, связанных с вашими данными, чтобы вы могли предупреждать о проблемах из любой области и быстро расследовать сбои, не ограничиваясь фиксированной иерархией узлов.
    • Долговечный. Если вы сбрасываете данные слишком рано или если по прошествии определенного периода времени ваша система мониторинга объединяет ваши метрики для снижения затрат на хранение, вы теряете важную информацию о том, что происходило в прошлом. Хранение исходных данных в течение года или более значительно упрощает понимание того, что такое «нормальный», особенно если ваши показатели имеют месячные, сезонные или годовые вариации.

    В таблице ниже различные типы данных, описанные в этой статье, сопоставляются с разными уровнями срочности оповещения, указанными в сопутствующем сообщении.Короче говоря, запись — это оповещение с низкой срочностью, которое не уведомляет никого автоматически, но записывается в систему мониторинга на тот случай, если оно станет полезным для последующего анализа или расследования. Уведомление — это оповещение средней срочности, которое уведомляет того, кто может решить проблему, не отвлекаясь, например, по электронной почте или в чате. стр. — это срочное оповещение, которое прерывает работу, сон или личное время получателя в любой час. Обратите внимание, что в зависимости от серьезности уведомление может быть более подходящим, чем страница, или наоборот:

    Метрика работы: Пропускная способность Page значение намного выше или ниже обычного, или существует аномальная скорость изменений
    Показатель работы: Успех Страница процент успешно обработанной работы падает ниже порогового значения
    Показатель работы: Ошибки Страница частота ошибок превышает пороговое значение
    Метрика работы: Производительность Page работа занимает слишком много времени (например,g., производительность нарушает внутренний SLA)
    Показатель ресурса: использование Уведомление приближается к критическому пределу ресурсов (например, свободное дисковое пространство падает ниже порогового значения)
    Показатель ресурса: Насыщенность Номер записи ожидающих процессов превышает пороговое значение
    Метрика ресурса: Ошибки Запись Количество ошибок в течение фиксированного периода превышает пороговое значение
    Метрика ресурса: Доступность Запись ресурс недоступен для определенного процента время, превышающее пороговое значение
    Событие: связанное с работой Страница критическая работа, которая должна была быть завершена, сообщается как незавершенная или неудачная
    • Все инструменты и сбор как можно большего количества рабочих показателей, показателей ресурсов, и события, как вы разумно можете.