Большое обновление базы видимости в результатах поиска
22 ноября 2016
Автор: Nikolay Khivrin

Большое обновление базы видимости в результатах поиска

Пол года назад в Яндексе появилась возможность получения частоты запроса с учетом точного указания последовательности слов. Это стало возможным благодаря использованию оператора с квадратными скобками.

Например, стало возможным определить отдельно статистику по запросам "калева окна" и "окна калева"





Ранее мы использовали только один из этих двух запросов, так как была неизвестна частота каждого запроса в отдельности. Однако за последние месяцы мы расширили нашу базу запросов и теперь все популярные перестановки также включены в нашу базу с "правильной" статистикой.

Последние пол года мы решали задачу по сбору всей базы запросов, по которым есть измеримая частота (т.е. wordstat > 0). Мы хотели собрать самую полную и при этом чистую базу запросов для проверки видимости сайтов. На текущий момент мы считаем эту задачу завершенной, так как по нашим оценкам, более 93% всех запросов уже находятся в нашей базе.

Как мы оценивали полноту нашей базы?
— Подход основан на потоке случайных запросов пользователей, которые мы берем из статистики переходов на различные сайты. Мы смотрим наличие запроса в нашей базе и в случае его отсутствия, пробиваем частоту через wordstat.yandex.ru. Если Яндекс возвращает такую частоту, то мы понимаем, что этот запрос по каким-то причинам ранее не попал в нашу базу.

Очевидно, что все популярные запросы уже давно были в нашей базе. Проблема была именно с запросами с частотой показов в месяц менее 50.

В результате мы собрали базу запросов, которая включает более 93% фраз с частотой показов по wordstat.yandex.ru > 0.

Теперь мы выработали довольно точные критерии составления базы запросов для сканирования видимости по различным регионам с учетом данных о совокупной частоте по всем регионам:
Москва — wordstat > 0
Киев — wordstat > 5
Санкт-Петербург, Минск, Астана — wordstat > 50
Остальные регионы — wordstat > 100

Ограничение по сканированию регионов, кроме Москвы, вызвано техническими ограничениями и нашим нежеланием создавать высокую нагрузку для поисковых систем.

На текущий момент мы заканчиваем сканирование видимости в Яндексе по Москве. Полнота и чистота базы уже заметно улучшились.

Наша база содержит общие показатели видимости, которые рассчитываются с определенной задержкой после сбора данных. Так например, по сайту okna.ru мы показываем 2300 запросов по базовому отчету:



А в списке запросов их уже 3385 штук:


Свежие данные по числу запросов появятся в общем отчете через пару недель.

Ну и конечно, скептики решат сравнить полноту данных с другими сервисами анализа видимости. Например, по сайту okna.ru в нашей базе 3385 запросов. А такие данные дают два других популярных инструмента:





Кстати, старая видимость в megaindex.ru по сайту okna.ru тоже дает меньше запросов —
https://www.megaindex.ru/index.php?tab=siteAnalyze&site=okna.ru



Но тут важно понимать, что видимость в megaindex.ru продолжает обновляться каждое обновление поисковой базы, т.е. каждые 4-5 дней. А это не раз в месяц, как у всех остальных инструментов на рынке, что позволяет практически мгновенно отслеживать изменения после внедрения изменений на сайте или смени алгоритмов поискового ранжирования.

Оцените работу сервиса видимости на собственных сайтах:
https://ru.megaindex.com/visibility/

Обсуждение

Для добавления комментария, пожалуйста, авторизуйтесь