Как обнаруживать плохие внешние ссылки и проводить их мониторинг + Мнения экспертов

Как обнаружить и проводить мониторинг плохих внешних ссылок

Основы

• Фактор авторитетности;
• Манипуляция в тексте ссылки;
• Низкий авторитет ссылки.

Фактор авторитетности

Манипуляция в тексте ссылки

Низкий авторитет ссылки

Шаг 1: Получить данные по ссылкам

• Активные ссылки;
• Уникальные ссылки.

• Файл для Excel;
• Файл для Google Sheets;
• Текстовый файл.

• backlinks;
• backlinks/total;
• backlinks/subdomains;
• backlinks/changes;
• backlinks/url_counters_total;
• backlinks/counters.

api.megaindex.com/backlinks?key=[ключ]&domain=indexoid.com&link_per_domain=1&offset=0&count=100&sort=link_rank&desc=1

api.megaindex.com/backlinks?key=[ключ]&domain=smmnews.com&link_per_domain=1&offset=0&count=100&sort=link_rank&desc=1

Шаг 2: Выгрузка анкоров

Шаг 3: Анализ анкоров

тут
здесь
такой
вот
ссылка
этот
описание
вот такой
этого
такую
такие
эта
сюда
этой
ссылке
вот этот
такое
этих
этим
выбирай
вот такую
есть
таких
этом
таким
моя ссылка
вот тут
подробнее
пример
этому
вот так
линк
по этой ссылке
подробное описание
этой ссылке
такой вот
вот она
вот эти
источник
клик
подробности
посмотреть
вот здесь
вот например
такой
тута
вот что
здесь
описание тут
ссылочка
такими
такой вариант
типа такого
этот
вот такой
вот этого
еще
по ссылке
подробнее
посетить сайт автора
рекомендую
этими
вот ссылка
вот такое
вот, например
как-то так
пишут
смотри
ссылку
такому
типа этого
вариантов
взял
вот такой вот
вот.
подобное
подробное описание тут
полное описание
смотреть
смотреть тут
списочек
ссылка на описание
ссылко
сцылко
такая
эта модель
это чудо
во
вот они все
все отзывы
все параметры
держи
другие
другой
например вот
описалово
описание
этого списка
ссылка
например
к примеру
из этих
инфа
инфо
к примеру
например
свою
сдесь
сей девайс
смотрим тут
смотрите ссылку
такого типа
типа таких
читай
вот описание
вот такая
вот это
смотрим

Шаг 4: Создайте анкор-лист

Автоматическое определение SEO ссылок

Нужно ли удалять все плохие ссылки

• Hi-tech 6.37%
• Авто 10.96%
• Бизнес 14.41%
• Дом 8.67%
• Культура 12.82%
• Медиа 7.41%
• Наука 13.16%
• Общее 8.56%
• Общество 12.26%
• Отдых 10.88%
• Порталы 9%
• Работа 9.06%
• Развлечения 14.12%
• Спорт 10.22%
• Справки 9.7%

Как избавиться от влияния найденных плохих ссылок

Обращение к владельцу сайта

Отключить ссылки

После удаления плохих обратных ссылок

Как появляются плохие внешние ссылки

Почему важно удалять плохие внешние ссылки

Мнения экспертов по поисковой оптимизации

Будем подразумевать под плохими ссылками те, которые могут давать негативный вклад в ранжирование сайта. В этом случае, можно выделить две типовых ситуации:

1. Резкий всплеск числа уникальных ссылочных доноров сайта, который потенциально может свидетельствовать о ссылочной атаке со стороны конкурентов.

2. Наличие в анкор-листе adult-слов и терминов (если сам проект не соответствующей тематики).

Мы производим мониторинг наличия/отсутствия данных анкоров и резких всплесков в модуле ведения проектов от «Пиксель Тулс». В роли источника информации о ссылках и анкорах выступает панель вебмастера Яндекса. В целом, если есть соответствующие инструменты для регулярного контроля, то можно использовать и другие источники, которые, порой обновляются и ещё быстрей чем данные в панели. Это может быть база «MegaIndex» или других крупных сервисов.

Из советов:
— проводите регулярный мониторинг, мы делаем это с помощью «Пиксель Тулс»
— своевременно реагируйте на резкие всплески и появление ссылок с adult-анкорами (просматривайте источники, отклоняйте с помощью Disavow, сообщайте в поддержку поисковых систем и так далее)

Для быстрого определения некачественных ссылок я использую сервис checktrust.ru. Он позволяет массово проверять список ссылок на траст и спам. Приоритет я отдаю параметру траста.

В идеале все ссылки, которые вызывают подозрение, нужно проверять вручную. Я перехожу на сайт, где размещена ссылка, и смотрю, чтобы страница была в индексе Яндекса и Google. Это можно проверить с помощью RDS Bar или букмарклетов для браузеров (погуглите "букмарклет индексация страницы").

Также обращаю внимание на общее количество страниц сайта в индексе. Это можно сделать на сервисе be1.ru/stat/ или a.pr-cy.ru/. Важно, чтобы количество страниц в индексе Яндекса не превышало таковое в Google более, чем в 3-4 раза, и наоборот.

Смотрю на поисковую видимость страницы, где размещена ссылка на продвигаемый сайт. Делаю это с помощью сервиса serpstat.com. Чем выше видимость, тем лучше.

Когда беру на продвижение новый сайт, то в первую очередь обращаю внимание на те ссылки, которые размещены на сайтах не по тематике, на блогах с большим числом исходящих ссылок и на ссылки с форумов. Часто ссылки такого плана оказываются некачественными.

Далее собираю список некачественных ссылок и добавляю их в инструмент отклонения ссылок Google Disavow Tool. Там, где это возможно, стараюсь удалить ссылки.

У нас 2 подхода к определению плохих ссылок. Прежде всего мы считаем, что с плохих сайтов всегда идут плохие ссылки. Поэтому смотрим в обратных ссылках такие домены, которые не устраивают нас по качеству. Второй вопрос — это анкоры, которые нерелевантный нашим запросам.

Из инструментов используем панели вебмастеров от Google и Яндекс, ahrefs.com + свои наработки, которые завязаны на ZennoPoster и SERP от Google. Также тестировали другие сервисы, но отказались от них.

Ссылочный сигнал, последнее время, один из самых «спорных» в SEO-сообществе. Но мы в SAPE видим, что спрос на ссылки по-прежнему высок.
Мы в SAPE, конечно же, имеем достаточно обширную базу сайтов-доноров и сайтов-акцепторов. Периодически проводим исследования на эту тему, часть которых попадает в паблик. Т.е. данные, которые мы получаем в результате этих измерений, мы стараемся интегрировать в алгоритмы SEOWIZARD. На основании этих алгоритмов, мы и сделали инструмент «чистки», который я использую в IQAD. Конечно, мне нельзя рассказывать, как он работает или дать кому-либо доступ, но я скажу, о самых важных параметрах арендных ссылок, на которые мы обращаем внимание при покупке\снятии (я говорю о методах автоматизации):

• Alexa Traffic Rank
• Majestic входящих ссылок


• Linkpad исходящих ссылок
• SemRush рейтинг
• SemRush поисковый трафик
• SimilarWeb Global Rank

А вот те параметры, которые являются ценообразующими, зачастую, не так важны, видимо из-за погони за ними со стороны ссылочных доноров:

• тИЦ
• количество страниц в индексе Я\Г
• возраст домена
• и прочее

Из тенденций, замеченных в 2018 году, хочу обратить внимание, что все важнее становится связка донор-акцептор, при том, что донор, хорошо показавший себя для одного акцептора, для другого может быть бесполезен. И эту тенденцию замечаем не только мы, SEO-оптимизаторы выкупают десятки страниц таких доноров. Так же, все больший интерес вызывают крауд-ссылки.

В итоге, для отбора рабочего донора, нужно обращать внимание на те параметры, которые являются не ценообразующими и пытаться построить собственную систему оценки качества доноров, основываясь на этих метриках. Иногда приходится строить такие таблицы для каждой тематики. “Рабочие” доноры раскупают постранично. Крауд-ссылки закупают уже почти все, кто продвигается в конкурентных тематиках.

Есть один простой способ проверки работоспособности ссылки: ставишь Линк с потенциального донора с уникальным анкором и ищешь по этому анкору в выдаче пс акцептора. Если находится, то можно ставить на основной money site. Для ускорения процесса донора можно удобрить любыми линками, чтобы робот быстрее узнал о вашей ссылке.

Мнения поисковых оптимизаторов

В наших проектах ЛУН и Flatfy мы условно делим ссылки на трастовые и релевантные. Трастовые — ссылки с СМИ (городских порталов, обще новостных сайтов) и профильных площадок (ресурсы об аналитике, seo, дизайне) Релевантные — с сайтов из тематики недвижимости (сайты застройщиков, риэлтеров, доски объявлений). В тематике недвижимости виральности не много и потому органических ссылок у нас мало, а есть только те, которые мы можем "строить". Их мы отслеживаем через внутренние инструменты на предмет пропажи или изменения в коде. Если эти статьи используют другие порталы или просто кто-то ссылается на нас, то мы узнаем об этом через Google Alerts и Ahrefs Alerts. Таким образом, сравнивая список "построенных" нами ссылок и тех, которые выдают сервисы, мы находим ссылки на проверку. Далее мы дополняем их данными из Google Search console и из других сервисов: Semrush, Serpstat. Раз в пару месяцев мы используем нашу систему оценки с использованием машинного обучения и отправляем в disavow tool не устраивающие нас ссылки, а иногда и целые домены. Система была обучена на множестве разнотипных сайтов с данными из SEO сервисов (Majestic TF, CF, Ahrefs DA, Similarweb sessions, sources и т.д.), а также с оценками от наших in-house специалистов.

Как говорит Яндекс – ссылки не работают, но почти каждый SEO специалист может определить ссылочный профиль того или иного сайта. Выбор доноров для ссылок довольно длительный процесс, чаще всего именно на поиск хороших сайтов уходит много времени, чем на чистку плохих. Определить заспамленных доноров очень хорошо помогают следующие сервисы:
Для Рунета: Мегаиндекс, ЛинкПад, Serpstat, SeRanking, ChechTrust
Для остального: Ahrefs, semrush, Link Reaserch SEO
Главное определится с выбором сервисом которые помогают вытащить беки, и затем их проверить. А идеалов в показателях нет. Поэтому не буду придумывать колесо, любая ссылка может как навредить так и помочь.

Ищу через ahrefs. Смотрю анкоры ссылок и рейтинг домена. Отдельно могу прогнать через чектраст, смотрю соотношение TF и CF, SPAM домена и трафик по симиляр вебу

Ссылки являются очень важным фактором при продвижении сайта. Я обычно использую ahrefs.com для анализа ссылок. Этот инструмент помогает найти все ссылки на сайт. Анализ всей ссылочной массы позволяет выявить нетематические и "плохие" ссылки и уже ручками отправить их в Google Disavow Links Tool. Чистка нетематических и спамных ссылок помогает увеличить рост позиций и избежать попадания под фильтр.

Как определить хорошая ссылка или плохая? Для меня это анкор либо ресурс с которого стоит ссылка. По анкору можно понять — спамит ли тебя конкурент, либо кто то не качественно делает линкбилдинг. По трассу донора можно понять — даст ли эта ссылка статический вес твоему ресурсу да и вообще нужна ли для сайта такая ссылка. Анкоры и траст можно посмотреть сервисами: ahrefs.com, serpstat.com, seranking.com, majestic.com. Также можно использовать декстопную программу — SEO PowerSuite. Стоимость ее использования гораздо ниже чем вышеприведенных сервисов.

Напишу со своей колокольни. Для бэкграунда: белая ниша, белое продвижение, штаты, Google. Опять же, для понимания, есть 2 типа "санкций": manual actions (ручные санкции) и фильтры (алгоритмические санкции). В случае первых вы получите сообщение в Search Console, в случае вторых — вы не получите оповещения, но о них, по сути беспокоиться нечего, так как Google Penguin работает в реальном времени и не пессимизирует за спам, а просто не учитывает спамные ссылки в ранжировании. Опять же, подходить к анализу ссылочной массы можно по разному: либо проактивно, либо реактивно, первое означает, что вы постоянно мониторите динамику набора ссылочной массы и оцениваете среднее качество полученных ссылок по периодам, чтобы отследить спам и попытку вас потопить нечестивыми конкурентами (что, на самом деле, крайняя редкость, потому что это стоит с их стороны ресурсов и эффект не гарантирован). Либо реактивно — вы получаете сообщение в SC о ручных санкциях. В первую очередь надо посмотреть на спайки в динамике набора ссылочной массы за последний период, не обусловлены ли они спамом. Если здесь все очевидно — то можно для начала ограничиться этим периодом (есть сайты с колоссальным ссылочным, и там анализ всего ссылочного может занять очень много времени). Если таких аномалий нет — придется запастись отчетами о ссылках на ваш сайт из SC, Ahrefs и Majestic, только отчетом из SC нельзя ограничиваться, так как там показывается только часть ссылок и доменов, которые известны Google. Если ссылок много, выгружаем доменные метрики — DA, Spam Score (MOZ), DR (Ahrefs), TF, CF, основные тематики домена (Majestic), дата регистрации домена, владелец домена, срок истечения домена (WhoIs). В качестве более сложной метрики можно проверить позицию доменов в выдаче Google по доменному имени. Смотрим red флаги, заносим худшее в disavow лист, скрэпим, собираем контакты, пишем вэбмастерам.
В первую очередь отсекаем конкретный мусор — домены у которых одноврнменно высокий CF, низкий TF, низкие DA и DR, левая тематика, скрыты контакты WhoIs и которые не находятся в топе по доменному имени. Если работы с этой корзиной доменов недостаточно — переходим к следующей. Здесь 2 основных принципа: 1) не навреди, так как мы не можем со 100% уверенностью сказать, что Google считает спамом, чтобы не отсечь ссылочного больше, чем надо и поэтому не потерять позиции после снятия ручных санкций. 2) показать представителям Google, что вы реально потрудились, поэтому писать вэбмастерам надо, даже если не будет результата, ограничиваться одним disavow файлом нежелательно. Если говорить честно, то большинство санкций провоцируют оптимизаторы, когда неграмотно пытаются накрутить различные факторы, так что владельцы сайтов должны в первую очередь спросить их, где они закупали ссылки, потому что им лучше знать, на какой мусор они потратили бюджеты.

Ссылки смотрим в Google Webmasters и ahrefs.com. Если стоить задача проанализировать ссылки — экспортируем ссылки из этих сервисов и загружаем в Netpeak Checker — там анализируем показатели Google SERP, Moz и Majestic и отсеиваем самых плохих доноров, после чего оставшиеся доноры изучаем вручную.

Разделим обнаружение и мониторинг плохих внешних ссылок на этапы.
Этап 1: обнаружение
Для того чтобы найти «плохие» ссылки, необходимо сначала полностью проверить ссылочную массу сайта. Для этого в первую очередь воспользуйтесь бесплатными сервисами Яндекс и Google.
Остальные уже будут платные или условно бесплатные (ограниченный функционал/количество выгружаемых ссылок).
А далее в порядке убывания даю сервисы, которыми мы пользуемся сами и рекомендуем другим:
ru.ahrefs.com
checktrust.ru/backlinks-checker.html
serpstat.com
ru.megaindex.com/backlinks
Этап 2: Проверка качества. Далее Вы получите сводный Excel-файл со всеми ссылками на Ваш сайт, который мы загружаем и проверяем через checktrust.ru. Сервис выдаст критические показатели по трасту и спаму. Обычно в первую очередь мы вручную проверяем ссылки, которые показали плохие результаты по обоим критериям. Также, необходимо проверить ссылку на тематичность (релевантность донор – акцептор).
Лайфхак, т.к. Вы выгрузите большой объем ссылочной массы в Excel, то для проверки Вам прийдется каждую ссылку посмотреть в браузере. Т.е. прийдется копирвать-вставлять все время из документа в браузер. Это ужасно долго и неудобно. Для того, чтобы активировать все ссылки (доступны по клику на ссылку), воспользуйтесь надстройкой для Excel — Links Live — seoautomatic.com/unique-tools/activate-excel-links/
Этап 3. Удаление ссылок. К сожалению, по большей части удалять ссылки вручную с форумов или каталогов невозможно! Банально — у Вас просто может не быть доступов для редактирования. Проще – если Вы поняли, что закупали ссылки и у Вас остались доступы к бирже, где Вы сможете заказать удаление ссылки вебмастером. Но обычно все бывает не просто, особенно это касается, если Вам важен ссылочный профиль для Яндекса. В Google все проще, для этого специальный инструмент — Google Disallow Tool. Для работы с ним выберите свой сайт в Google Webmaster Tools — google.com/webmasters/tools/. Откройте страницу «Отклонение ссылок». Выберите свой сайт. Нажмите «Отклонение ссылок». Нажмите «Выбрать файл». Загрузите файл. Требования к файлу? 1. Текстовый формат (.txt) 2. Кодировка UTF-8 или 7-bit ASCII 3. В документе должны быть указаны только те ссылки, который вы хотите отклонить. Если нужно отклонить весь домен, добавьте правило domain:example.com При этом также важно понимать, что сразу удалять/отклонять все ссылки не нужно, а следует подходить к этому аккуратно, в зависимости от объема ссылочной массы, смотрим сколько и каких ссылок за 1 раз можем удалить.
Этап 4. Мониторинг ссылочной массы Для мониторинга обратных ссылок мы используем linkchecker.pro, который мониторит наличие анкора ссылки, ее индексацию, наличие в кэше Google, открыта ссылка или закрыта от индексации и отправляет уведомления, если ссылка «пропадает», либо она становится «плохой».

Ссылки анализирую с помощью Ahrefs — лучший сервис на данный момент по работе с ссылками. Для чистки ссылочного профиля использую такие показатели донора как DA, Ref. Domains, Traffic, External links и анализирую логи сервера.

Выгружаем ссылки через semrush, Google search console и link assistant
затем проверяем на токсичность в семраш, отобранные токсичные ссылки затем проверяем вручную

Главный совет: не покупать плохие ссылки. При покупке проверяем ссылки через Checktrust — там простой и понятный фильтр по качеству доноров.
Если плохие ссылки все же просочились (или их поставили без вашего ведома) проводим проверку через Majestic. У этого сервиса база одна из самых полных.

Для начала нужно понять, что такая плохая внешняя ссылка. Я считаю, что это ссылка, которая не решает пользовательской задачи — по ней нет переходов или вероятность перехода отсутствует.

У Google есть патент, в котором говорится, что вес ссылки зависит от вероятности перехода по ней. Поэтому, плохая ссылка — это та, вероятность перехода по которой отсутствует или она очень маленькая.

Выявить спамные ссылки можно через панели веб-мастеров Яндекс.Вебмастер и Бинг.Вебмастер. В Google Search Console же нет возможности посмотреть таблицу в виде страницы-донора и анкора, который ведёт с неё. Также, советую посмотреть переходы по ссылке через сервисы веб-аналитики. Если в течении пару месяцев после размещения ссылки нет переходов по ней, то стоит подумать о целесообразности на такой площадке или изменения формата размещения.
Также, можете посмотреть наличие Seo-ссылок через инструмент Внешние ссылки сервиса Мегаиндекс.