Новости

Сайты, блокирующие сторонние инструменты ссылок Ahrefs & Majestic

Многие оптимизаторы в значительной степени полагаются на инструменты для ссылок, такие как Ahrefs и Majestic, для аудита ссылок или просто для отслеживания новых ссылок на сайты Многие оптимизаторы в значительной степени полагаются на инструменты для ссылок, такие как Ahrefs и Majestic, для аудита ссылок или просто для отслеживания новых ссылок на сайты. Но некоторые сайты устали от получения запросов на удаление ссылок или продают обратные ссылки и не хотят, чтобы они отображались как анализируемые ссылки низкого качества, и блокируют такие сайты, как Ahrefs а также величавый (вместе с другими инструментами ссылок, такими как Moz) от сканирования их.

Утомление ссылки удаления запроса спама

Многие веб-мастера утомляют запросы на удаление ссылок, особенно на крупных качественных сайтах, которые могут иметь десятки тысяч исходящих ссылок. А поскольку многие электронные письма автоматически пересылаются, вебмастера мало что могут сделать, кроме как, по иронии судьбы, повторных запросов на удаление ссылок как спама.

Скрытие схематичных ссылок

Но есть и другая сторона медали, где те, кто продает некачественные обратные ссылки, не обязательно хотят, чтобы они появлялись на сайтах инструментов ссылок, таких как Majestic, особенно если они появляются с схематичных сайтов или имеют огромное количество с одного сайта. ,

В Представление YouMoz от Роберт Фишер Он рассказывает о том, какую длину собираются оптимизаторы, чтобы предотвратить доступ к их сайтам сторонних ботов.

Блокирование сторонних инструментов-ботов

Сайты блокируют роботов, сканирующих ссылки, не через обычный файл robots.txt или метатег - так что это не легко проверить. Вместо этого они блокируют их, выдавая код ответа об ошибке 406 Not Acceptable, который был подтвержден с помощью переключателя агента пользователя для тестирования. Это означает, что те, кто проверяет наличие заблокированных ботов в файле robots.txt, предполагают, что эти боты, связанные со ссылками, могут правильно сканировать сайты.

В этом случае кажется, что это проблема .htaccess, из-за которой пользовательский агент-переключатель необходим для проверки, блокирует ли сайт боты-ссылки или нет.

Но почему?

Теперь блокирующие инструменты ссылок не являются чем-то новым, многие делают это годами, пытаясь скрыть свои личные сети ссылок от посторонних глаз - и Google. При наличии достаточного количества данных и информации о ссылках многие инструменты для ссылок могут дать довольно хорошие оценки того, какие сайты связаны между собой, чего не хотят спамеры или продавцы высококачественных ссылок. Существует множество плавающих сценариев .htaccess, которые блокируют любое количество сторонних инструментов компоновки.

А поскольку SEO-специалисты могут сообщать о спаме в Google, многие не хотят предоставлять своим конкурентам какие-либо боеприпасы, чтобы сообщить о них как о спаме, особенно если они пересекают эту черту. Хотя блокировка этих ботов усложнит поиск данных обратных ссылок на сайтах, которыми вы не владеете, это также будет невозможно, просто набор навыков SEO-специалистов, которым приходилось иметь дело со ссылками до того, как были доступны все необычные инструменты для ссылок.

Тогда, конечно, есть и отрицательный аспект SEO - если кто-то решит указать 50 000 дерьмовых ссылок на своих конкурентов, он хочет, чтобы их конкурентам было трудно найти эти ссылки, и, блокируя ботов ссылок, это означает, что они придется обнаруживать их самостоятельно или ждать, пока они не появятся в Инструментах Google для веб-мастеров.

Что можно сделать?

Что могут сделать люди? Оптимизаторы всегда знали, что в инструментах Google для веб-мастеров появляется слово «будь все, конец всему», когда дело доходит до ссылок, которые они видят. Если вы были оштрафованы Google - либо алгоритмически, либо вручную - вы должны ежедневно проверять Инструменты Google для веб-мастеров, пока штраф не будет снят как часть вашей стратегии убийства штрафа.

С другой стороны, такие инструменты, как Majestic и Ahrefs, имеют тенденцию показывать ссылки намного, намного раньше, дают гораздо большую глубину каждой ссылки и дают SEO-специалистам гораздо больше данных для анализа, чем мы, вероятно, когда-либо увидим в Инструментах Google для веб-мастеров. Вот почему сторонние инструменты так важны для SEO, и они также должны сыграть большую роль в вашем плане - но с таким небольшим количеством соли у вас есть обратные ссылки с сайтов, блокирующих инструменты ссылок.

Я подозреваю, что веб-мастера все больше и больше устают от бесконечных запросов на удаление ссылок (именно поэтому большинство из них игнорируются), что они начнут блокировать такие сервисы - или, по крайней мере, сами инструменты удаления ссылок. И некоторые из наиболее конкурентных рыночных зон, вероятно, обнаружат, что распространенность этого гораздо выше, чем на низко конкурентных рынках.

Я обратился к Маджестику и Арефсу за комментариями и сообщу, когда получу ответ.

Следующие две вкладки изменяют содержимое ниже.

Дженнифер Слегг - давний спикер и эксперт по маркетингу в поисковых системах, работающая в отрасли почти 20 лет. Когда она не сидит за письменным столом и не работает, ее можно найти, схватив латте в местном Starbucks или планируя следующую поездку в Диснейленд. Она регулярно выступает в Pubcon, SMX, State of Search, Brighton SEO и др. И более десяти лет выступает на конференциях.