Понимание архитектуры сайта с помощью Xenu и Excel

  1. Инструменты Google для веб-мастеров
  2. Черная вдова
  3. Xenu
  4. Шаг 1: Запустите сканирование
  5. Шаг 2. Импорт и очистка файла с вкладками в Excel
  6. Шаг 3: Присвойте баллы уровням и ссылкам
  7. Шаг 4: ранжируйте свои страницы
  8. Полезность и предостережения

Одним из часто недооцениваемых факторов для сильной стратегии SEO является архитектура сайта и его влияние на поток PageRank через сайт. Мы знаем, что PageRank рассеивается по мере продвижения от домашней страницы, но наша концепция глубины страницы затуманена боковыми панелями современного веб-сайта, динамически обновляемыми виджетами, нижними колонтитулами всего сайта и многим другим. Трудность в оценке архитектуры сайта усугубляется очень большими сайтами с богатой историей, особенно из-за того, что SEO работает на агентство, где необходимо относительно быстро развить глубокое понимание сайта нового клиента.

Есть несколько вещей, которые SEO может сделать, чтобы быстро понять, как поисковая система может сканировать и обнаруживать глубокие страницы, помимо открытия Firefox, отключения JavaScript, установки User Agent на Googlebot и перехода по кругу, начиная с домашней страницы. Давайте обсудим несколько из этих вариантов:

Инструменты Google для веб-мастеров

Одним из таких инструментов, который не перестает разочаровывать, является отчет «Внутренние ссылки» Инструментов для веб-мастеров. В этом отчете мы можем посмотреть, какие страницы ссылаются на какую, и подсчитать количество внутренних ссылок на любую отдельную страницу. К сожалению, данные отбираются (и часто вводят в заблуждение) и не отражают глубину страницы.

Черная вдова

Черная вдова от SoftBytes будет сканировать ваш сайт, обнаруживая новые страницы по ссылке. Самым большим преимуществом Black Widow является Windows-подобная визуализация архитектуры сайта:

Xenu

Xenu является отличным инструментом для обнаружения неработающих ссылок, выполняя полное сканирование сайта подобно Black Widow. Кроме того, Xenu сообщает «LEVEL» и «LINKS IN», которые особенно полезны для понимания архитектуры сайта. После выполнения полного обхода я хотел бы импортировать результаты в Microsoft Excel и выполнить некоторые быстрые манипуляции, чтобы оценить объем внутренних ссылок, которые поступают на каждую страницу. Я обнаружил, что это позволило мне довольно быстро и безболезненно понять архитектуру сайта. Этот процесс я подробно расскажу в этом посте:

Шаг 1: Запустите сканирование

Нам ничего не нужно, кроме ссылок на внутренние страницы. Вы можете значительно ускорить сканирование, позволяя Xenu сканировать только те страницы, которые имеют значение. То есть, если вы хотите сканировать только поддомен www, вы должны указать это в Xenu, поскольку сканирование корневого домена может занять гораздо больше времени.

Шаг 2. Импорт и очистка файла с вкладками в Excel

После импорта удалите все столбцы, кроме «Адрес», «Тип», «Уровень» и «Ссылки». Далее мы удалим все не HTML-страницы, удалив все адреса, которые не имеют «Тип» text / html.

Используйте приведенный выше фильтр, чтобы показать только нетекстовые / HTML-записи, а затем удалите их все
Используйте приведенный выше фильтр, чтобы показать только нетекстовые / HTML-записи, а затем удалите их все. Как только фильтр будет удален, у нас останутся только HTML-страницы.

Сделав это, мы можем удалить столбец «Тип», оставив нам «Адрес», «Уровень» и «Ссылки в».

Из-за различных странностей сканирования на многих сайтах учитывается нечетное количество уровней. Если вы не работаете с МАССИВНЫМ сайтом, большинство обычных страниц не будут иметь уровень выше 10. Сортируйте по уровню и найдите ту точку, где уровни начинают прыгать и / или не важные страницы сканируются, и удалите все после этого ,

Шаг 3: Присвойте баллы уровням и ссылкам

Зная, что больше PageRank попадает на страницы ближе к нулю (домашняя страница), я использую следующую формулу для оценки «Уровень»:

= 1- (Table1 [[# This Row], [Level]]) / (MAX ([Level]) + AVERAGE ([Level]))

Домашняя страница (нулевой уровень) получит балл 1, все страницы первого уровня получат балл, который составляет долю 1, второй уровень будет оценен ниже первого уровня и т. Д.

Я оцениваю столбец "Links In", используя следующую формулу:

= Table1 [[# This Row], [Links In]] / MAX ([Links In])

Эта формула работает аналогичным образом в том смысле, что самый сильный результат равен 1, а меньшее число ссылок в ней будет равно 1.

Ваша таблица Excel должна выглядеть примерно так
Ваша таблица Excel должна выглядеть примерно так

Шаг 4: ранжируйте свои страницы

Как только у нас есть наши оценки, мы можем сложить их вместе и / или использовать формулу RANK, чтобы получить быстрый ссылочный номер.

Более высокая общая оценка или более низкая оценка PageRank указывает на более высокую важность
Более высокая общая оценка или более низкая оценка PageRank указывает на более высокую важность

Полезность и предостережения

У этого метода оценки внутренних страниц есть некоторые очевидные проблемы и недостатки. Наиболее очевидным является отсутствие веса внешней ссылки в формуле. Важно понимать, что наша оценка просто основана на внутреннем весе.

Я обнаружил, однако, что это может быть очень полезно иметь в начале жизни проекта в качестве ссылки. Например, когда я проверяю новый сайт, я могу скопировать URL-адрес рассматриваемой страницы и быстро нажать CTRL + F в моей таблице результатов Excel, чтобы быстро оценить внутреннюю «важность» страницы. Еще одна полезная утилита - сравнить эти показатели с другими показателями эффективности, такими как коэффициент конверсии или органический трафик. Если у вас есть страница, которая конвертируется как сумасшедшая, но имеет низкую оценку внутренних ссылок, возможно, ее следует переместить ближе к домашней странице или перейти с других внутренних страниц.

Что помогает вам визуализировать архитектуру сайта? Дайте мне знать в комментариях или в Twitter, @MikeCP ,

Похожие

SEO инструменты - поисковая оптимизация Google Нюрнберг
... иногда и очень дорогих инструментов SEO. В большинстве случаев это программы, которые следуют за всеми ссылками на сайте, как бот поисковой системы, а затем собирают и обобщают всю информацию. Многие также сразу заявляют, что вы должны сделать лучше, где есть серьезные проблемы, или даже то, что уже было сделано достаточно хорошо. Тем не менее, я хотел бы еще раз подчеркнуть, что даже разработчики этих программных инструментов на самом деле не знают, как в настоящее время работает алгоритм
SEO консалтинг в Google
... сультант, я помогаю своим клиентам определить общую стратегию SEO , предоставляя им советы экспертов"> Как консультант, я помогаю своим клиентам определить общую стратегию SEO , предоставляя им советы экспертов. Аудит, анализ спецификаций, спецификация или проектная документация, SEO-сопровождение, технологическое наблюдение - вот некоторые из моих основных видов деятельности. Я также извлекаю выгоду для моих клиентов из результатов моего центра исследований
Как использовать Screaming Frog SEO Spider Tool для аудита обратных ссылок
Для тех из вас, кто любит следить за обратными ссылками и проверять, находятся ли они там, где они должны быть, это может быть трудоемкой задачей. Возможно, у вас есть список ссылок из источников, которые необходимо проверить, чтобы они все еще были на месте или были удалены после аудита ссылок. Как вы можете быть уверены, что они там, где должны быть? Ну, это легко использовать SEO Spider, чтобы помочь сделать это оптом в масштабе! Обратите внимание, что функция пользовательского поиска,
Как установить и оптимизировать общую тему WordPress
Существует много неправильных представлений о больших многоцелевых темах WordPress, таких как Avada и тема X, и о том, что они могут привести к сканированию вашего сайта. Это правда, что у большинства многоцелевых тем есть некоторое раздувание, сопровождаемое ими (особенно в сочетании с WooCommerce), но при правильной оптимизации они могут загружаться быстро. Поэтому сегодня мы подробно рассмотрим многофункциональную тему Total WordPress и посмотрим, насколько быстро мы сможем загрузить ее
Что такое Google Analytics
Если вы все еще не знаете, что такое Google Analytics , вы можете упустить различные возможности для бизнеса в онлайн-мире, не понимая аудиторию вашего сайта. Google Analytics - это бесплатная система мониторинга трафика, которую можно установить на любой сайт, виртуальный магазин или блог. Основная цель Google Analytics дело не только в том, сколько пользователей получают
Бесплатная проверка плагиата: онлайн инструменты
... и плагиата - это сервисы, помогающие выяснить, скопирован ли какой-либо текст или документ из другого места"> Инструменты проверки плагиата - это сервисы, помогающие выяснить, скопирован ли какой-либо текст или документ из другого места. Эти инструменты широко используются теми, кто стремится к уникальному контенту: например, владельцы веб-сайтов, блоггеры и преподаватели. Когда текст распространяется без разрешения его автора, это является нарушением законов об авторском праве, и поэтому
Как восстановить штраф Google Panda
... сыпаться утром, только чтобы увидеть, что трафик вашего сайта сократился вдвое благодаря последнему обновлению алгоритма Google"> Нет ничего лучше, чем просыпаться утром, только чтобы увидеть, что трафик вашего сайта сократился вдвое благодаря последнему обновлению алгоритма Google. К сожалению, больше людей, чем когда-либо - даже включая владельцев качественных, законных веб-сайтов - увидели драматические изменения в их трафике и рейтинге в результате четырех
Как оптимизировать контент вашей страницы
Хорошо, давай займемся. Мы разделили процесс оптимизации страницы на 5 шагов : мета-заголовок и описание, URL, ключевое слово и структура текста, теги заголовка и альтернативные теги. Хотя в настоящее время только заголовок и ваш текстовый контент являются абсолютно важными частями, в которые вы хотите включить ваши ключевые слова, другие элементы страницы, о которых мы будем говорить, все еще «хороши» и могут дать вам повышение рейтинга. Используйте ссылки ниже, чтобы
Новый успех для Google: ХРОМ!
Понемногу он пробивается, но прогрессирует решительно! Так что это настоящая история успеха, которую мы наблюдаем сегодня! Действительно, он только что отпраздновал свои 3 года, Google Chrome приближается к 30% рыночной доли во Франции ... кто бы мог подумать? Надо сказать, что Google много продвигает и даже пытается
Ошибки SEO: дрянные страницы проема
Предупреждение: этот пост не является безопасным для работы, детей или домашних животных. Он содержит сильный язык и слово «assclown». Мама и папа, прекрати сейчас читать эту запись в блоге. Это был не я; Джереми начал это. Хорошо, отряд для чтения спама, готов к работе? На этот раз я расскажу о двух ошибках спамера в одном посте. Взгляните на www.rosaevelien.com в Internet Explorer. Выглядит хорошо, правда? Что-то
Настройка и тестирование AMP для WordPress: краткое 7-шаговое руководство
... ире, ориентированном на мобильные устройства, наличие быстро загружаемых страниц очень важно для удовлетворения потребностей пользователя. Не только это, но и эффекты медленной скорости страницы были соотнесены к снижению общего дохода и увеличению количества оставленных страниц. Пользователи стали ожидать, что мобильные сайты будут загружаться так же быстро, как и их настольные

Комментарии

Это вопрос, который мне всегда задают и задают многие люди из Google «Какие инструменты для SEO лучше всего использовать в 2018 году?
Это вопрос, который мне всегда задают и задают многие люди из Google «Какие инструменты для SEO лучше всего использовать в 2018 году?» Есть много блоггеров, которые используют широкий спектр инструментов для своей деятельности по SEO, и если это работает для них, то отлично. Я видел инструменты, которые используют другие, и я считаю, что их неудобно использовать сзади, или я могу найти, что их интерфейс не самый лучший, и может попробовать другой вариант. С инструментами SEO, безусловно, есть
Какие инструменты я могу использовать для улучшения рейтинга моего сайта?
Какие инструменты я могу использовать для улучшения рейтинга моего сайта? Какие инструменты облегчат конвертацию посещений, которые я гарантирую, через платный трафик? Вот некоторые из важных вопросов, ответы на которые помогут вам лучше понять, какова ваша текущая стратегия и чего ожидать в будущем. С этим определенным ранее, выберите инструменты SEO и цифрового маркетинга, которые вы будете использовать! № 1 Google Analytics
Знаете ли вы, что первая позиция в Google получает около 30% всех кликов в Google?
Знаете ли вы, что первая позиция в Google получает около 30% всех кликов в Google? Очень важно иметь надежный план создания контента со статьями о небоскребах, вспомогательными статьями и внутренними ссылками, чтобы помочь вашей компании занять первое место в Google. Сбой SEO заключается в том, что на это требуется время. Время создавать и время оценивать. Сколько времени? Запланируйте 12 месяцев создания контента и создания обратных ссылок, прежде чем вы
Часто задаваемый вопрос - это поисковая система Google Spider или что такое Google Spider?
Часто задаваемый вопрос - это поисковая система Google Spider или что такое Google Spider? Эти термины стали популярными после того, как Google стал самой популярной и популярной поисковой системой в мире. Владельцы веб-сайтов, владельцы сайтов и оптимизаторы пытались понять, как поисковые системы оценивают сайты. Это было, когда они узнали о пауках и ботах. Google и другие поисковые системы проверяют каждый веб-сайт, существующий в Интернете. Алгоритм, используемый Google для определения
Именно с этой точки зрения я рассматриваю инструменты исследования ключевых слов: может ли он заменить мои другие инструменты и предоставить более точные данные?
Именно с этой точки зрения я рассматриваю инструменты исследования ключевых слов: может ли он заменить мои другие инструменты и предоставить более точные данные? Это может быть несправедливым критерием, но каждая минута, которую я трачу на исследование, - это минута, когда я не применяю указанное исследование на веб-сайте клиента. Я хочу, чтобы мои данные были быстрыми, я хочу, чтобы они были точными, и чтобы они находили отклик у моей целевой аудитории. Построй мне лучшую мышеловку
Так как же убедиться, что Google доверяет вашему сайту?
Так как же убедиться, что Google доверяет вашему сайту? Когда Google был впервые запущен в 1998 году, они были первыми поисковыми системами, которые смотрели, как веб-сайты связываются друг с другом, чтобы определить, какой сайт был наиболее надежным. Теория Google гласила, что если веб-сайт был связан со многими другими веб-сайтами, этому сайту нужно больше всего доверять. В глазах Google ссылка служит рекомендацией с одного сайта на другой. Например, когда вы включаете в свой контент
Почему ссылки сайта Google важны?
Почему ссылки сайта Google важны? Гугл объясняет почему ссылки сайта важны. Они «призваны помочь пользователям перемещаться по вашему сайту ... чтобы сэкономить время пользователей и позволить им быстро находить информацию, которую они ищут». Другими словами, ссылки сайта дают пользователям наилучшие результаты в кратчайшие сроки. Как объясняет Google: «Мы показываем ссылки сайта для результатов, только
Насколько сильны страницы, которые уже занимают место на главной странице Google?
Насколько сильны страницы, которые уже занимают место на главной странице Google? Эти вопросы излишни и не помогают. Вместо этого давайте разберем некоторые нюансы сложности ключевых слов, чтобы вы могли меньше полагаться на догадки и автоматизированные инструменты - и больше на профессиональное суждение и процесс. Это профессиональное суждение и хороший процесс, который поставит вас впереди конкурентов, а не просто копирует тактику, которую может использовать каждый.
Почему эффективное позиционирование страницы в Google так важно?
Почему эффективное позиционирование страницы в Google так важно? Трудно даже представить, сколько интернет-пользователей входят в поисковую систему каждый день - и это число постоянно растет! по очень приблизительные расчеты всего за один год поисковая система обработала: 1999 год - 1 миллиард запросов 2000 - 14 миллиардов запросов 2001-2003 - более 55 миллиардов
В начале 2016 года старший стратег Google подтвердил, что Panda является частью основного алгоритма рейтинга Google , Перевод?
Почему эффективное позиционирование страницы в Google так важно? Трудно даже представить, сколько интернет-пользователей входят в поисковую систему каждый день - и это число постоянно растет! по очень приблизительные расчеты всего за один год поисковая система обработала: 1999 год - 1 миллиард запросов 2000 - 14 миллиардов запросов 2001-2003 - более 55 миллиардов
Итак, что следует учитывать маркетологам при принятии решения о создании отдельного выделенного мобильного сайта или адаптивного сайта?
Итак, что следует учитывать маркетологам при принятии решения о создании отдельного выделенного мобильного сайта или адаптивного сайта? Что такое выделенный мобильный сайт? Выделенный мобильный сайт полностью отличается от вашего основного сайта. Обычно они размещаются под отдельным URL-адресом вашего основного веб-сайта - например, m.yoursite.com. Обычно посетители основного сайта перенаправляются на мобильный сайт, если они идентифицированы как использующие

Что помогает вам визуализировать архитектуру сайта?
Как вы можете быть уверены, что они там, где должны быть?
Кто бы мог подумать?
Хорошо, отряд для чтения спама, готов к работе?
Выглядит хорошо, правда?
Это вопрос, который мне всегда задают и задают многие люди из Google «Какие инструменты для SEO лучше всего использовать в 2018 году?
Какие инструменты я могу использовать для улучшения рейтинга моего сайта?
Какие инструменты облегчат конвертацию посещений, которые я гарантирую, через платный трафик?
Знаете ли вы, что первая позиция в Google получает около 30% всех кликов в Google?
Сколько времени?