SEO: как улучшить сканирование своего сайта за 3 шага

1. 1. Найдите страницы, которые тратят впустую бюджет сканирования
2. 2. Веди роботов на нужные страницы
3. 3. Уберите роботов со страниц, которые не нужно индексировать

Чтобы получить посещение поисковых систем это хорошо. Быть уверенным, что они посещают правильные страницы, тем лучше. Некоторые передовые практики позволяют быстро оптимизировать этот процесс.

Роботы-обходчики не теряют ни минуты. На каждом сайте они посещают не только новые страницы, но и некоторые старые. И прохождение роботы жизненно важно, потому что, говорит Алексис Мутон, директор миссии SEO для агентства Clustaar, «страница, которая не сканируется регулярно, не имеет шансов занять устойчивое положение». Однако роботы посвящают каждому сайту ограниченное время, называемое «бюджетом сканирования», которое само зависит от популярности сайта. В этих условиях не возникает вопросов, чтобы каждый раз сканировать всю страницу целиком. Вот как их направить на лучшие страницы сайта.

1. Найдите страницы, которые тратят впустую бюджет сканирования

Из всех страниц, которые роботы crawlent На сайте сначала нужно определить тех, кто тратит время и снижает производительность SEO. "Новый Консоль поиска Google также является инструментом оптимизации бюджета сканирования, поскольку он предоставляет все более полную информацию о индексирование «говорит Алексис Мутон, который ежедневно использует его для анализа сканирования своих клиентов. На вкладке« обложка »Google представляет количество страниц,« исключенных », то есть сканируемых и не проиндексированных. Таблица под этим графиком, детали того, почему эти страницы исключены, дают первый угол анализа и представление об объеме рассматриваемых страниц: теги каноническое отсутствие между двумя страницами одинакового содержания, наличие тег <noindex> , страницы с перенаправлением и т. д. Эти страницы напрасно тратят время.

Мы должны решить анализ журнала узнать точный объем соблазненного бюджета сканирования. Селин Мазуффр, консультант агентства стратегического консалтинга и маркетинга Resoneo, напоминает, что роботы Google распознают два признака: IP-адрес начиная с 66.249 и агента пользователя Googlebot Она рекомендует изолировать журналы, связанные с поисковая система наблюдать, с одной стороны, объем просканированных страниц, сравнивать с количеством страниц сайта, с другой стороны, важность просканированных страниц. Этот анализ позволяет узнать, какой процент сайта действительно просканирован, какие ключевые страницы для SEO не извлекают выгоду из посещений механизмов и по вине каких страниц, которые не должны тратить время на сканеры.

Пример: на просканированных страницах 200К индексируются страницы размером 90КБ, из которых только 85К полезны для SEO. © кластер

Эта информация позволяет узнать, должна ли оптимизация сканирования быть приоритетом для сайта. «Идеал, редко достигаемый, состоит в том, чтобы заставить двигатели ползти на 100% стратегических страниц», но нюанс Селин Мазуффр. «Пороговые значения позволяют нам определить срочность этой работы: 85% страниц для сканирования - это хорошо, менее 70% - это в среднем, а ниже 25% - это очень плохо и отнимает много времени». быстро реагировать ".

2. Веди роботов на нужные страницы

Есть два способа оптимизировать сканирование. Первый - направить роботов на стратегические страницы для SEO. «Роботы поисковых систем должны получить доступ к интересным страницам менее чем за три клика», - говорит Селин Мазуффр. «Чтобы оптимизировать количество кликов, домашняя страница должна вернуться к страницам категорий и к любой странице продукта менее чем за два клика, что достижимо при хорошей дихотомической системе разбивки на страницы. то есть сокращение количества страниц, позволяющих создавать некоторые из них, маскируя другие динамически в соответствии с щелчками пользователя).

Внутренняя сетка облегчает путешествие робота по площадке. Если страница получает больше ссылок, чем другие, робот, скорее всего, будет регулярно попадать на нее. Поэтому реферер должен обеспечить, чтобы страницы, на которые указывают самые внутренние ссылки, были самыми важными.

3. Уберите роботов со страниц, которые не нужно индексировать

Второй способ оптимизировать сканирование - уберечь удаленных роботов от неважных страниц для SEO. Тег <noindex> в HTML код страница говорит им не индексировать ее, но не мешает им сканировать ее. файл robots.txt остается наиболее безопасным инструментом, и Селин Мазуффр рекомендует оптимизаторам оптимизировать его и устанавливать правила сканирования в соответствии со стратегией сайта. Алексис Мутон вспоминает сайт клиента, чей SEO-трафик снижается в течение нескольких месяцев. Анализ журналов показал, что «Google потратил много времени на сканирование URL-адресов, содержащих фильтры, бесполезные для SEO». Блокируя эти страницы в файле robots.txt, он перенаправил сканирование на стратегические страницы, и трафик снова начал расти.

Что еще более удивительно, метод, который практикует Селин Мазуффр, заключается в использовании ссылок в JavaScript на страницы, которые роботы не должны посещать. Поисковые системы не могут следить за ними, если они встроены в событие JavaScript, например, щелчок. В случае редизайна веб-сайта, консультант даже рекомендует сохранить не проиндексированные страницы в динамическом JS. Нет необходимости передавать их при предварительном рендеринге, и они не только будут очень эргономичными, но, кроме того, с адаптированной сеткой они не будут сканироваться и индексироваться. «Этот метод очень эффективен для заполнения файла robots.txt», - заключает она.

А также:

Похожие

Комментарии