Бюджет сканирования Google для SEO, СТОП Угадай! (Реальная информация здесь)

  1. Что такое бюджет обхода?
  2. Ограничение скорости сканирования
  3. Требование сканирования - бюджет сканирования для SEO
  4. Что влияет на бюджет сканирования? - Бюджет сканирования для SEO
  5. Как оптимизировать бюджет сканирования
  6. Используйте бесплатные инструменты
  7. Убедитесь, что ваши страницы можно сканировать
  8. Ограничить перенаправления
  9. Устранить неработающие ссылки
  10. Избегайте использования параметров URL
  11. Использовать внутренние ссылки
  12. Использовать внешние ссылки
  13. Повысьте скорость вашего сервера
  14. Кэшируйте свои страницы
  15. Оптимизировать скорость загрузки страницы
  16. Завершение бюджета обхода для SEO

Если вы хотите, чтобы страницы на вашем сайте были проиндексированы быстро, вам нужно понять значение бюджета сканирования для SEO.

Это действительно влияет на все сайты, большие и маленькие. Но часто крупным сайтам, сайтам с техническими ошибками или сайтам с уникальными функциями генерации URL здесь действительно нужно уделять внимание.

Но ждать!

Я забегаю вперед. Давайте начнем немного медленнее.

Давайте начнем немного медленнее

Все, что вам нужно знать о бюджете сканирования для SEO

Концепция бюджета обхода когда-то была игрой в догадки среди оптимизаторов. Тем не менее, благодаря недавний пост Гари Иллис из Google, мы все теперь гораздо более информированы.

В этой статье мы рассмотрим все, что вам нужно знать о бюджете сканирования, и предложим несколько советов по оптимизации.

Что такое бюджет обхода?

Прежде чем вы сможете понять концепцию бюджета сканирования для SEO, вам сначала необходимо ознакомиться с другим термином: робот Google.

Робот Google - это имя, данное автоматизированному агенту, который сканирует ваш сайт в поисках страниц для добавления в его индекс. Вы можете думать об этом как о цифровом веб-серфере.

Поскольку в Интернете существуют миллиарды и миллиарды страниц, для робота-робота было бы нецелесообразно сканировать их каждую секунду каждого дня. Это потребляет ценную пропускную способность в сети, что приводит к снижению производительности веб-сайтов.

Таким образом, Google выделяет бюджет сканирования для каждого веб-сайта. Этот бюджет определяет, как часто Googlebot сканирует сайт в поисках страниц для индексации.

Google определяет миссию бюджет обхода следующим образом: «Приоритет того, что сканировать, когда и сколько ресурсов сервер, на котором размещается веб-сайт, может выделить для сканирования, более важен для крупных веб-сайтов или для тех, которые автоматически генерируют страницы, например, на основе параметров URL».

Ограничение скорости сканирования

Предел скорости сканирования немного отличается от бюджета сканирования. Он определяет количество одновременных подключений, которые робот Google использует для сканирования сайта, а также время ожидания загрузки другой страницы.

Помните, что Google - это пользовательский опыт. Причина, по которой его бот использует ограничение скорости сканирования, состоит в том, чтобы не допустить переполнения сайта автоматическими агентами до такой степени, что у пользователей возникают проблемы с загрузкой сайта в их браузерах.

Причина, по которой его бот использует ограничение скорости сканирования, состоит в том, чтобы не допустить переполнения сайта автоматическими агентами до такой степени, что у пользователей возникают проблемы с загрузкой сайта в их браузерах

Вот несколько факторов, которые влияют на скорость сканирования:

  • Скорость веб-сайта. Если сайт быстро реагирует на робота Google, Google увеличивает скорость сканирования. С другой стороны, Google снизит скорость сканирования для вялых веб-сайтов.
  • Настройка в консоли поиска - веб-мастера также могут установить предел сканирования в консоли поиска. Хотя они не могут увеличить скорость сканирования, они могут уменьшить ее, если считают, что Google слишком много сканирует на своем сервере.

Имейте в виду, что хотя нормальная скорость сканирования может быстрее проиндексировать страницы, более высокая скорость сканирования не является фактором ранжирования ,

Требование сканирования - бюджет сканирования для SEO

Даже если предел сканирования не достигнут, Google может сократить количество страниц, которые сканирует его бот. Снижение активности бота называется снижением спроса на сканирование.

Что влияет на спрос на сканирование? Есть пара вещей:

  • Популярность. Страницы, которые более популярны (то есть они часто публикуются в социальных сетях и получают ссылки с других веб-сайтов), как правило, сканируются чаще.
  • Устаревание - Google пытается не дать URL-адресам устареть в своем индексе.

Кроме того, общесайтовые события (например, перемещение сайта) могут привести к увеличению спроса на сканирование. Это потому, что Google нужно переиндексировать контент с новыми URL-адресами.

Что влияет на бюджет сканирования? - Бюджет сканирования для SEO

По сути, бюджет сканирования представляет собой сочетание скорости сканирования и спроса на сканирование. Согласно Illyes, бюджет сканирования - это количество URL-адресов, которые робот Googlebot может и хочет сканировать.

К счастью, Google определил, какие именно факторы влияют на бюджет сканирования. Вот их список, отсортированный по степени важности:

  • Параметры URL - часто бывает так, что базовый URL (например, « http://mysite.com ») Добавлен с параметрами (например,« http://mysite.com?id=3 ») Возвращает точно такую ​​же страницу. Такая настройка может привести к тому, что многочисленные уникальные URL будут учитываться в бюджете сканирования, даже если все эти URL возвращают одну и ту же страницу.
  • Дублированный контент - в некоторых случаях URL могут быть полностью уникальными без параметров запроса и при этом возвращать тот же контент. Это также отрицательно скажется на бюджете сканирования.
  • Мягкие страницы ошибок. Мягкие страницы ошибок 404 также влияют на бюджет сканирования. К счастью, они также сообщаются в консоли поиска.
  • Взломанные страницы. На сайтах, подвергшихся хакерской атаке, может быть ограничен бюджет сканирования.
  • Бесконечные пробелы - сайты, на которых есть неограниченные ссылки (например, календари, на которых пользователи могут щелкнуть день, месяц или год), обнаружат, что робот Google тратит свой бюджет сканирования на ссылки, которые могут быть не важны.
  • Низкокачественный контент. Если сайт страдает от плохого качества, вероятно, Google ограничит бюджет сканирования.

Как оптимизировать бюджет сканирования

Теперь, когда вы знакомы с концепцией бюджета сканирования для SEO, пришло время соответствующим образом оптимизировать ваш сайт. Вот несколько способов сделать это.

  1. Используйте бесплатные инструменты

    - И то и другое Google Search Console а также Инструменты Bing для веб-мастеров предоставить вам много информации о проблемах, которые могут негативно повлиять на ваш бюджет сканирования. Обязательно используйте их и настройте для всех сайтов, которые вы отслеживаете.

Затем проверяйте время от времени эти инструменты, чтобы узнать, не возникают ли у ваших сайтов какие-либо проблемы. Например, если консоль поиска сообщает, что на одном из ваших сайтов есть какие-то программные ошибки 404, обязательно исправьте эту проблему немедленно.

Помните, и Google, и Microsoft хотят, чтобы вы преуспели в Интернете. Вот почему они предоставляют эти инструменты бесплатно.

  1. Убедитесь, что ваши страницы можно сканировать

    - Соблазнительно использовать чудеса современных технологий настолько, что роботу-роботу сложно сканировать ваш сайт. Противостоять этому искушению.

Например, такие технологии, как AJAX (асинхронный JavaScript и XML), загружают контент, чтобы пользователям не приходилось обновлять страницу. Тем не менее, контент, загруженный AJAX, может быть недоступен роботом Google. Это большая тема, которая выходит за рамки возможностей SEO, поэтому мы сохраним ее для другого поста. Но в основном вам нужно иметь базу HTML.

Кроме того, используйте карту сайта и убедитесь, что она всегда актуальна. К счастью, системы управления контентом, такие как WordPress, делают это легко.

  1. Ограничить перенаправления

    - Каждый раз, когда одна из страниц вашего сайта перенаправляется на другую страницу (с перенаправлением 301 или 302), она использует небольшую часть вашего бюджета сканирования. Это означает, что если у вас много перенаправлений, ваш бюджет сканирования может быть истощен до того, как робот Google будет сканировать страницу, которую вы хотите проиндексировать.

  1. Устранить неработающие ссылки

    - Если у вас много неработающих ссылок на вашем сайте, вам нужно их почистить, если вы хотите максимизировать бюджет сканирования.

К счастью, с помощью такого инструмента легко найти неработающие ссылки Кричащая лягушка , Кроме того, время от времени не забывайте проверять Google Search Console и Bing Webmaster Tools.

  1. Избегайте использования параметров URL

    - Как мы уже видели, вы можете съесть значительную часть вашего бюджета сканирования с различными параметрами URL, которые указывают на одну и ту же страницу. Конечно, вы можете устранить эту проблему, полностью удалив параметры URL.

Например, если вы работаете с сайтом электронной коммерции, вы можете использовать следующий URL для отображения определенного продукта: http://mysite.com/shop?productId=5 , Вместо этого измените этот URL на http://mysite.com/shop/productId5 ну как то так. При этом вы исключите хотя бы один параметр запроса.

Если вам необходимо использовать параметры запроса, обязательно сообщите Google, как обрабатывать эти параметры в консоли поиска. Просто нажмите «Сканирование» на левой боковой панели и выберите «Параметры URL» в появившемся меню. На этой странице вы можете редактировать свои предложения и добавлять новые параметры, чтобы Google не индексировал дубликаты страниц. Это изменит ваш бюджет сканирования для SEO. Но будьте очень осторожны, неправильный параметр может разрушить ваш сайт.

  1. Использовать внутренние ссылки

    - Возможно, это тот случай, когда одним из самых игнорируемых аспектов SEO сегодня является внутренняя ссылка , Имейте в виду, однако, что, как правило, лучше всего внутренне ссылаться на ваши самые прибыльные страницы. Таким образом, робот Google будет видеть эти страницы чаще.

  1. Использовать внешние ссылки

    - А недавнее обучение показывает, что существует корреляция между внешними ссылками и количеством сканирований сайта роботом Google. Вот почему важно получать внешние ссылки, указывающие на ваш сайт.

Это выходит за рамки этой статьи, чтобы изучить все способы создания внешних ссылок. Посмотреть этот исчерпывающий список стратегий обратных ссылок для получения дополнительной информации.

  1. Повысьте скорость вашего сервера

    - Перед выбором хостинг-провайдера важно провести предпродажное исследование. Это потому, что вам нужен хост, который очень быстро реагирует на запросы сервера.

Чем быстрее ваш сервер отвечает на запрос страницы, тем больше страниц будет сканировать робот Google.

  1. Кэшируйте свои страницы

    - Если говорить о скорости, это действительно отличная идея для кэширования ваших веб-страниц. Они будут загружаться быстрее не только для пользователей, но и для робота Google, благодаря чему ваш сайт увеличит ограничение скорости сканирования.

К счастью, на платформе WordPress легко кэшировать страницы с помощью Плагин W3 Total Cache или Плагин Super Cache ,

  1. Оптимизировать скорость загрузки страницы

    - После того, как вы разместили свой сайт на быстром сервере и кэшировали свои страницы, вы все равно можете не оптимизировать скорость. Направляйтесь к Инструмент PageSpeed ​​Insights и посмотрите, что Google думает о скорости вашей страницы.

Вы можете обнаружить, что на вашем сайте все еще есть несколько проблем, которые не позволяют загружать ваши страницы как можно быстрее. Например, у вас могут быть блокирующие рендеринг JavaScript или CSS на ваших страницах.

К счастью, Google не только говорит вам, что не так с вашим сайтом, но также и как исправить обнаруженные проблемы.

Завершение бюджета обхода для SEO

Теперь вы знаете немного больше о бюджетах сканирования, поисковой оптимизации и о том, как это влияет на ваш сайт.

Почему бы не потратить некоторое время сегодня, чтобы разработать план действий по оптимизации бюджета сканирования? Это может быть очень полезно для больших веб-сайтов и часто приводит к решению многих других проблем за пределами сканирования.

Что такое бюджет обхода?
Что такое бюджет обхода?
Что влияет на спрос на сканирование?
Что влияет на бюджет сканирования?
Com?
Com/shop?
Почему бы не потратить некоторое время сегодня, чтобы разработать план действий по оптимизации бюджета сканирования?