Jump to content

Частота сканирования для миллионика


Recommended Posts

Добрый день прошу помочь разобраться . Имеется сайт каталог 2 млн товаров так как каталог новый и есть страницы которые не прогрузились в кеш - могут открываться до 20 секунд 

Если скорость стоит на усмотрения Google  то иногда валит Ngnix и Apache все висит  .

Link to post
Share on other sites
  • Модератор

Ограничьте частоту сканирования:

  • в Google: https://support.google.com/webmasters/answer/48620?hl=ru
  • В Яндексе:  В яндекс вебмастере - ваш сайт - Индексирование - Скорость обхода - Задать вручную - ползунок в крайнее левое положение (Низкая) - Сохранить
Link to post
Share on other sites
1 минуту назад, files сказал:

Ограничьте частоту сканирования:

  • в Google: https://support.google.com/webmasters/answer/48620?hl=ru
  • В Яндексе:  В яндекс вебмастере - ваш сайт - Индексирование - Скорость обхода - Задать вручную - ползунок в крайнее левое положение (Низкая) - Сохранить

Да это понятно а как грамотно выставить Лимиты ? =)))) 

Яндекс    https://prnt.sc/v1ky52    1,2 запроса в секунду норм?

Google     https://prnt.sc/v1kxu5   0,05 запроса  в секунду | интервал 20 секунд ? 

Не будет ли сайт годами робот обходить по Sitemap с такими лимитами или можно еще меньше выставить самые низкие?

Link to post
Share on other sites
15 часов назад, files сказал:

 Ссылку на калькулятор нужно? :)

 

По ЯД получается 60/1.2 = 50 страниц в минуту ?

По Гугл не совсем понял как сделать расчет судя по интервалу 20 секунд = 3 страницы за минуту ?

Link to post
Share on other sites

Join the conversation

You can post now and register later. If you have an account, sign in now to post with your account.

Guest
Reply to this topic...

×   Pasted as rich text.   Paste as plain text instead

  Only 75 emoji are allowed.

×   Your link has been automatically embedded.   Display as a link instead

×   Your previous content has been restored.   Clear editor

×   You cannot paste images directly. Upload or insert images from URL.

  • Recently Browsing   0 members

    No registered users viewing this page.

×
×
  • Create New...