Jump to content
Sign in to follow this  
Vyacheslav

Нагрузка на процессор - нужна помощь

Recommended Posts

Всем доброго времени!

Подскажите что можно сделать, когда боты яндекса нагружают процессор хостинга.

Crawl-delay: 50 не помогает, боты чаще иду.

Share this post


Link to post
Share on other sites
3 минуты назад, mojo сказал:

 

Яндекс вебмастер- Индексирование-Скорость обхода.

 

пробовал, не помогает. 

Share this post


Link to post
Share on other sites

Можно попробовать: 

-Временно запретить индексацию для яндекса. Затем включить и посмотреть, что получится.

-Определить, какой именно сервис яндекса хозяйничает. И, исходя из результатов, что-то предпринимать.

-Возможно для конкретного бота у вас выдаётся какой-то особенный контент и как раз в нём ошибка загружающая систему (маловероятно). Можно проверить сайт на загрузку.

Share this post


Link to post
Share on other sites

Директиву Crawl-delay: 50 они уже не учитывают (отменили). Я как-то им писал, что их робот грузит хостинг, просили в случае чего писать им, если нагрузка не упадет.

 

Также могут сильно грузить хостинг роботы мейла (я их всех баню по IP) и другие. Уточните у техподдержки, что сильнее нагружает процессор.

Share this post


Link to post
Share on other sites
2 часа назад, Vyacheslav сказал:

Всем доброго времени!

Подскажите что можно сделать, когда боты яндекса нагружают процессор хостинга.

Crawl-delay: 50 не помогает, боты чаще иду.

Это будет постоянно, вы, наверное, первый раз это увидели? Их по 50-100 штук сразу мониторят. Просто вваливаются и шкодят как стая котят. 
Поэтому решайте вопрос комплексно.
Обратитесь к files здесь на сайте (поиск в помощь), он мне помог оптимизировать сайт так, что раньше писало "ваш сайт открывается быстрее чем другие на 37%", а стало - "ваш сайт открывается быстрее чем другие на 94%".
PS - не реклама, реально помог.

Share this post


Link to post
Share on other sites

Join the conversation

You can post now and register later. If you have an account, sign in now to post with your account.

Guest
Reply to this topic...

×   Pasted as rich text.   Paste as plain text instead

  Only 75 emoji are allowed.

×   Your link has been automatically embedded.   Display as a link instead

×   Your previous content has been restored.   Clear editor

×   You cannot paste images directly. Upload or insert images from URL.

Sign in to follow this  

  • Recently Browsing   0 members

    No registered users viewing this page.

×
×
  • Create New...