saskozp 205 Posted December 21, 2015 Report Share Posted December 21, 2015 Приветствую. Сегодня какой то бум, у меня одного так? Поисковики Яндекс Mail Bing штурмуют сайт как тараканы, с чем связано интересно? Link to post Share on other sites
Guest werstey Posted December 21, 2015 Report Share Posted December 21, 2015 Подарки ищут Link to post Share on other sites
saskozp 205 Posted December 21, 2015 Author Report Share Posted December 21, 2015 Подарки ищут а гуглу как всегда ничего не нужно ) Link to post Share on other sites
pozdeyyy 203 Posted December 21, 2015 Report Share Posted December 21, 2015 гуглу до рождества еще далеко))) Link to post Share on other sites
TraderGroup 73 Posted December 21, 2015 Report Share Posted December 21, 2015 Причина возможно в том, что на вашем сайте появился уникальный контент.) (как вариант) без обид Link to post Share on other sites
Модератор files 2838 Posted December 21, 2015 Модератор Report Share Posted December 21, 2015 >с чем связано интересно? 1) Бывает связано со взломом. Сайт взламывают, заливают доров, генерируют 1 мульйон страниц и пингуют их в поисковые системы.для быстрой индексации. Легко проверить, если изучить логи заходов поисковых роботов, если они заходят на странные, не принадлежащие вашему сайты страницы, есть резон провериться у ЛОРа. 2) Бывает связано с неправильно настроенным ситемап, в который попадает всякий мусор (неполезный контент), вот роботы и ковыряются в мусоре. ... а вообще, причин может быть много, вам все перечислять? TraderGroup 1 Link to post Share on other sites
Makedo 291 Posted December 21, 2015 Report Share Posted December 21, 2015 Согласен с ТС. Непроиндексированный Яндексом сайт, которому неделя начал получать посетителей с mail.ru, хотя его и в хороший день для хорошего сайта не нарисуешь. Link to post Share on other sites
orion 34 Posted December 21, 2015 Report Share Posted December 21, 2015 Вы как смотрите какие боты тыкают ваш сайт ? Link to post Share on other sites
Roman2002 16 Posted December 22, 2015 Report Share Posted December 22, 2015 А в количественном выражении, аттакуют - это сколько? Смотрите программой типа вебалайзера или как-то еще? Вообще никогда не следил за посещалкой ботов, но в вебмастере яндекса наблюдаю иногда пики до 150-200 запросов в день на одном из сайтов (где кол-во страниц около 40 тыс.). Кстати, в молодости, когда фрилансил, делал парсеры на заказ и там UserAgent ставили как у бота яндекса, так там за пару часов выкачивалось где-то по 10 тыс. страниц (в одном потоке). Link to post Share on other sites
speedtest 17 Posted December 25, 2015 Report Share Posted December 25, 2015 Посмотрел у себя на сайтах статистику посещений Гугла и Яндекса: Ничего необычного. Даже можно сказать, что Гугл почти не ходил по сайтам. И такие показатели примерно каждый день. Вообще это нормально получать по 40-50 тыщ запросов от ПС? Link to post Share on other sites
foreman2 75 Posted December 25, 2015 Report Share Posted December 25, 2015 Бред. Ни разу за последние 18 лет не следил за ботами. Выбирайте нормальный хостинг! Link to post Share on other sites
pozdeyyy 203 Posted December 25, 2015 Report Share Posted December 25, 2015 и мойте руки перед едой))) а по теме, если есть какие либо опасения, обратитесь к files, он точную причину скажет. Link to post Share on other sites
GQbeen 0 Posted December 27, 2015 Report Share Posted December 27, 2015 Бред. Ни разу за последние 18 лет не следил за ботами. Выбирайте нормальный хостинг! здесь по-моему не только от хостинга зависит т.к. нужно еще фильтры ставить (даже на нормальных) Link to post Share on other sites
MailRuLover 0 Posted May 19, 2016 Report Share Posted May 19, 2016 Здравствуйте Новички не могут создавать новые темы, поэтому прошу, пожалуйста, не ругайтесь. К тому же, это единственная тема, которая более-менее подходит под описание проблемы: Бот Mail.RU_Bot/Fast/2.0 начисто игнорирует рекомендации, прописанные для него в robots.txt. А именно, Crawl-delay. Он создает несколько запросов сразу ежесекундно. Тем самым идет приличная нагрузка на хостинг. Банить его по ip или через .htaccess, как советуют многие в поиске, мне кажется некорректным решением. Все-таки трафик худо-бедно идет из mailru. Можно ли что-то придумать и заставить бота вести себя согласно robots.txt? Спасибо за внимание Link to post Share on other sites
Светик1994 0 Posted October 24, 2016 Report Share Posted October 24, 2016 Link to post Share on other sites
Recommended Posts
Please sign in to comment
You will be able to leave a comment after signing in
Sign In Now