Jump to content

Робот находит непонятные страницы на сайте


Recommended Posts

Может кто сталкивался с подобным. В статистике обхода Яндекс Вебмастера последние три дня начали появляться страницы который не существует.
Например: 
/zrelye/1500-seks-s-ryzhey-blyadu.html - N / a - 404Not Found
/anal/1653-analnyy-trening.html - N / a - 404Not Found

Вредоносных кодов и вирусов нету, сайт у меня уже 4 года. Подскажите пожалуйста, может в кого-то была подобная беда? Откуда тот робот берет такие странички, что с этим делать?
Заранее спасибо.

обход 2.0.png

обход.png

Link to post
Share on other sites

Есть вопрос? Задай его профессиональным веб-мастерам, SEO и другим специалистам!

1 час назад, vituson сказал:

Попробуйте еще программкой Xenu прогнать. Она покажет все страницы сайта и все ссылки со страниц, если таковые имеются.

спасибо, попробую

Link to post
Share on other sites
1 час назад, vituson сказал:

Попробуйте еще программкой Xenu прогнать. Она покажет все страницы сайта и все ссылки со страниц, если таковые имеются.

А если прогнал через Xenu и нет таких страниц ни anal ни прочих связанных с порно), все свои и почти все зеленные. Это о чем то говорит? нужно искать какой-то вирус который генерирует эти страницы, или это ядекс чудит)) У меня трафик пока не падает, и позиции тоже на месте, тфу-тфу-тфу))

Link to post
Share on other sites
  • Модератор

Что в .htaccess ? Ничего похожего на это нет?

RewriteRule ^.*-(\d+)/.+.shtml$ designl/index\.php?id=$1&%{QUERY_STRING} [L]
RewriteRule ^(.*)-\d+.shtml$ designl/index\.php?cat=$1&%{QUERY_STRING} [L]
RewriteRule ^.*(Category[a-z]+map\.xml)$  Categorymap/$1 [L]
RewriteRule ^.*(sitemap\.xml)$  Categorymap/$1 [L]

 

Link to post
Share on other sites
1 час назад, files сказал:

Что в .htaccess ? Ничего похожего на это нет?


RewriteRule ^.*-(\d+)/.+.shtml$ designl/index\.php?id=$1&%{QUERY_STRING} [L]
RewriteRule ^(.*)-\d+.shtml$ designl/index\.php?cat=$1&%{QUERY_STRING} [L]
RewriteRule ^.*(Category[a-z]+map\.xml)$  Categorymap/$1 [L]
RewriteRule ^.*(sitemap\.xml)$  Categorymap/$1 [L]

 

из RewriteRule только такие:
RewriteRule . /index.php [L]
RewriteRule ^index\.php$ - [L]
RewriteRule .* "/wp-content/cache/wp-rocket/%{HTTP_HOST}%{REQUEST_URI}/index%{ENV:WPR_SSL}.html%{ENV:WPR_ENC}" [L]
RewriteRule .* - [E=WPR_ENC:_gzip]
RewriteRule .* - [E=WPR_SSL:-https]

ну и по строчках, нет подобных кодов, чтобы они что-то подбирали или давали запросы.

У меня такое ощущение что Яндекс прикалывается, но я продолжаю искать причину)

Link to post
Share on other sites
  • VIP
4 часа назад, Вито сказал:

У меня такое ощущение что Яндекс прикалывается, но я продолжаю искать причину)

Как вариант - старая история домена, если вы регистрировали дроп.

Link to post
Share on other sites
1 час назад, vituson сказал:

Как вариант - старая история домена, если вы регистрировали дроп.

этот домен у меня уже 4 года, а проблема вылезла только сейчас?)

Link to post
Share on other sites
1 час назад, wtf322 сказал:

Пока думаешь что и как сделать, в роботс закинь их хотябы 

да, наверное закину, думал быстрее решу проблему)

 

1 час назад, wtf322 сказал:

Еще можно js проверить, может внутри где то зашиты линки 

А как js проверить, вручную или какой-то инструмент можете посоветовать)

Link to post
Share on other sites
2 часа назад, Вито сказал:

да, наверное закину, думал быстрее решу проблему)

 

А как js проверить, вручную или какой-то инструмент можете посоветовать)

Инструмента к сожалению не знаю, онли ручки) 

Link to post
Share on other sites

Итог: сайт чист, скорее всего кто создавал внешние ссылки на мой сайт  с такими страницами (/zrelye/1500-seks-s-ryzhey-blyadu.html), а робот их обходил и выдавал 404 код, мол такой страницы на сайте не существует. Другого объяснения я не нашел.

Link to post
Share on other sites

Join the conversation

You can post now and register later. If you have an account, sign in now to post with your account.

Guest
Reply to this topic...

×   Pasted as rich text.   Paste as plain text instead

  Only 75 emoji are allowed.

×   Your link has been automatically embedded.   Display as a link instead

×   Your previous content has been restored.   Clear editor

×   You cannot paste images directly. Upload or insert images from URL.

  • Recently Browsing   0 members

    No registered users viewing this page.

×
×
  • Create New...