Jump to content

Сайт генерит бесконечные страницы вида domen.ru/events/www.vk.com/domen/


Recommended Posts

Ребят, есть проблема.

 

Сканирую сайт на битриксе netpeak spider'ом или page weight (проги для просмотра внутренней перелинковки), программа сканирует весь сайт полностью и в конце выходит в бесконечный цикл на страницы вида - http://www.domen.ru/information/news/vk.com/domen/domen@domen.ru/vk.com/domen/domen@domen.ru/domen@domen.ru/domen@domen.ru/vk.com/domen/domen@domen.ru/vk.com/domen/(где domen - адрес пациента).

 

Получается, что битрикс почему то создает бесконечное количество страниц при обращении к странице новостей, событий и еще нескольких определенных записей. Думал, что это какие-нибудь модули автопостеров в социальные сети установлены - нет ничего, вообще девственно чистый битрикс.

 

Всего страниц на сайте около 1.5к, но программа можем насчитать более 15 000 и продолжать работать. Всего таких "зараженных" страниц 5-6, удалил бы их, конечно, но среди них страница раздела (собственно news). Код страниц выдает то 200, то 301 -> 200. 

 

Посмотрел .htaccess, вроде ничего подозрительного там нет. В роботс их не закроешь - новости же.

 

В какую сторону копать? Может кто сталкивался?

Link to post
Share on other sites

Сам столкнулся с подобным неделю назад. Это netpeak spider генерирует ссылки (у меня пошёл на цикл через страницу 404). Решил выбрав в настройках сканирования "Не сканировать disallow".

Link to post
Share on other sites

Спасибо, но Спайдер не может ничего генерировать на чужом хостинге) Это битрикс плодит дубли по какой-то причине.

 

Тоже решил не тратить много времени на проблему - я закрыл все дубли в robots.txt (/*vk.com* и т.д.), мне этого для оптимизации будет достаточно. Также напишу рекомендации разработчикам.

 

Просто хотел найти быстрый и безболезненный способ убрать эту ошибку с сайта без копания в исходниках.

Link to post
Share on other sites

Join the conversation

You can post now and register later. If you have an account, sign in now to post with your account.

Guest
Reply to this topic...

×   Pasted as rich text.   Paste as plain text instead

  Only 75 emoji are allowed.

×   Your link has been automatically embedded.   Display as a link instead

×   Your previous content has been restored.   Clear editor

×   You cannot paste images directly. Upload or insert images from URL.

  • Recently Browsing   0 members

    No registered users viewing this page.

×
×
  • Create New...