Jump to content

Перенаправление со страниц навигации


Recommended Posts

Всем привет) Такой вопрос, если перенаправить все вот такие: "/page/2, /page10, /page500 и т д" на первую страницу, т.е на /page/1, то со стороны пс что то будет? Мне нужно защититься от парсинга просто:) Много раз сталкивался когда собранный мною целые месяцы контент тупо парсят...

Link to post
Share on other sites

Если вы не пустите на эти страницы поисковых ботов, то они не будут проиндексированы. И ссылки с них тоже поисковик не найдет.

Да и по какому принципу вы хотите делать редирект? Можно же так и от обычных пользователей контент закрыть...

Link to post
Share on other sites
1 час назад, WebProger сказал:

Если вы не пустите на эти страницы поисковых ботов, то они не будут проиндексированы. И ссылки с них тоже поисковик не найдет.

А если после индексации сделать редирект? 

1 час назад, WebProger сказал:

Да и по какому принципу вы хотите делать редирект? Можно же так и от обычных пользователей контент закрыть...

Обычными средствами DLE, модуль Редиректы)  

Link to post
Share on other sites
7 минут назад, bobokhon1998 сказал:

А если после индексации сделать редирект? 

Выпадут из индекса после переобхода.

7 минут назад, bobokhon1998 сказал:

Обычными средствами DLE, модуль Редиректы)  

Ну так вы же обычным пользователям не дадите их посещать. Зачем тогда вообще выкладывать инфу в веб, если она будет закрыта ото всех?

Link to post
Share on other sites
22 минуты назад, WebProger сказал:

Выпадут из индекса после переобхода.

Ну так вы же обычным пользователям не дадите их посещать. Зачем тогда вообще выкладывать инфу в веб, если она будет закрыта ото всех?

Страницы будут доступны по прямым ссылкам, я закрою только страницы навигации)) 

Link to post
Share on other sites
18 минут назад, bobokhon1998 сказал:

Страницы будут доступны по прямым ссылкам, я закрою только страницы навигации)) 

А, ну так да... Но о новых публикациях вы подумали?

Да и ссылочный вес ваши страницы не получат. Отказываться от перелинковки - крайне плохая практика.

Если так, то можно вообще не делать тогда каталог, а просто добавлять url-ы новых страниц через вебмастер.

Link to post
Share on other sites
2 минуты назад, WebProger сказал:

А, ну так да... Но о новых публикациях вы подумали?

Да и ссылочный вес ваши страницы не получат. Отказываться от перелинковки - крайне плохая практика.

Если так, то можно вообще не делать тогда каталог, а просто добавлять url-ы новых страниц через вебмастер.

Новые материалы будут индексироваться, на главной странице будет выведен список последних N новостей 

Насчет перелинковки, на страницах материала активен модуль «Похожие публикации»

И еще, я же хочу закрыть только постраничную навигацию (после индексации) 

Link to post
Share on other sites

А карта сайта у вас есть? Тогда и ее придется удалять, потому что через sitemap вас тоже смогут пропарсить за один проход.

И если кому это нужно, то кроном будут ежедневно проверять ваш 

6 минут назад, bobokhon1998 сказал:

список последних N новостей 

Так что все-равно это не панацея.

Link to post
Share on other sites
В 05.10.2019 в 3:29 AM, WebProger сказал:

А карта сайта у вас есть? Тогда и ее придется удалять, потому что через sitemap вас тоже смогут пропарсить за один проход.

И если кому это нужно, то кроном будут ежедневно проверять ваш 

Так что все-равно это не панацея.

Понимаю) От парсинга нереально защитится, но все равно надо же усложнять им) 

В общем решил сделать ограничение по айпи)

Link to post
Share on other sites

Если сделать редирект со страниц пагинации, то не к чему хорошему это не приведет. Лучше защитится от парсинга. Можно настроить защиту от большого количества запросов на сайт.

Link to post
Share on other sites

Please sign in to comment

You will be able to leave a comment after signing in



Sign In Now
  • Recently Browsing   0 members

    No registered users viewing this page.

×
×
  • Create New...