bobokhon1998

Перенаправление со страниц навигации

10 posts in this topic

Всем привет) Такой вопрос, если перенаправить все вот такие: "/page/2, /page10, /page500 и т д" на первую страницу, т.е на /page/1, то со стороны пс что то будет? Мне нужно защититься от парсинга просто:) Много раз сталкивался когда собранный мною целые месяцы контент тупо парсят...

Share this post


Link to post
Share on other sites

Если вы не пустите на эти страницы поисковых ботов, то они не будут проиндексированы. И ссылки с них тоже поисковик не найдет.

Да и по какому принципу вы хотите делать редирект? Можно же так и от обычных пользователей контент закрыть...

Share this post


Link to post
Share on other sites
1 час назад, WebProger сказал:

Если вы не пустите на эти страницы поисковых ботов, то они не будут проиндексированы. И ссылки с них тоже поисковик не найдет.

А если после индексации сделать редирект? 

1 час назад, WebProger сказал:

Да и по какому принципу вы хотите делать редирект? Можно же так и от обычных пользователей контент закрыть...

Обычными средствами DLE, модуль Редиректы)  

Share this post


Link to post
Share on other sites
7 минут назад, bobokhon1998 сказал:

А если после индексации сделать редирект? 

Выпадут из индекса после переобхода.

7 минут назад, bobokhon1998 сказал:

Обычными средствами DLE, модуль Редиректы)  

Ну так вы же обычным пользователям не дадите их посещать. Зачем тогда вообще выкладывать инфу в веб, если она будет закрыта ото всех?

Share this post


Link to post
Share on other sites
22 минуты назад, WebProger сказал:

Выпадут из индекса после переобхода.

Ну так вы же обычным пользователям не дадите их посещать. Зачем тогда вообще выкладывать инфу в веб, если она будет закрыта ото всех?

Страницы будут доступны по прямым ссылкам, я закрою только страницы навигации)) 

Share this post


Link to post
Share on other sites
18 минут назад, bobokhon1998 сказал:

Страницы будут доступны по прямым ссылкам, я закрою только страницы навигации)) 

А, ну так да... Но о новых публикациях вы подумали?

Да и ссылочный вес ваши страницы не получат. Отказываться от перелинковки - крайне плохая практика.

Если так, то можно вообще не делать тогда каталог, а просто добавлять url-ы новых страниц через вебмастер.

Share this post


Link to post
Share on other sites
2 минуты назад, WebProger сказал:

А, ну так да... Но о новых публикациях вы подумали?

Да и ссылочный вес ваши страницы не получат. Отказываться от перелинковки - крайне плохая практика.

Если так, то можно вообще не делать тогда каталог, а просто добавлять url-ы новых страниц через вебмастер.

Новые материалы будут индексироваться, на главной странице будет выведен список последних N новостей 

Насчет перелинковки, на страницах материала активен модуль «Похожие публикации»

И еще, я же хочу закрыть только постраничную навигацию (после индексации) 

Share this post


Link to post
Share on other sites

А карта сайта у вас есть? Тогда и ее придется удалять, потому что через sitemap вас тоже смогут пропарсить за один проход.

И если кому это нужно, то кроном будут ежедневно проверять ваш 

6 минут назад, bobokhon1998 сказал:

список последних N новостей 

Так что все-равно это не панацея.

Share this post


Link to post
Share on other sites
В 05.10.2019 в 3:29 AM, WebProger сказал:

А карта сайта у вас есть? Тогда и ее придется удалять, потому что через sitemap вас тоже смогут пропарсить за один проход.

И если кому это нужно, то кроном будут ежедневно проверять ваш 

Так что все-равно это не панацея.

Понимаю) От парсинга нереально защитится, но все равно надо же усложнять им) 

В общем решил сделать ограничение по айпи)

Share this post


Link to post
Share on other sites

Если сделать редирект со страниц пагинации, то не к чему хорошему это не приведет. Лучше защитится от парсинга. Можно настроить защиту от большого количества запросов на сайт.

Share this post


Link to post
Share on other sites

Create an account or sign in to comment

You need to be a member in order to leave a comment

Create an account

Sign up for a new account in our community. It's easy!


Register a new account

Sign in

Already have an account? Sign in here.


Sign In Now

  • Recently Browsing   0 members

    No registered users viewing this page.