Jump to content

Дубли страниц на сайте UCOZ

Kolbasa

By Kolbasa,
in Google

 Share Followers 0

Recommended Posts

Kolbasa

Kolbasa 8

Posted
Posted (edited)

Подскажите пожалуйста почему у меня дубли страниц сайта.

Вот когда ввожу в поиске гугла "мощные читы"

У меня показано сразу 4 страницы:

здесь был сайт.

Почему так? И на сколько это плохо для сайта? И как это убрать если так не должно быть?

Edited by Kolbasa
Link to post
Share on other sites
tvskit

tvskit 259

Posted
Posted

Подскажите пожалуйста почему у меня дубли страниц сайта.

 

Вот когда ввожу в поиске гугла "мощные читы для онлайн игр"

 

У меня показано сразу 4 страницы:

 

http://portal-cheatov.ru/ 

http://portal-cheatov.ru/?page2 

http://portal-cheatov.ru/?page10 

http://portal-cheatov.ru/?page15 

 

Почему так? И на сколько это плохо для сайта? И как это убрать если так не должно быть?

Это очень плохо для поисковиков.

Тут всё расписано.

forum.ucoz.ru/forum/21-13447

В общем добавьте файл robots.txt в корень, с содержимым:

User-agent: *
Disallow: /a/
Disallow: /stat/
Disallow: /index/1
Disallow: /index/2
Disallow: /index/3
Disallow: /index/5
Disallow: /index/7
Disallow: /index/8
Disallow: /index/9
Disallow: /panel/
Disallow: /admin/
Disallow: /secure/
Disallow: /informer/
Disallow: /mchat
Disallow: /search
Disallow: /shop/order/
Disallow: /?ssid=
Disallow: /index/sub
Disallow: /register
Disallow: /*/rss
Disallow: /*?
Disallow: /rtr/
Disallow: /*-$ 
Disallow: /*&*

Host: www.ваШсайт.ru
Sitemap: http://www.ваШсайт.ru/sitemap.xml
Link to post
Share on other sites
Kolbasa

Kolbasa 8

Posted
  • Author
Posted

Вот у меня еще один сайт есть, на нем такой же роботс.тхт, но дублей я на не замечал, по крайней мере главной, почему так интересно...

Link to post
Share on other sites
tvskit

tvskit 259

Posted
Posted (edited)

Вот у меня еще один сайт есть, на нем такой же роботс.тхт, но дублей я на не замечал, по крайней мере главной, почему так интересно...

Если вставили стандартный роботс от юкоза, то там есть недочёты, а точней, его надо доделать под себя. Рано или поздно дубли появятся и много, т.е. в стандартном нет таких строк:

Disallow: /*?
Disallow: /*-$ 
Disallow: /*&*

а они ой как нужны.

 

Вот тут посмотрите и какие ошибки и на что ругается.

1aca706c8966.jpg

Edited by tvskit
Link to post
Share on other sites
Kolbasa

Kolbasa 8

Posted
  • Author
Posted
Оптимизация HTMLПоследнее обновление 26 мая 2016 г.

Устранив следующие проблемы, вы сможете повысить качество и эффективность сайта.

Метаописание Страницы Повторяющееся метаописание 13 Длинное метаописание 0 Короткие метаописания 0

 

Тег заголовка Страницы Отсутствующие заголовки (теги title) 0 Повторяющиеся заголовки (теги title) 13 Длинные заголовки (теги title) 0 Короткие заголовки (теги title) 0 Неинформативные заголовки (теги title) 0

 

Неиндексируемое содержание Страницы Мы не обнаружили проблем, связанных с неиндексируемым содержанием на вашем сайте
Link to post
Share on other sites
pawok

pawok 669

Posted
Posted

 

Это очень плохо для поисковиков.

Тут всё расписано.

forum.ucoz.ru/forum/21-13447

В общем добавьте файл robots.txt в корень, с содержимым:

User-agent: *
Disallow: /a/
Disallow: /stat/
Disallow: /index/1
Disallow: /index/2
Disallow: /index/3
Disallow: /index/5
Disallow: /index/7
Disallow: /index/8
Disallow: /index/9
Disallow: /panel/
Disallow: /admin/
Disallow: /secure/
Disallow: /informer/
Disallow: /mchat
Disallow: /search
Disallow: /shop/order/
Disallow: /?ssid=
Disallow: /index/sub
Disallow: /register
Disallow: /*/rss
Disallow: /*?
Disallow: /rtr/
Disallow: /*-$ 
Disallow: /*&*

Host: www.ваШсайт.ru
Sitemap: http://www.ваШсайт.ru/sitemap.xml

Нужно включить отображение переключения страниц через ajax (в панели управления сайтом) и тогда еще можно запретить индексацию этих страниц в robots. А, вообще, это не лучший выход из ситуацию. Почитайте, как оптимизировать страницы пагинации.

Link to post
Share on other sites
Kolbasa

Kolbasa 8

Posted
  • Author
Posted

Нужно включить отображение переключения страниц через ajax (в панели управления сайтом) и тогда еще можно запретить индексацию этих страниц в robots. А, вообще, это не лучший выход из ситуацию. Почитайте, как оптимизировать страницы пагинации.

 

ну я прописал в robots.txt, то что вы написали, дубли сайта исчезнут после переиндекации гугла?

Link to post
Share on other sites
tvskit

tvskit 259

Posted
Posted (edited)

Вообщем зашел в пункты "" там одни дубли, я прописал в роботс.тхт как вы мне написали, я думаю многие ошибки после переиндексации исчезнут? Сейчас скрином скину, а втором сайте там ужас полный...

 

 

 

 

s020.radikal.ru/i716/1605/42/c6b3f4c8e462.jpg

Мельком посмотрел, вам необходимо еще добавить с роботс ещё такую строку

 

Disallow: /load/*
т.е. у вас есть страница /load/chity_dlja_cs_go/2 и в низу переключатель страниц

877fbb8f41fa.jpg

 

/load/chity_dlja_cs_go/2-2

/load/chity_dlja_cs_go/2-3

/load/chity_dlja_cs_go/2-4

 

они вам индексе не нужны, вам нужны конкретные страницы, например:

/load/chity_dlja_cs_go/multikhak_csgo_winx_private/2-1-0-244
/load/chity_dlja_cs_go/wh_dlja_cs_go_kenthack_1_0_for_steam_no_steam/2-1-0-105
правильно?!

Значит добавьте в роботс следующие строки

Disallow: /load/
Disallow: /load/*/*-*-*-*?
Allow: /load/*/*-*-*-
cf225b29db03.jpg

Этот Disallow: /load/*/*-*-*-*? я добавил не просто так, поверь пригодится вскоре, лучше упреждающий удар.

 

 

 

ну я прописал в robots.txt, то что вы написали, дубли сайта исчезнут после переиндекации гугла?

в течении 2х 3х недель.

 

Нужно включить отображение переключения страниц через ajax (в панели управления сайтом) и тогда еще можно запретить индексацию этих страниц в robots. А, вообще, это не лучший выход из ситуацию. Почитайте, как оптимизировать страницы пагинации.

пагинация убита в роботсе, можно через <meta name="robots" content="noindex,follow"/> в шаблонах. Edited by tvskit
Link to post
Share on other sites
Kolbasa

Kolbasa 8

Posted
  • Author
Posted

Блин спасибо тебе огромное братан, а по второму сайту не поможешь? Я скину 100 рублей на яндекс, за помощь и так.

Link to post
Share on other sites
tvskit

tvskit 259

Posted
Posted

Блин спасибо тебе огромное братан, а по второму сайту не поможешь? Я скину 100 рублей на яндекс, за помощь и так.

Пиши, помогу, денег в принципе не возьму, ведь форум для помощи.

 

пс. Не, деньги бы я взял, но суммы не те. :lol:

Link to post
Share on other sites
Kolbasa

Kolbasa 8

Posted
  • Author
Posted

Погоди правильно я прописал в robots.txt?

 

User-agent: *
Disallow: /a/
Disallow: /stat/
Disallow: /index/1
Disallow: /index/2
Disallow: /index/3
Disallow: /index/5
Disallow: /index/7
Disallow: /index/8
Disallow: /index/9
Disallow: /panel/
Disallow: /admin/
Disallow: /secure/
Disallow: /informer/
Disallow: /mchat
Disallow: /search
Disallow: /shop/order/
Disallow: /?ssid=
Disallow: /index/sub
Disallow: /register
Disallow: /*/rss
Disallow: /*?
Disallow: /rtr/
Disallow: /*-$ 
Disallow: /*&*
Disallow: /load/
Disallow: /load/*/*-*-*-*?
Allow: /load/*/*-*-*-
 
Host: мой сайт
Sitemap: мой сайт/sitemap.xml
Link to post
Share on other sites
tvskit

tvskit 259

Posted
Posted (edited)

Погоди правильно я прописал в robots.txt?

 

да.

Если есть другие модули, то я бы на вашем месте, не, не так, обязательно пропишите для всех модулей типа:

Disallow: /photo
Disallow: /photo/*-*-*
Disallow: /photo/*/*-*-*?*
Disallow: /photo/*/*/*-*-*
Allow: /photo/*/*-*-*
Disallow: /blog
Disallow: /blog/*/*-*-*-*?*
Disallow: /blog/*/*-*-*-*-*
Allow: /blog/*/*-*-*-
Disallow: /publ
Disallow: /publ/*/*/*-*-*-*
Disallow: /publ/*/*-*-*-*?*
Disallow: /publ/*/*/*-*-*-*?*
Allow: /publ/*/*-*-*-
Disallow: /news
Disallow: /news/*/*-*-*-*?*
Disallow: /news/*/*/*-*-*-*
Allow: /news/*/*-*-*-
Disallow: /video
Disallow: /video/vip/*/*?*
Allow: /video/vip/*
Disallow: /index/*-*
Disallow: /index/*/*-*?*
Allow: /index/*/*-*

код немного нужно будет изменить, всё зависит, используете ли вы группы, подгруппы, категории и т.д.!!!

Edited by tvskit
Link to post
Share on other sites
Kolbasa

Kolbasa 8

Posted
  • Author
Posted

 

да.

Если есть другие модули, то я бы на вашем месте, не, не так, обязательно пропишите для всех модулей типа:

Disallow: /photo
Disallow: /photo/*-*-*
Disallow: /photo/*/*-*-*?*
Disallow: /photo/*/*/*-*-*
Allow: /photo/*/*-*-*
Disallow: /blog
Disallow: /blog/*/*-*-*-*?*
Disallow: /blog/*/*-*-*-*-*
Allow: /blog/*/*-*-*-
Disallow: /publ
Disallow: /publ/*/*/*-*-*-*
Disallow: /publ/*/*-*-*-*?*
Disallow: /publ/*/*/*-*-*-*?*
Allow: /publ/*/*-*-*-
Disallow: /news
Disallow: /news/*/*-*-*-*?*
Disallow: /news/*/*/*-*-*-*
Allow: /news/*/*-*-*-
Disallow: /video
Disallow: /video/vip/*/*?*
Allow: /video/vip/*
Disallow: /index/*-*
Disallow: /index/*/*-*?*
Allow: /index/*/*-*

код немного нужно будет изменить, всё зависит, используете ли вы группы, подгруппы, категории и т.д.!!!

 

У меня на сайте том, что мы первый robots.txt составляли вообще два модуля активированы, это каталог файлов и каталог статей. Я много лишнего и так прописал в robots.txt нечего страшного?

А вот на другом форум, каталог файлов, каталог статей.

Link to post
Share on other sites
tvskit

tvskit 259

Posted
Posted (edited)

Вот по второму сайту такие ошибки:

 

Страницы с повторяющимся метаописанием Страницы unzipped_triangle.gifЧиты для CS 1.6 - материал, представленный игровым сообще�

 

тут у вас теже проблемы, этот же роботс добавте, только тут у вас плюс форум, значит добавить строки в роботс

Disallow: /forum/
Allow: /forum/*-*-

01f3c2e97830.jpg

 

У меня на сайте том, что мы первый robots.txt составляли вообще два модуля активированы, это каталог файлов и каталог статей. Я много лишнего и так прописал в robots.txt нечего страшного?

А вот на другом форум, каталог файлов, каталог статей.

Для каталога статей добавьте в роботс

Disallow: /publ/
Disallow: /publ/*-*-*-*?
Allow: /publ/*-*-*-

a68474826a3f.jpg

 

в общем итог для обоих сайтов будет

User-agent: *
Disallow: /a/
Disallow: /stat/
Disallow: /index/1
Disallow: /index/2
Disallow: /index/3
Disallow: /index/5
Disallow: /index/7
Disallow: /index/8
Disallow: /index/9
Disallow: /panel/
Disallow: /admin/
Disallow: /secure/
Disallow: /informer/
Disallow: /mchat
Disallow: /search
Disallow: /shop/order/
Disallow: /?ssid=
Disallow: /index/sub
Disallow: /register
Disallow: /*/rss
Disallow: /*?
Disallow: /rtr/
Disallow: /*-$ 
Disallow: /*&*
Disallow: /load/
Disallow: /load/*/*-*-*-*?
Allow: /load/*/*-*-*-
Disallow: /forum/
Allow: /forum/*-*-
Disallow: /publ/
Disallow: /publ/*-*-*-*?
Allow: /publ/*-*-*-
Edited by tvskit
Link to post
Share on other sites
Kolbasa

Kolbasa 8

Posted
  • Author
Posted

Все сделал, посмотри пожалуйста правильно? И также ответь у меня на одном сайте активированы только каталог файлов и каталог статей, а на другом форум, каталог файлов и каталог статей и как я понял много лишнего прописано в robots.txt нечего страшного?

Link to post
Share on other sites
Kolbasa

Kolbasa 8

Posted
  • Author
Posted

Вроде как все сделал, если можешь посмотри пожалуйста, такой вопрос в тичение 3 недель я думаю гугл проиндексирует, это в плюс пойдет сайту? Позиции могут какие то вверх пойти? Потому как ошибок было очень много...

Link to post
Share on other sites
tvskit

tvskit 259

Posted
Posted (edited)

Все сделал, посмотри пожалуйста правильно? И также ответь у меня на одном сайте активированы только каталог файлов и каталог статей, а на другом форум, каталог файлов и каталог статей и как я понял много лишнего прописано в robots.txt нечего страшного?

 

На оба сайта закиньте мой последний роботс, ни чего страшного.

 

Проверил всё хорошо.

И обновите в гугле

1.

4df9d0412144.jpg

2.

1f16910b43b4.jpg

3.

7e3633f92fd3.jpg

 

 

Вроде как все сделал, если можешь посмотри пожалуйста, такой вопрос в тичение 3 недель я думаю гугл проиндексирует, это в плюс пойдет сайту? Позиции могут какие то вверх пойти? Потому как ошибок было очень много...

 

Если в индексе были дубли, то сайт наверняка просядет, т.к. он эти страницы вначале удалит, потом вставит нормальные, в общем процесс долгий и может и месяц-два.

Edited by tvskit
Link to post
Share on other sites
Kolbasa

Kolbasa 8

Posted
  • Author
Posted

Сделал как вы написали, мне написало "Готово! Через минуту обновите страницу, чтобы подтвердить метку времени."

Link to post
Share on other sites
tvskit

tvskit 259

Posted
Posted

Сделал как вы написали, мне написало "Готово! Через минуту обновите страницу, чтобы подтвердить метку времени."

 

Что я вам порекомендую.

 

Составьте список из разных страниц, например нужных, которые должны быть в индексе:

 

/load/chity_dlja_cs_go/multikhak_csgo_winx_private/2-1-0-244

/load/chity_dlja_point_blank/antiban_dlja_point_blank/4-1-0-236

...

...

...

/load/chity_dlja_samp_0_3z/chit_dlja_gta_samp_0_3z_na_dengi/10-1-0-356

...

/forum/2-38-1

/forum/2-78-1

...

 

 

и тех которых быть не должно, например:

 

/load/chity_dlja_cs_1_6/1-3

/load/chity_dlja_cs_1_6/1

...

...

...

...

/load/chity_dlja_cs_go/2-2

/load/chity_dlja_cs_go/2

...

/?page2

...

/forum/3

....

 

и после различных действий с роботсом, проверьте по списку в гугле и яше, чтобы, что надо - разрешено, что не надо - заблокировано.

Link to post
Share on other sites
Kolbasa

Kolbasa 8

Posted
  • Author
Posted

а так как мы сделали что не пойдет? А как составлять это все, это же долго очень, так как файлов на сайте не мало, и не со всем я понимаю.

Link to post
Share on other sites
tvskit

tvskit 259

Posted
Posted

а так как мы сделали что не пойдет? А как составлять это все, это же долго очень, так как файлов на сайте не мало, и не со всем я понимаю.

Не, все не надо, делайте список из самых основных, допустим, см.рис., возьмите там по одному те которые должны быть в идексе и те которые нет.

d50702654ba3.jpg

 

пс. Эта рекомендация, если будете химичить в роботсе, то проверять стоит.

Link to post
Share on other sites

Please sign in to comment

You will be able to leave a comment after signing in



Sign In Now
 Share
Followers 0
Go to topic listing

  • Recently Browsing   0 members

    No registered users viewing this page.

×
×
  • Create New...