Jump to content
Sign in to follow this  
Gleb

Фаил Robots.txt

Recommended Posts

Здравствуйте, только что,случайно наткнулся в яндекс вебмастере на вот такую картину

123.png

Так вот, 44 страницы которые якобы запрещены в файле Robots.txt все рабочие, уникальные, и индексации которых я давно жду.... Подскажите, что делать чтобы они проиндексировались....
Вот вид robots 

 

User-agent: *
Disallow: /wp-login.php
Disallow: /wp-register.php
Disallow: /feed/
Disallow: /cgi-bin
Disallow: /wp-admin
Disallow: /wp-includes
Disallow: /wp-content/plugins
Disallow: /wp-content/cache
Disallow: /wp-content/themes
Disallow: /trackback
Disallow: */comments
Disallow: */trackback
Disallow: */*/trackback
Disallow: */*/feed/*/
Disallow: */feed
Disallow: /*?*
Disallow: /?s=
 
User-agent: Yandex
Disallow: /wp-login.php
Disallow: /wp-register.php
Disallow: /feed/
Disallow: /cgi-bin
Disallow: /wp-admin
Disallow: /wp-includes
Disallow: /wp-content/plugins
Disallow: /wp-content/cache
Disallow: /wp-content/themes
Disallow: /trackback
Disallow: */comments
Disallow: */trackback
Disallow: */*/trackback
Disallow: */*/feed/*/
Disallow: */feed
Disallow: /*?*
Disallow: /?s=
Host: "Мой сайт"
Sitemap: "Мой сайт"

Share this post


Link to post
Share on other sites

Убрать правило в robots.txt, которое запрещает индексацию этих страниц.

А лучше прислать ссылки на страницы, которые запрещены, скажу в чем проблема

Share this post


Link to post
Share on other sites

Судя по вашему роботсу у закрытых страниц присутствует один из символов указанных в этих дерективах

Disallow: /*?*
Disallow: /?s=
но чтоб сказать точно в чем проблема нужны ссылки на ваши 44 стр.

Share this post


Link to post
Share on other sites

Join the conversation

You can post now and register later. If you have an account, sign in now to post with your account.

Guest
Reply to this topic...

×   Pasted as rich text.   Paste as plain text instead

  Only 75 emoji are allowed.

×   Your link has been automatically embedded.   Display as a link instead

×   Your previous content has been restored.   Clear editor

×   You cannot paste images directly. Upload or insert images from URL.

Sign in to follow this  

  • Recently Browsing   0 members

    No registered users viewing this page.

×
×
  • Create New...