Jump to content

Индексация Яндекс и Гугл... в чем проблема ? Яндекс впереди


Recommended Posts

Есть вопрос? Задай его профессиональным веб-мастерам, SEO и другим специалистам!

Неужели все, кто отвечал в данной теме не заглянули в robots.txt ?

Ну давайте, проведем экскурсию для маленьких:

User-agent: *
Allow: /
Disallow: *tid=
Disallow: /print/
Disallow: /why_register/
Sitemap: http://vdoske.com.ua/sitemap.xml.gz

User-agent: MediaPartners-Google
Allow: /

там около 50 урл-ов, формат .xml.gz является вполне приемлемым как для яндекса так и для гугла.

Все что нужно автору - сгенирировать нормальную карту сайта, путь даже и в архиве gunzip.

П.с. - и уберите с robots.txt директиву

Allow: /

Кроме ошибки при анализе она ничего не даст. Робот действует по правилу все что не запрещено - разрешено.

 

На всякий случай пруф: http://www.sitemaps.org/ru/protocol.html#index

И простите.. но я не понимаю почему ? Allow: /

Link to post
Share on other sites

Join the conversation

You can post now and register later. If you have an account, sign in now to post with your account.

Guest
Reply to this topic...

×   Pasted as rich text.   Paste as plain text instead

  Only 75 emoji are allowed.

×   Your link has been automatically embedded.   Display as a link instead

×   Your previous content has been restored.   Clear editor

×   You cannot paste images directly. Upload or insert images from URL.

  • Recently Browsing   0 members

    No registered users viewing this page.

×
×
  • Create New...