Jump to content

куда вставить сайтмап?


Recommended Posts

Здравствуйте.

 

На серче нашел нужный роботс, но там тоже не знают как правильно его оформить.

User-agent: *
Disallow: /engine/
Sitemap: http://site.ru/sitemap.xml

User-agent: Googlebot
Allow: /engine/*.js
Allow: /templates/*.css

User-agent: Googlebot-Image
Allow: /uploads/*.jpg
Allow: /uploads/*.png

User-agent: YandexBot
Host: site.ru

Сайтмап достаточно разместить для всех роботов? Не нужно везде прописывать? 

 

Если Disallow: /engine/ для всех роботов, то значит и для Яндекса тоже будет закрыто? 

По сути, Disallow: /engine/ должно у всех быть закрыто. 

Только гуглу нужен доступ к некоторым файлам и им я открыл доступ.

Яндексу нужен хост - ему указал. 

Link to post
Share on other sites
  • VIP

User-agent: *

Disallow: /engine/

 

User-agent: Googlebot

Disallow: /engine/

Allow: /engine/*.js

Allow: /templates/*.css

 

User-agent: Googlebot-Image

Allow: /uploads/*.jpg

Allow: /uploads/*.png

 

User-agent: YandexBot

Disallow: /engine/

Host: site.ru

 

Sitemap: http://site.ru/sitemap.xml

 

Каждый паук читает весь роботс, но применяет только те правила, которые прописаны именно для него. Если правил для отдельного паука нет, он берет правила из блока "User-agent: *".

Link to post
Share on other sites

Всё таки нет.... Надо к каждому юзер агенту прописывать....

 

Я только что проверил верхний роботс, там не закрывает файлы от индексации.

 

Потом сделал так:

User-agent: *
Disallow: /engine/
Sitemap: http://site.ru/sitemap.xml

User-agent: Googlebot
Disallow: /engine/
Allow: /engine/*.js
Allow: /templates/*.css

User-agent: Googlebot-Image
Allow: /uploads/*.jpg
Allow: /uploads/*.png

User-agent: YandexBot
Host: site.ru

и скрыло engine/download.php .

Кстати, стили разрешил, но в гугл.вебмастере всё еще выходит ошибка О_о

Link to post
Share on other sites

Всё таки нет.... Надо к каждому юзер агенту прописывать....

 

Я только что проверил верхний роботс, там не закрывает файлы от индексации.

 

Потом сделал так:

User-agent: *
Disallow: /engine/
Sitemap: http://site.ru/sitemap.xml

User-agent: Googlebot
Disallow: /engine/
Allow: /engine/*.js
Allow: /templates/*.css

User-agent: Googlebot-Image
Allow: /uploads/*.jpg
Allow: /uploads/*.png

User-agent: YandexBot
Host: site.ru

и скрыло engine/download.php .

 

Кстати, стили разрешил, но в гугл.вебмастере всё еще выходит ошибка О_о

Вам же люди дали правильный ответ ---  Сайтмап и хост только один раз в самом конце роботса

Sitemap: http://site.ru/sitemap.xml

Если вы считаете, что это не так, то зачем разводите эту дискусиию, да еще и с упоминанием того, что на серче этого никто не знает. бред. Это знают все, кто хотя бы погуглил этот запрос. Накручиваем посты? Тупо.

 

Link to post
Share on other sites

Вам же люди дали правильный ответ ---  Сайтмап и хост только один раз в самом конце роботса

Sitemap: http://site.ru/sitemap.xml

Если вы считаете, что это не так, то зачем разводите эту дискусиию, да еще и с упоминанием того, что на серче этого никто не знает. бред. Это знают все, кто хотя бы погуглил этот запрос. Накручиваем посты? Тупо.

 

В смысле "накручиваем посты"? Тут деньги чтоли платят ,если у тебя много постов?

 

У меня с этим роботс выдает ошибка на css и картинки.... http://prntscr.com/7z6532уже третий день с этим роботс мучаюсь из-за письмо от гугл

 

 

Link to post
Share on other sites

Join the conversation

You can post now and register later. If you have an account, sign in now to post with your account.

Guest
Reply to this topic...

×   Pasted as rich text.   Paste as plain text instead

  Only 75 emoji are allowed.

×   Your link has been automatically embedded.   Display as a link instead

×   Your previous content has been restored.   Clear editor

×   You cannot paste images directly. Upload or insert images from URL.

  • Recently Browsing   0 members

    No registered users viewing this page.

×
×
  • Create New...