Господа !! правильно ли у меня robots.txt

[adet008 8]

Господа !! правильно ли у меня robots.txt

 

 

User-agent: *

Disallow: /administrator/

Disallow: /cache/

Disallow: /components/

Disallow: /images/

Disallow: /includes/

Disallow: /installation/

Disallow: /language/

Disallow: /libraries/

Disallow: /media/

Disallow: /modules/

Disallow: /plugins/

Disallow: /templates/

Disallow: /tmp/

Disallow: /xmlrpc/

Disallow: /rest/

Disallow: /component/

Disallow: /news/

Disallow: /otdix-na-azove.html

Disallow: /otzivi.html

Disallow: /the-community.html

Disallow: /about-joomla.html

Disallow: /razvlechenia/60-2012-05-11-13-01-42.html

Disallow: /razvlechenia/53-2012-05-11-12-26-07.html

Disallow: /razvlechenia/65-2012-05-11-13-05-01.html

Disallow: /razvlechenia/61-2012-05-11-13-02-25.html

Disallow: /razvlechenia/57--qq.html

Disallow: /razvlechenia/64-2012-05-11-13-04-33.html

Disallow: /?option=com_phocagallery&view=detail&catid=1:2012-05-06-22-21-45&id=6:komn1&phocaslideshow=1&tmpl=component&Itemid=18

Disallow: /razvlechenia/58-2012-05-11-13-00-36.html

Disallow: /razvlechenia/55--qq.html

Disallow: /razvlechenia/62-2012-05-11-13-03-02.html

Disallow: /?option=com_phocagallery&view=detail&catid=1:2012-05-06-22-21-45&id=5:kacheli&tmpl=component&Itemid=18

Disallow: /razvlechenia/52--qq.html

Disallow: /razvlechenia/56-2012-05-11-12-54-24.html

Disallow: /razvlechenia/66-2012-05-11-13-05-35.html

Disallow: /razvlechenia/54-2012-05-11-12-28-34.html

Disallow: /razvlechenia/59-2012-05-11-13-01-08.html

Disallow: /razvlechenia/63-2012-05-11-13-03-37.html

Sitemap: http://azofmore.ru/sitemap.xml

Host: azofmore.ru

 

[Danalet 688]

Тут нужно еще знать - какая CMS - каждая по своему дубли страниц делает... В общем все правильно, вроде....

[Рамаз 21]

Да.

[exces 116]

слишком большой, но надо знать cms вашего сайта

[MonaX 134]

 

Sitemap: http://azofmore.ru/sitemap.xml

Host: azofmore.ru

 

 

 

Сначала поставь хост, а свой сайтмап в последнюю строку.

[Neznajka 0]

Папку images убрать с Disallow если необходима индексация страниц

[adet008 8]

подскажите, вот эти страницы запрещены для индексации что-ли ???

Disallow: /razvlechenia/60-2012-05-11-13-01-42.html

Disallow: /razvlechenia/53-2012-05-11-12-26-07.html

Disallow: /razvlechenia/65-2012-05-11-13-05-01.html

Disallow: /razvlechenia/61-2012-05-11-13-02-25.html

Disallow: /razvlechenia/57--qq.html

Disallow: /razvlechenia/64-2012-05-11-13-04-33.html

Disallow: /?option=com_phocagallery&view=detail&catid=1:2012-05-06-22-21-45&id=6:komn1&phocaslideshow=1&tmpl=component&Itemid=18

Disallow: /razvlechenia/58-2012-05-11-13-00-36.html

Disallow: /razvlechenia/55--qq.html

Disallow: /razvlechenia/62-2012-05-11-13-03-02.html

Disallow: /?option=com_phocagallery&view=detail&catid=1:2012-05-06-22-21-45&id=5:kacheli&tmpl=component&Itemid=18

Disallow: /razvlechenia/52--qq.html

Disallow: /razvlechenia/56-2012-05-11-12-54-24.html

Disallow: /razvlechenia/66-2012-05-11-13-05-35.html

Disallow: /razvlechenia/54-2012-05-11-12-28-34.html

Disallow: /razvlechenia/59-2012-05-11-13-01-08.html

Disallow: /razvlechenia/63-2012-05-11-13-03-37.html

 

Но тут же есть классный текст, который я бы хотел, чтобы ПС проиндексировали !!! что делать, чтобы робот их проиндексировал ?

[BlackMaN333 461]

 

 

/61

Да, запрещены. Просто удали их с роботса или Disallow: замени на Allow:

[adet008 8]

вот Роботс после исправления, что скажите ?? 

User-agent: *

Disallow: /administrator/

Disallow: /cache/

Disallow: /components/

Disallow: /images/

Disallow: /includes/

Disallow: /installation/

Disallow: /language/

Disallow: /libraries/

Disallow: /media/

Disallow: /modules/

Disallow: /plugins/

Disallow: /templates/

Disallow: /tmp/

Disallow: /xmlrpc/

Disallow: /rest/

Disallow: /component/

Disallow: /news/

Disallow: /otzivi.html

Disallow: /about-joomla.html

Disallow: /?option=com_phocagallery&view=detail&catid=1:2012-05-06-22-21-45&id=6:komn1&phocaslideshow=1&tmpl=component&Itemid=18

Disallow: /?option=com_phocagallery&view=detail&catid=1:2012-05-06-22-21-45&id=5:kacheli&tmpl=component&Itemid=18

Sitemap: http://azofmore.ru/sitemap.xml

Host: azofmore.ru

[adet008 8]

 

 

 

 

Сначала поставь хост, а свой сайтмап в последнюю строку.

 

стоит так делать ?? )) я как в фильме "я очкую" )))

 

[buktor 243]

 

 

стоит так делать ?? ))

Да, иначе как будут роботы знать где твой сайтмап(это поможет быстрой индексации)

 

 

я как в фильме "я очкую"

Да ты успокойся блин!)

[adet008 8]

Host: azofmore.ru

Sitemap: http://azofmore.ru/sitemap.xml

 

 

в Рототе сделать вот такую последовательность ?? ) и все будет ок ?? 

[adet008 8]

В Роботсе ))

[buktor 243]

да

[adet008 8]

все сделал, так теперь все должно с еще большей силой и скоростью заработать ?? ))

[buktor 243]

все сделал, так теперь все должно с еще большей силой и скоростью заработать ?? ))

Должно но не обязано, при установленном sitemap на сайте, индексация должна ускорится, т.к. в этом файле хранятся все внутренние ссылки сайта и как правило когда робот их видит, он начинает переходить по им!

[adet008 8]

вот что я заметил, что 

эта станица http://azofmore.ru/razvlechenia/58-2012-05-11-13-00-36.html

что эта страница http://azofmore.ru/razvlechenia/58.html

информация одна и та же в чем дело ??? раньше индексация одной из этих страниц была запрещена.. я же сейчас индексацию разрешил !!! 

поясните ?? 

[buktor 243]

@adet008, а это плохо, т.к. это дубли контента, скажите - какая у вас CMS?

[adet008 8]

джумла 1.5 

[adet008 8]

наверное вернуть обратно Роботс ??

[buktor 243]

Нет это не поможет, к сожалению в joomla 1.5 я не силен, но постараюсь найти решение!

[Xweb12 97]

Имхо, эти страницы у вас в одной категории. Дубль контента ничего хорошего для ПС не даст. Просто уберите одну страницу, и все.... зачем вам две одинаковые страницы в одной категории....

[adet008 8]

а как это сделать ??

[darkrate 1]

Все будет нормально! Оставляй роботс как есть.