Sign in to follow this  
Followers 0
Mr.Gif

Robots.txt для DLE

7 posts in this topic

Подскажите как правильно сделать robots.txt на dle 10.0. При добавлении в google поиск  написало 

Файл robots.txt Заблокированные URL  http://evindo.ru/robots.txt  Для робота Google установлен запрет на http://evindo.ru/

Ещё пишет Обнаружены серьезные ошибки, связанные с состоянием сайта.

di-BWFTLZ.png

 

Ну и щас не индексируется

Share this post


Link to post
Share on other sites

User-agent: *
Disallow: /engine/
Disallow: /engine/go.php
Disallow: /user/
Disallow: /newposts/
Disallow: /statistics.html
Disallow: /*subaction=userinfo
Disallow: /*subaction=newposts
Disallow: /*do=lastcomments
Disallow: /*do=feedback
Disallow: /*do=register
Disallow: /*do=lostpassword
Disallow: /*do=addnews
Disallow: /*do=stats
Disallow: /*do=pm

стандартно так.

Share this post


Link to post
Share on other sites

User-agent: *
Allow: /uploads/posts/
Disallow: /*subaction=userinfo
Disallow: /engine/go.php
Disallow: /favorites/
Disallow: /cache/
Disallow: /cgi-bin/
Disallow: /page/
Disallow: */page/*
Disallow: /engine/
Disallow: /language/
Disallow: /templates/
Disallow: /uploads/
Disallow: /backup/
Disallow: /newposts/
Disallow: /lastnews/
Disallow: /catalog/
Disallow: /autobackup.php
Disallow: /admin.php
Disallow: /statistics.html
Disallow: /banners/
Disallow: /user/
Disallow: /*action=mobile$
Disallow: /do=*
Disallow: /*do=*
Disallow: /?*
Host: сайт.ru
Sitemap: http://сайт.ru/sitemap.xml

Mr.Gif likes this

Share this post


Link to post
Share on other sites

имхо ,если идёт заработок на системе как сапе, то не стоит ставить запрет на:

Disallow: /page/
Disallow: */page/*

Share this post


Link to post
Share on other sites

имхо ,если идёт заработок на системе как сапе, то не стоит ставить запрет на:

Имхо, если не хочешь дублей страниц, то лучше пусть стоит этот запрет!))

Share this post


Link to post
Share on other sites

Вот мой robots:

User-agent: *
Disallow:/engine/
Disallow:/user/
Disallow:/404.html/
Host: site.ru
Sitemap: http://site.ru/sitemap.xml

 

 

У меня 9.8 но отличия небольшие от 10 и я закрываю от ПС не нужное мета тегами <meta name="robots" content="noindex,nofollow" />

 

В engine/engine.php у меня стоит конструкция в которой я настраиваю что открыть ,а что закрыть от ПС.

 

А вообще рекомендую зайти на блог Алаича там много инфы по оптимизации DLE.

Share this post


Link to post
Share on other sites
Guest
This topic is now closed to further replies.
Sign in to follow this  
Followers 0

  • Recently Browsing   0 members

    No registered users viewing this page.