Jump to content

Search the Community

Showing results for tags 'robot.txt'.



More search options

  • Search By Tags

    Type tags separated by commas.
  • Search By Author

Content Type


Forums

  • Поисковые системы
    • kemelqwerty
    • Яндекс
    • Google
    • Другие поисковики
    • SMO
    • Каталоги
    • Инструкции и уроки
  • Основные форумы
    • Оценка сайта
    • Новости
    • Контекстная реклама
    • Партнерские программы
    • Сервисы, программы и скрипты
    • Дизайн
    • Домены
    • Биржа сайтов
    • Сайтостроительство
    • Хостинг
    • Финансы
    • Разное
    • Конкурсы
  • Работа
    • Правила раздела
    • Дизайн
    • Копирайт/Рерайт
    • SEO
    • SMO/SMM
    • Программирование
    • Разное
  • Другое
    • О нас
    • Black List
    • White List
    • Оффтопик

Find results in...

Find results that contain...


Date Created

  • Start

    End


Last Updated

  • Start

    End


Filter by number of...

Joined

  • Start

    End


Group


ICQ


Skype


Местоположение


Интересы


Ваш сайт


Профиль ID

Found 3 results

  1. Ребят, проводил диагностику на сайте https://lifepoland.com.ua и показывает на 98 URL-лов код ответа сервера 200 ок-disallowed. сайт был переведен недавно на протокол https, может было что упущено.Может проблема в robot.txt? User-agent: *Allow: */*.cssAllow: */*.js*Allow: /wp-admin/admin-ajax.phpDisallow: /wp-adminDisallow: */*wp-json/Disallow: /wp-login.phpDisallow: /wp-register.phpDisallow: */feed*Disallow: /cgi-binDisallow: /xmlrpc.phpDisallow: */*commentsDisallow: */*trackback/Disallow: */*?*=*Disallow: */*?p*=*Disallow: */embed*Disallow: */rss вот скрин по диагностике Буду рад любой подсказке как решить эту проблему. Спасибо.
  2. Приветствую всех. Подскажите, знающие люди, какой должен быть файл robots.txt? На одном форуме в оценку моего сайта сказали, что у меня он не правильный. Я свой сделал как писал Алаев. Временно переключимся — смотрите на идеальный robots.txt для DLE User-agent: * Disallow: /engine/ Host: site.ru Sitemap: http://site.ru/sitemap.xml
  3. Добрый день! Подскажите пожалуйста в файле robot.txt сайта http://upiter-ug.ru стоит запрет на индексацию страниц с категориями товаров или я неправлильно читаю этот файл?
×
×
  • Create New...