Jump to content

Search the Community

Showing results for tags 'robots'.

  • Search By Tags

    Type tags separated by commas.
  • Search By Author

Content Type


Forums

  • Поисковые системы
    • kemelqwerty
    • kemelqwerty
    • Яндекс
    • Google
    • Другие поисковики
    • SMO
    • Каталоги
    • Инструкции и уроки
  • Основные форумы
    • Оценка сайта
    • Новости
    • Контекстная реклама
    • Партнерские программы
    • Сервисы, программы и скрипты
    • Дизайн
    • Домены
    • Биржа сайтов
    • Сайтостроительство
    • Хостинг
    • Финансы
    • Разное
    • Конкурсы
  • Работа
    • Правила раздела
    • Дизайн
    • Копирайт/Рерайт
    • SEO
    • SMO/SMM
    • Программирование
    • Разное
  • Другое
    • О нас
    • White List
    • Оффтопик

Find results in...

Find results that contain...


Date Created

  • Start

    End


Last Updated

  • Start

    End


Filter by number of...

Joined

  • Start

    End


Group


ICQ


Skype


Местоположение


Интересы


Ваш сайт


Профиль ID

Found 14 results

  1. https://alt-infinity.ru/ это мой сайт на wordpress, недавно я создал для него robots.txt, до этого можно сказать он отсутствовал. Подскажите, правильно? User-agent: * Disallow: /cgi-bin Disallow: /? Disallow: /wp- Disallow: *?s= Disallow: *&s= Disallow: /search Disallow: /author/ Disallow: */embed Disallow: */page/ Allow: */uploads Allow: /*/*.js Allow: /*/*.css Allow: /wp-*.png Allow: /wp-*.jp
  2. Я в robots.txt вставил только Sitemap: https://alt-infinity.ru/sitemap.xml и Sitemap: https://alt-infinity.ru/sitemap.xml.gz Но у меня есть ещё другие файлы в карте сайта https://alt-infinity.ru/post-sitemap.xml https://alt-infinity.ru/page-sitemap.xml https://alt-infinity.ru/category-sitemap.xml https://alt-infinity.ru/post_tag-sitemap.xml Вопрос. Нужно ли их вставить?
  3. Как закрыть эти штуки в robots.txt Мой вариант, верно ли User-agent: * Disallow: /master/ Disallow: /map? Disallow: /PasswordRecovery# Sitemap: https://mustangtk.ru/sitemap.xml https://prnt.sc/renf8t https://prnt.sc/renfplhttps://prnt.sc/renfpl
  4. Сервис проверки на мобильность сайта указывает что много заблокировано в роботе оn Гугл бота. Какие именно строки в роботе закрывают нужное от робота? Интересует этот сайт toursector.org.ua/
  5. Доброго времени суток, коллеги! Проверял файл робота в Яндексе и Гугле. Яндекс пишет, что все хорошо, а Гугл написал, что есть 1 ошибка и 2 предупреждения и подсветил 3 строки: Clean-Param: utm_source&utm_medium&utm_campaign, Crawl-Delay: 0.5, Crawl-Delay: 5.Как можно решить эту ситуацию? Если Яндекс поддерживает их, а Гугл нет, то стоит ли их убрать? User-agent: * Disallow: /wp-admin/ Disallow: /wp-json/ Disallow: /wp-includes/ Disallow: /wp-content/ Disallow: /plugins/ Disallow: /search/ Disallow: /cart/ Disallow: /my-account/ Disallow: */?s= Disallow:
  6. Всем привет. Делаю сайт, пока только главная страница. И возникли 2 проблемы 1) С файлом Роботс. Я заливаю на хостинг нужный файл, но при переходе названиесайта/роботс.txt Показывается: Хотя роботс в корневом каталоге другой И не могу сделать чтобы отображался нужный. 2) Проблема 2 — это редирект Домен раньше был другим сайтом (партнерским) и на него вели ссылки: навзаниесайта/маркерайди Как сделать редирект в файле htaccess Если перешли по ссылке навзаниесайта/маркерайди редиректом попадали на главную страницу названиесайта.ру. Сейчас если зайти на с
  7. Здравствуйте, вот в чем проблема, поставил на сайт https:// протокол. Вопрос как сделать чтобы читался robots , P.S настраивал через htaccess Вот мои условия: RewriteEngine On RewriteCond %{HTTP:PORT} !^443$ RewriteRule ^(.*)$ https://%{HTTP_HOST}%{REQUEST_URI} [L,R] RewriteCond %{HTTP_HOST} ^www\.hardsafe\.ru$ RewriteRule .* https://hardsafe.ru/$0 [QSA,L,R=permanent]
  8. Сидел, как всегда ничего не делал и возник у меня вопрос: а надо ли закрывать от индексации категории? С одной стороны, есть риск получить нехилую пачку дублей, с другой же стороны, есть риск потерять приличную часть трафа по СЧ запросам. У кого какое мнение?
  9. надо запретить сайт.com индексировать правильно ли я сделал в роботсе прописанно так Индексироватся будет только сайт.ru ? User-agent: * Host: сайт.ru Sitemap: http://сайт.ru/sitemap.xml и еще .htaccess прописанно RewriteEngine On RewriteCond %{HTTP_HOST} сайт.com RewriteRule (.*) http://сайт.ru/$1 [R=301,L] # Rewrite www RewriteCond %{HTTP_HOST} ^www.сайт.ru$ RewriteRule (.*) http://сайт.ru/$1 [R=301,L]
  10. Доброго времени суток, ребята! Сегодня у меня совсем нет желания умничать, составлять 84 пункта, которые обязательно должен знать юный seo-шник, бить себя в грудь и говорить, что надо обязательно бороться с дублями страниц, заниматься эффективным линкбилдингом. Я даже не буду рассказывать как повысить конверсию и посещаемость на 18 тысяч процентов. Чуть больше года назад я был новичком на seo-просторах. Но за последние месяцы получил некоторый опыт, которым хочу поделиться. Да, прямо как опытный дед-пенсионер. Так что, как говорится: Если ты смелый, ловкий и умелый, Джунгли тебя зовут!
  11. Доброго выходного! Как думаете, какова будет реакция поисковиков на следующее: На городском портале, добавлю раздел новостей и настрою автоматическое наполнение копипастом с указанием источника и полностью закрою раздел в robots.txt Спросите для чего? Да просто для пользователей да и немного создать видимость живого сайта
  12. Всем привет! Дорогие друзья буду короток. Мне с вебмастера Google пришло такое письмо: Мы обнаружили на Вашем сайте проблему, которая может помешать его сканированию. Робот Googlebot не может обработать код JavaScript и/или файлы CSS из-за ограничений в файле robots.txt. Эти данные нужны, чтобы оценить работу сайта. Поэтому если доступ к ресурсам будет заблокирован, то это может ухудшить позиции Вашего сайта в Поиске. Собственно мой Robots.txt на сайте для Googlebot: User-agent: Googlebot Disallow: /cgi-bin Disallow: /wp-admin Disallow: /wp-includes Disallow: /wp-content/plugins D
  13. На сайте имеются адреса: _сайт.ру/domashnij-tekstil/podushki-i-odeyala?cat=115 _сайт.ру/domashnij-tekstil/podushki-i-odeyala?cat=115&price=1000-2000 _сайт.ру/domashnij-tekstil/podushki-i-odeyala?cat=115&dom_textile_manufacturer=176&price=1000-2000 _сайт.ру/domashnij-tekstil?cat=48&dom_textile_manufacturer=165&price=2000-3000 В справке Яндекса, я так понимаю, что мне больше подходит вот этот вариант: #если таких параметров несколько: www.site1.ru/forum_old/showthread.php?s=681498605&t=8243&ref=1311 www.site1.ru/forum_new/showthread.php?s=1e71c417a&t=8243
  14. Добрый день. Вот возник у нас вопрос: Есть сайт, у сайта есть - как положено - файл роботс, в файле роботс закрыт от индексации раздел...и все бы ничего, но этого раздела на сайте: нет. User-Agent: * Disallow: /search/ Disallow: /system/ Disallow: /cgi-bin/ Disallow: /secure/ Disallow: /go-to/ Disallow: /file/ Host: www.сайтt.com Sitemap: http://www.сайт.com/sitemap.xml Вот и задались мы вопросом: Раздел от индексации закрыт, НО: раздела - нет, как отнесутся к этой ошибке ПС. Если как-то отнесутся вообще.
×
×
  • Create New...