Настройка индексирования robots.txt Помогите плиз

[pro100azart 2]

robots.txt сайт не индефицируется что ту не правильно? Я не могу понять... Яндекс не проиндексировал не одной странице, что надо изменить помогите плиз....Заранее спасибо. Буду очень благодарен за помощь.

robots.txt

 

User-agent: *

Disallow:

Host: pro100azart.pw

Sitemap: http://pro100azart.pw/sitemap.xml

[Oziablo 9]

сколько дней сайту?

[pro100azart 2]

сколько дней сайту?

Создан 06.01.2014 

[pro100azart 2]

По началу было все нормально  но после первой выдачи все удалилось( 

[Oziablo 9]

хм ну не знаю
с роботс у вас все нормально
возможно яндекс счел этот сайт не нужным, попробуйте написать в поддержку яндекса

[pro100azart 2]

хм ну не знаю

с роботс у вас все нормально

возможно яндекс счел этот сайт не нужным, попробуйте написать в поддержку яндекса

Спасибо за ответ попробую подождать до понедельника. И последую вашему совету.

[redak 12]

Ждите следующего апа.

Когда вы добавили сайт в вебмастер Яндекс?

Как роботы Гугла индексирует ваш сайт?

[shopeq 140]

А, что Вы хотели ???

Disallow: /  блокирует доступ ко всему сайту

Читайте здесь http://help.yandex.ru/webmaster/controlling-robot/robots-txt.xml       а то будете ждать АПЫ, а оно  тишина.

[Воланд 5016]

Disallow лучше убрать. А вообще скорее всего странички схавал быстроробот, потом выплюнул. Ждите полноценной индексации

[files 2740]

А, что Вы хотели ???

Disallow: /  блокирует доступ ко всему сайту

 

Пустая директива 

Disallow:

(как у ТС)

разрешает индексировать все на сайте

 

директива с указанием черты запрещает.

Disallow: /

 

Так что у ТС индексация открыта, не надо вводить человека в заблуждение.

 

Сайт молодой и по первый выдаче в поиск попал индекс быстроробота. Потом страницы исчезли. Все правильно. Ждите полноценной индексации.

 

P.S. Другой вопрос: понравится ли Яндексу ваша тематика? Он вороже к таким сайтам относится, а если и к новым - то вообще.

[pro100azart 2]

Ждите следующего апа.

Когда вы добавили сайт в вебмастер Яндекс?

Как роботы Гугла индексирует ваш сайт?

Сайт добавил 14.01.2014

​Гугл индексирует по тетеньку. 

[pro100azart 2]

P.S. Другой вопрос: понравится ли Яндексу ваша тематика? Он вороже к таким сайтам относится, а если и к новым - то вообще.

С тематикой все хорошо должно быть яндекс ее не рекламирует не индексировать должен. Попробую ждать  полноценной индексации. Вы меня хоть утешали)))

[yakes 0]

А домен новый или был когда то чейты, проверьте тут: http://archive.org/web/

А то может он уже когда то давно словил АГС

[pro100azart 2]

А домен новый или был когда то чейты, проверьте тут: http://archive.org/web/

А то может он уже когда то давно словил АГС

Домен новый)

Проверил Эта страница доступна на веб-сайте!

Wayback Machine не имеют, что страницы в архив.

[pro100azart 2]

Disallow лучше убрать. А вообще скорее всего странички схавал быстроробот, потом выплюнул. Ждите полноценной индексации

А если убрать Disallow яндекс будет индексировать? Я пока думаю лучше подождать ище месяц потом если что удалю.

[Picaro 7]

Disallow убрать нафиг. И заменить на "Allow: /"

Директива Host должна идти после Allow/Disallow, но не обязательно после последнего.

А вообще такой роботс нафиг не сдался. Предпочтительный домен и саймэп указать в панели ВМ, а роботс удалить.

[pro100azart 2]

Disallow убрать нафиг. И заменить на "Allow: /"

Директива Host должна идти после Allow/Disallow, но не обязательно после последнего.

А вообще такой роботс нафиг не сдался. Предпочтительный домен и саймэп указать в панели ВМ, а роботс удалить.

Если убрать Disallow

то будет примерно так?

User-agent: *

Allow: /"

Host: pro100azart.pw

Sitemap: http://pro100azart.pw/sitemap.xml

[pro100azart 2]

Предпочтительный домен и саймэп указать в панели ВМ, а роботс удалить.

 

А как это сделать?

[Picaro 7]

А как это сделать?

http://webmaster.yandex.ru

http://www.google.com/webmasters

http://webmaster.mail.ru

http:/bing.com/webmaster

 

Это панели ВМ разных поисковиков. Добавляешь сайт, подтверждаешь права на него.

Янд: "Настройка индексирования" -> "Файлы Sitemap" и "Главное зеркало"

Гугл: "Файлы Sitemap" с главной и "Настройки сайта" с кнопки с шестеренкой.

Роботс удалить как файл.

[addigry 0]

Попробуйте вообще выкинуть  файлик robots.txt

По личному опыту смысла в нем 0. Вот сайт моего конкурента, а точнее сайт который я "здераю" так у него robots.txt отродясь не было и очень себя великолепно чувствует.

[webostrov 2532]

А, что Вы хотели ???

Disallow: /  блокирует доступ ко всему сайту

Читайте здесь http://help.yandex.ru/webmaster/controlling-robot/robots-txt.xml       а то будете ждать АПЫ, а оно  тишина.

Disallow: /           - да, блокирует ВСЕ

Disallow:             - наоборот, разрешает ВСЕ.

 

Мой совет - введите свой сайт в Гугл.Вебмастер, там сразу напишут, если с РОБОТС что-то не так. У меня на прошлой неделе так было - наконструировал и сглупил, а по Ггле соориентировался что накрутил )))  

И вообще РОБОТС нужен чтобы что-то запретить - например, плагины, админку, дубли и т.п. Если вы ничего не запрещаете - зачем вообще РОБОТС? 

 

И еще - поначалу всегда каждую новую статью вводите в аддурилку Яши. Так он индексирует не 12 месяца, а 1-2 недели (новичков). Так что дела не в РОБОТС. Добра! 

[pro100azart 2]

1

[pro100azart 2]

Попробуйте вообще выкинуть  файлик robots.txt

По личному опыту смысла в нем 0. Вот сайт моего конкурента, а точнее сайт который я "здераю" так у него robots.txt отродясь не было и очень себя великолепно чувствует.

Я думаю это мне не поможет. Я все жду чуда. Твой сайт великолепный спору нет. Посещаемости ему не занимать)). 

[pro100azart 2]

Попробуйте вообще выкинуть  файлик robots.txt

По личному опыту смысла в нем 0. Вот сайт моего конкурента, а точнее сайт который я "здераю" так у него robots.txt отродясь не было и очень себя великолепно чувствует.

Я думаю это мне не поможет. Я все жду чуда. Твой сайт великолепный спору нет. Посещаемости ему не занимать)).