alexandrius

Mail.ru сейчас активничать начинает. Улучшили кабинет для веб мастеров, статистику... Может и фильтры начинают вводить. Лучше с ними по этому вопросу связаться.

По моему в топ-100 добавлятьься стоит. После добавления сайта тонкий ручеёк визитов и с поиска Рамблер и с самого топ-100 потёк... А ведь реки и появляются с тонких ручейков. И жирная ссылка - это тоже хорошо. А вот статистика у них никуда не годится... прошлый век.

Зависит от многих факторов. В худшем случае около года очищаться будет. В лучшем за месяц. Можно ускорить процесс, подредактировав файл sitemap.xml Там можно выставить дату изменения (создания) файла и установить рекомендуемую частоту посещения роботом. Поставьте на страницы, с которых код удалили <changefreq>daily</changefreq> <priority>1.0</priority> Ну и внешние ссылки на эти страницы ускорить процесс могут.

Disallow: *.swf$ - запретит индексировать все файлы с расширением .swf

по логике должен быть в собственной папке, "добро пожаловать в таймвеб" - скорее всего просто заглушка, которую можно бесприпятственно удалить. Есл robors.txt оттуда виден, то и сайт должен быть виден...

Попробовал просмотреть через браузер - всё показывает... Вбивал http://www.a5000.ru/robots.txt Вот результат User-Agent: *Disallow: # empty Disallow instruction SHOULD be thereHost: www.a5000.ruDisallow: */index.phpDisallow: /bitrix/Disallow: /*show_include_exec_time=Disallow: /*show_page_exec_time=Disallow: /*show_sql_stat=Disallow: /*bitrix_include_areas=Disallow: /*clear_cache=Disallow: /*clear_cache_session=Disallow: /*ADD_TO_COMPARE_LISTDisallow: /*ORDER_BYDisallow: /*PAGENDisallow: /*?print=Disallow: /*&print=Disallow: /*print_course=Disallow: /*?action=Disallow: /*&action=Disa

Поправить кодировку можно в Notepad++

Дело может быть в кодировке файла. robots.txt должен быть UTF-8 без bom

Спутник то дабавляет сайты к себе в индекс... А вот трафика с него аж 1 человек в месяц... Кажется добавляться можно только на перспективу, которая весьма туманна.

Мой сайт месяца 2 назад приняли бесплатно. Причём я запроса на принятие не отправлял. Сами добавили. Трафик с него почти не приходит. Примерно 1 посетитель в 2 дня.

Этот поисковик хорош тем, что никого не банит по IP, не выбрасывает каптч, не отслеживает ваши запросы и т.п. Им часто пользуются в Tor сетях.

user agent легко и подменть можно. Человек легко может зайти на сайт замаскировавшись под google bot, любой браузер, или задав любое название user agenta. Так могут и дыры для атаки прощупывать, чтоб не вызвать подозрение...