Jump to content
Sign in to follow this  
Vyacheslav

Небольшой эксперимент твиттер и боты поисковых систем

Recommended Posts

<?php 
function robot ($bot)
{
 if(strpos($_SERVER['HTTP_USER_AGENT'], $bot)!==false)
 {
 $text = date("Y-m-d H:i") . " $bot посетил страницу: ". $_SERVER['REQUEST_URI']."\r\n";
 // запись в файл
 $file = fopen("bot.txt","a");
 fwrite($file, $text);
 fclose ($file);
 // отправка на почту
 mail('...@...ru', "$bot посетил страницу", $text);
 }
}
 
// отслеживаем роботов
robot('Googlebot');
robot('Yandex');
robot('Slurp');
robot('Yahoo');
robot('MSNBot');
robot('Teoma');
robot('Scooter');
robot('ia_archiver');
robot('Lycos');
robot('StackRambler');
robot('Mail.Ru');
robot('Aport');
robot('WebAlta');
robot('Twitterbot');
robot('Crowsnest');
robot('facebook');
robot('vkShare');
robot('MailRuConnect');

?>

Записи будут сохранятся в файли bot.txt  Увидеть его можно так вашсайт.ру/bot.txt а так же в корне сайта сам файл.

Код надо разместить так чтобы он был на всех страницах.

 

 

Файл сгенерируется и можно будет посмотреть при первом посещении сайта одним из роботов, я правильно понял?

Share this post


Link to post
Share on other sites

Файл сгенерируется и можно будет посмотреть при первом посещении сайта одним из роботов, я правильно понял?

файл сгенерируется автоматически при первом посещении ботом.

 

ко мне из списка 

заходят

robot('Googlebot');

robot('Yandex');

robot('Slurp');

robot('Yahoo');

robot('Twitterbot');

robot('facebook');

robot('vkShare');

 

другие либо указаны неверно либо просто ко мне они не приходят.

Share this post


Link to post
Share on other sites

файл сгенерируется автоматически при первом посещении ботом.

 

ко мне из списка 

заходят

robot('Googlebot');

robot('Yandex');

robot('Slurp');

robot('Yahoo');

robot('Twitterbot');

robot('facebook');

robot('vkShare');

 

другие либо указаны неверно либо просто ко мне они не приходят.

 

Да да уже проверил. Добавив по одно странице в аддурилку Яндекуса и гугла.

 

Причем заметил такое: Добавил в гугл аддурилку одну статью, а он взял и просмотрел 6 страниц) Яндексу, добавил , а он просмотрел ее и еще одну последнюю перед ней. 

Share this post


Link to post
Share on other sites

Продолжаю эксперимент.

 

Запустил новый сайт, от роду двое суток.

 

Проверим как быстро попадёт в индекс Яндекса с помощью ежедневного постинга в мои 20 твиттер аккаунтов.

 

В гугл появился в первый же день после отправки sitemap и постинга в твиттер.

Share this post


Link to post
Share on other sites

Забыл раньше отписать.

 

По новому сайту в первый ап +40 страниц второй ап +450 страниц.

 

С твиттером значительно быстрее новые сайты попадают в индекс яндекса.

 

Без твиттер обычно не меньше 2 апдейтов, а то и 3. Это у меня так раньше было.

Share this post


Link to post
Share on other sites

Поставил ещё один эксперимент с двумя акками livejournal + твиттер, вк, фэйсбук, гугл+. Запостил сразу после публикации во все свои аккаунты. Без аддрулки

 

Прилагаю скрины с livejournal и страницы попавшей в индекс.

 

fX7LYrg.png

 

B2jbIRS.png

 

Но почему то не все страницы так.

 

Сегодня это вторая статья которая сразу входит в индекс яндекса. При чём на сайте который несколько дней назад вывел из под АГС, под которым он находился 5 дней.

 

И странно то что страница появилась в индексе моментально, а в выдаче пишет 7 часов назад.

 

 

 

Прогнал так же сейчас статью которую разместил вчера. В индексе не было. После прогона появилась в выдаче вчерашним днём.

 

4e9vrL0.png

 

 

Разместил свежую новость. После прогона появилась в индексе в течении минуты но с записью  в выдаче 7 часов назад.

 

G0pHYTq.png

Edited by Vyacheslav

Share this post


Link to post
Share on other sites

ТС попросил поучавствовать в эксперименте)

 

Страницы действительно залетели в индекс мгновенно, 2 из 3, думаю и 3 залетит скоро.

 

ПОДТВЕРЖДАЮ!))

Share this post


Link to post
Share on other sites

Ссылки попадают в индекс благодаря комплексу 4 в моих услугах. НО НЕ ВСЕ...

 

Аккаунты стараюсь поддерживать в индексе. Так же по возможности разбавляю их текстами без ссылок.

Share this post


Link to post
Share on other sites

Join the conversation

You can post now and register later. If you have an account, sign in now to post with your account.

Guest
Reply to this topic...

×   Pasted as rich text.   Paste as plain text instead

  Only 75 emoji are allowed.

×   Your link has been automatically embedded.   Display as a link instead

×   Your previous content has been restored.   Clear editor

×   You cannot paste images directly. Upload or insert images from URL.

Sign in to follow this  

  • Recently Browsing   0 members

    No registered users viewing this page.

×
×
  • Create New...