Sign in to follow this  
Followers 0
dee0xeed

Борьба с рефспамом

21 posts in this topic

Каждый день появляется в статистике множество переходов с реферальными ссылками. Думаю, у многих такая ситуация.

 

Вопросы, которые не дают покоя:

1) Нужно ли бороться с рефспамом на уровне сервера, или забить и фильтровать только статистику?

2) Влияют ли эти посещения на ранжирование? Показатель отказов 100%, время на сайте 0 секунд. Или поисковики умеют их отличать и не учитывают?

 

Еще момент - пытаюсь заблокировать в .htaccess переходы с рефссылками site32998252.snip.to, site19729347.snip.to и тд, то есть меняется начало url.

Как их всех заблокировать? Написал вот так, переходы все равно есть:

Options +FollowSymLinks
RewriteEngine On
RewriteCond %{HTTP_REFERER} (.*)snip\.to$ [NC]
RewriteRule .* - [F]

Share this post


Link to post
Share on other sites

Возможно каждый сайт надо блокировать отдельно, я такой код применяю, работает.
 

RewriteCond %{HTTP_REFERER} semalt.semalt.com [NC,OR]
RewriteCond %{HTTP_REFERER} buttons-for-website.com [NC,OR]
RewriteCond %{HTTP_REFERER} sindex.biz [NC,OR]
RewriteCond %{HTTP_REFERER} feelingsurf.fr [NC]
RewriteRule .* - [F]

Насчет остальных вопросов не отвечу, сам бы хотел услышать квалифицированный ответ.

Share this post


Link to post
Share on other sites

Возможно каждый сайт надо блокировать отдельно, я такой код применяю, работает.

Каждый сайт можно блокировать, вроде бы понятно как. Но они каждую неделю новые появляются, замучаешься) Хотелось бы главный домен блокировать, а поддомены вместе с ним по маске.

Share this post


Link to post
Share on other sites

А это тоже самое: делюсь новостью в соц. Сетях, а в статистике показывают через ~две минуты переходы с google (стата ли) по поисковым фразам пусто

Share this post


Link to post
Share on other sites

В метрике отфильтруйте и все. Была такая же беда, пару недель назад . Теперь нету отфильтровал и пф яша учитывать не будет

Share this post


Link to post
Share on other sites

Каждый сайт можно блокировать, вроде бы понятно как. Но они каждую неделю новые появляются, замучаешься) Хотелось бы главный домен блокировать, а поддомены вместе с ним по маске.

 

Пример:

<IfModule mod_rewrite.c>
RewriteCond %{HTTP_REFERER} ^http://([^.]+\.)*simple-share-buttons\.com [NC]
RewriteRule (.*) http://www.simple-share-buttons.com [R=301,L]
</IfModule>

заблокирует simple-share-buttons.com и все его поддомены

Share this post


Link to post
Share on other sites

Пример:

<IfModule mod_rewrite.c>
RewriteCond %{HTTP_REFERER} ^http://([^.]+\.)*simple-share-buttons\.com [NC]
RewriteRule (.*) http://www.simple-share-buttons.com [R=301,L]
</IfModule>

заблокирует simple-share-buttons.com и все его поддомены

Спасибо, попробую маску из примера.

А строка

RewriteRule (.*) http://www.simple-share-buttons.com [R=301,L]

- это типа перенаправление реферала на самого себя?)

Share this post


Link to post
Share on other sites

Спасибо, попробую маску из примера.

А строка

RewriteRule (.*) http://www.simple-share-buttons.com [R=301,L]

- это типа перенаправление реферала на самого себя?)

 

От ворот поворот. На своих сайтах ставлю так (ибо эти домены особенно распоясались):

<IfModule mod_rewrite.c>
RewriteCond %{HTTP_REFERER} ^http://([^.]+\.)*simple-share-buttons\.com [NC]
RewriteRule (.*) http://www.simple-share-buttons.com [R=301,L]
RewriteCond %{HTTP_REFERER} ^http://([^.]+\.)*buttons-for-your-website\.com [NC]
RewriteRule (.*) http://www.buttons-for-your-website.com [R=301,L]
RewriteCond %{HTTP_REFERER} ^http://([^.]+\.)*get-free-traffic-now\.com [NC]
RewriteRule (.*) http://www.get-free-traffic-now.com [R=301,L]
RewriteCond %{HTTP_REFERER} ^http://([^.]+\.)*sharebutton\.net [NC]
RewriteRule (.*) http://sharebutton.net [R=301,L]
RewriteCond %{HTTP_REFERER} ^http://([^.]+\.)*semalt\.com [NC]
RewriteRule (.*) http://www.semalt.com [R=301,L]
RewriteCond %{HTTP_REFERER} ^http://([^.]+\.)*best-seo-solution\.com [NC]
RewriteRule (.*) http://www.best-seo-solution.com [R=301,L]
RewriteCond %{HTTP_REFERER} ^http://([^.]+\.)*best-seo-offer\.com [NC]
RewriteRule (.*) http://www.best-seo-offer.com [R=301,L]
RewriteCond %{HTTP_REFERER} ^http://([^.]+\.)*buttons-for-website\.com [NC]
RewriteRule (.*) http://www.buttons-for-website.com [R=301,L]
RewriteCond %{HTTP_REFERER} ^http://([^.]+\.)*buy-cheap-online\.info [NC]
RewriteRule (.*) http://www.buy-cheap-online.info [R=301,L]
RewriteCond %{HTTP_REFERER} ^http://([^.]+\.)*free-share-buttons\.com [NC]
RewriteRule (.*) http://www.free-share-buttons.com [R=301,L]
RewriteCond %{HTTP_REFERER} ^http://([^.]+\.)*free-share-button\.com [NC]
RewriteRule (.*) http://www.free-share-button.com [R=301,L]
</IfModule>
dee0xeed likes this

Share this post


Link to post
Share on other sites

 

От ворот поворот. На своих сайтах ставлю так (ибо эти домены особенно распоясались):

Хорошее решение!

Дополню свой список вашими доменами.

Share this post


Link to post
Share on other sites

 

От ворот поворот. На своих сайтах ставлю так (ибо эти домены особенно распоясались):







<IfModule mod_rewrite.c>
RewriteCond %{HTTP_REFERER} ^http://([^.]+\.)*simple-share-buttons\.com [NC]
RewriteRule (.*) http://www.simple-share-buttons.com [R=301,L]
RewriteCond %{HTTP_REFERER} ^http://([^.]+\.)*buttons-for-your-website\.com [NC]
RewriteRule (.*) http://www.buttons-for-your-website.com [R=301,L]
RewriteCond %{HTTP_REFERER} ^http://([^.]+\.)*get-free-traffic-now\.com [NC]
RewriteRule (.*) http://www.get-free-traffic-now.com [R=301,L]
RewriteCond %{HTTP_REFERER} ^http://([^.]+\.)*sharebutton\.net [NC]
RewriteRule (.*) http://sharebutton.net [R=301,L]
RewriteCond %{HTTP_REFERER} ^http://([^.]+\.)*semalt\.com [NC]
RewriteRule (.*) http://www.semalt.com [R=301,L]
RewriteCond %{HTTP_REFERER} ^http://([^.]+\.)*best-seo-solution\.com [NC]
RewriteRule (.*) http://www.best-seo-solution.com [R=301,L]
RewriteCond %{HTTP_REFERER} ^http://([^.]+\.)*best-seo-offer\.com [NC]
RewriteRule (.*) http://www.best-seo-offer.com [R=301,L]
RewriteCond %{HTTP_REFERER} ^http://([^.]+\.)*buttons-for-website\.com [NC]
RewriteRule (.*) http://www.buttons-for-website.com [R=301,L]
RewriteCond %{HTTP_REFERER} ^http://([^.]+\.)*buy-cheap-online\.info [NC]
RewriteRule (.*) http://www.buy-cheap-online.info [R=301,L]
RewriteCond %{HTTP_REFERER} ^http://([^.]+\.)*free-share-buttons\.com [NC]
RewriteRule (.*) http://www.free-share-buttons.com [R=301,L]
RewriteCond %{HTTP_REFERER} ^http://([^.]+\.)*free-share-button\.com [NC]
RewriteRule (.*) http://www.free-share-button.com [R=301,L]
</IfModule>

 

Такой список в .htaccess будет подтормаживать загрузку сайта, чем больше список тем дольше времени нужно на полное его прочтение и анализ. Если у вас не выделенный сервер, то можете продублировать весь список несколько раз и заметите результат в скорости загрузки сайта.

 

Чем меньше .htaccess тем лучше!

 

Раннее по этому поводу создавал такую тему, но как-то она на этом форуме "не пошла": https://talk.pr-cy.ru/topic/18604-blokirovka-perehodov-na-sajt-po-ip-referer-i-user-agent/

 

Обычно рефспам идет с 1-2 IP адресов, его легко выявить (по ссылке выше, проанализировав свою статистику) и просто их заблокировать в том же .htaccess, без указания сайтов, т.к. сегодня переходы с одних, завтра с других.

Share this post


Link to post
Share on other sites

Кажется дело в другом..

 

Ради интереса решил проверить ip-адреса переходов с реферальной ссылкой в логах сервера - и не нашел ни одного такого перехода!

Видимо это не реальные посещения сайта, поэтому и фильтры не работали.

 

К примеру посещения с одного сайта за сегодня:

357c3ce71b22f852f12a374c6c1c9f57.png

 

Как вариант просто создается страница с твоим счетчиком и накручиваются посещения - вся статистика отображается у тебя. В таком случае нет смысла блокировать их в .htaccess. Можно лишь фильтровать статистику.

Но вопрос, влияет ли это на поведенческие?

Share this post


Link to post
Share on other sites

А почему у вас такие переходы, подскажите, или у вас какой то особенной тематики сайты ?

Share this post


Link to post
Share on other sites

Если этих переходов на 100% нет логах, то постараюсь примерно объясню откуда они у вас в статистике.

 

 

Какой-то робот (написанный скрипт) зашел к вам на сайт, проанализировал страницу, увидел что у вас стоит статистика от Яндекса, Гугла или еще какой-то популярной системы. Просмотрев код счетчика, находит id вашего сайта. И в дальнейшем он может уже и не заходит к вам на сайт, а сразу серверам по сбору статистики отсылать все необходимые данные. В итоге у вас посещения со 100% отказами.

 

 

У себя я находил такие переходы в собственно мною написанной статистике - внимания на них я не обращал.

 

 

Как бороться представляю себе несколько вариантов:

 

 

1) как-то фильтровать их или блокировать в самой системе по сбору статистики в той же Яндекс.Метрике.

 

 

2) я использую на своих сайтах только независимую статистику, например hit.ua, catalog.i.ua и т.д. Google Analytics и Яндекс.Метрику не ставлю - меньше поисковики знают о статистике, тем лучше. А поведенческие факторы они смогут собрать о вашем сайте, получая информации с собственных браузеров (Гугл Хром, Я.браузер).

 

Не раз замечал, как ввожу новую страницу сайта в старой Опере, а потом ищу её через 2 секунды в поисковике - её нет. А если тоже самое сделать с того же Хрома и поискать её в гугле, она уже будет там. Вывод, вся нужная информация уже собрана и отправлена, а сбор статистики - это лишь возможность повысить или понизить ваши позиции в выдаче.

Share this post


Link to post
Share on other sites

А почему у вас такие переходы, подскажите, или у вас какой то особенной тематики сайты ?

Сайт коммерческий, но вряд ли это от тематики зависит.

Может контекстная реклама как то способствует рефспаму, по ней находят сайты-жертвы.

Вообще такие переходы есть у многих

 

1) как-то фильтровать их или блокировать в самой системе по сбору статистики в той же Яндекс.Метрике.

 

 

2) я использую на своих сайтах только независимую статистику, например hit.ua, catalog.i.ua и т.д. Google Analytics и Яндекс.Метрику не ставлю - меньше поисковики знают о статистике, тем лучше. А поведенческие факторы они смогут собрать о вашем сайте, получая информации с собственных браузеров (Гугл Хром, Я.браузер).

Да, логичное объяснение. Выходит что только фильтровать остается. Отказаться от метрики и аналитики не могу, т.к. контекстную рекламу использую, да и данные там нужные есть, которых в других системах наверно не найдешь.

Share this post


Link to post
Share on other sites

Какой-то робот (написанный скрипт) зашел к вам на сайт, проанализировал страницу, увидел что у вас стоит статистика от Яндекса, Гугла или еще какой-то популярной системы. Просмотрев код счетчика, находит id вашего сайта. И в дальнейшем он может уже и не заходит к вам на сайт, а сразу серверам по сбору статистики отсылать все необходимые данные. В итоге у вас посещения со 100% отказами.

Бывают разные разновидности реф-спама. В описываемом вами случае блокировка в  .htaccess бесполезна. Пример же из сообщения для указанных там доменов работает через .htaccess (проверено экспериментально) - те роботы заходят на сайт, а не симулируют посещение.

Share this post


Link to post
Share on other sites

Получается, что лучше не ставить счётчики от пс.

Для своего же блага.

Share this post


Link to post
Share on other sites

Если этих переходов на 100% нет логах, то постараюсь примерно объясню откуда они у вас в статистике.

 

 

Какой-то робот (написанный скрипт) зашел к вам на сайт, проанализировал страницу, увидел что у вас стоит статистика от Яндекса, Гугла или еще какой-то популярной системы. Просмотрев код счетчика, находит id вашего сайта. И в дальнейшем он может уже и не заходит к вам на сайт, а сразу серверам по сбору статистики отсылать все необходимые данные. В итоге у вас посещения со 100% отказами.

 

 

У себя я находил такие переходы в собственно мною написанной статистике - внимания на них я не обращал.

 

 

Как бороться представляю себе несколько вариантов:

 

 

1) как-то фильтровать их или блокировать в самой системе по сбору статистики в той же Яндекс.Метрике.

 

 

2) я использую на своих сайтах только независимую статистику, например hit.ua, catalog.i.ua и т.д. Google Analytics и Яндекс.Метрику не ставлю - меньше поисковики знают о статистике, тем лучше. А поведенческие факторы они смогут собрать о вашем сайте, получая информации с собственных браузеров (Гугл Хром, Я.браузер).

 

Не раз замечал, как ввожу новую страницу сайта в старой Опере, а потом ищу её через 2 секунды в поисковике - её нет. А если тоже самое сделать с того же Хрома и поискать её в гугле, она уже будет там. Вывод, вся нужная информация уже собрана и отправлена, а сбор статистики - это лишь возможность повысить или понизить ваши позиции в выдаче.

Такого же мнения + думаю чем меньше сайтов в я-вебмастере тем лучше, так как думаю, что он создан не для того чтобы вам помогать, а для того чтобы вас отслеживать и вами управлять.

Share this post


Link to post
Share on other sites

Получается, что лучше не ставить счётчики от пс.

Для своего же блага.

 

Выходит,что так. Из поисковых сервисов используются только вебмастер для оригинальных текстов, добавки новых урлов и просмотра входящих ссылок. И при этом каждый сайт зарегистрирован на отдельный аккаунт.

Share this post


Link to post
Share on other sites

Выходит,что так. Из поисковых сервисов используются только вебмастер для оригинальных текстов, добавки новых урлов и просмотра входящих ссылок. И при этом каждый сайт зарегистрирован на отдельный аккаунт.

Хорошо когда быстрые пальцы и можно глянуть десяток сайтов в вэбмастере на разных аккаунтах, ну а что делать если он один? хххххххиххихихихихиих

Share this post


Link to post
Share on other sites

А может просто запретить показ сайта во фрейме?

Наберите в поисковике: Запрет открытия сайта в iframe

Sirge likes this

Share this post


Link to post
Share on other sites

А может просто запретить показ сайта во фрейме?

Наберите в поисковике: Запрет открытия сайта в iframe

Похоже это наилучший вариант, остановился на вставке кода в .htaccess  

Header always append X-Frame-Options SAMEORIGIN

попробовал открыть сайт через фрейм с сайта http://quirktools.com/screenfly/ (полезный сервис) мой сайт не открылся и рефссылки в счетчике mail.ru  не обнаружилось, а раньше была. Надо потестировать.

Share this post


Link to post
Share on other sites

Create an account or sign in to comment

You need to be a member in order to leave a comment

Create an account

Sign up for a new account in our community. It's easy!


Register a new account

Sign in

Already have an account? Sign in here.


Sign In Now
Sign in to follow this  
Followers 0

  • Recently Browsing   0 members

    No registered users viewing this page.