Ответ
Как исключить спамный реферальный трафик из GA Опции темы
Старый 02.03.2015, 14:07
  #1
Nataly
 
Регистрация: 30.07.2014
Сообщений: 474

Как исключить спамный реферальный трафик из GA
Несколько месяцев назад мое агентство заметило всплеск реферального трафика в аккаунте Google analytics. Сначала, я обрадовался. Кто-то ссылается на нас, и люди переходят по этим ссылкам. Ура! Но не тут-то было! Когда я копнул глубже, то увидел, что большая часть этого трафика была послана от спамеров, и в основном от одного из них по имени Виталий Попов.

Домены, которыми он владеет, давали сайту нашей компании и большинству сайтов наших клиентов несколько сотен сеансов в месяц, вполне достаточно, чтобы нанести вред аналитическим данным.

Его сайты не единственные, о которых я расскажу в этой статье, но спам-сеть, созданная им, была самой большой неприятностью за последнее время. Если вы получите спамный реферальный трафик Google analytics, выполните следующие действия, чтобы остановить этих «негодяев» от порчи ваших данных.

Почему я должен беспокоиться о блокировании и отсеивании этих сайтов?

Существуют две основные причины, по которым я мотивирован блокировать это на всех сайтах, с которыми я работаю.

Первая: вред, наносимый данным Google analytics. Несколько сотен хитов в месяц на таком сайте, как Moz.com, не изменят общую картину при большом объеме сеансов, которые он имеет ежедневно. Однако для небольшого сайта местных сантехников из 30 сеансов в день 70% составит спамный реферальный трафик, удушающий оставшийся легитимный трафик и делающий маркетинговый анализ бесполезным.

Вторая: загруженность сервера и безопасность. Я не просил их сканировать или посещать мой сайт. Их визиты используют ресурсы сервера для чего-то, что я не хочу или в чем я не нуждаюсь. Перегруженный сервер означает более медленное время загрузки, что приводит к более высоким показателям отказов и более низкому рейтингу сайта. Вдобавок ко всему кто знает, что еще они делают на моем сайте, пока они там находятся. Они могли бы легко искать слабые места в WordPress, плагине и сервере.

Популярные реферальные спам-домены

С помощью WHOIS.net я обнаружил, что спам-сеть Г-на Попова включает в себя следующие домены:

• darodar.com (и различные субдомены)

• econom.co

• ilovevitaly.co (и другие TLD вариации)

Другие спамеры, свирепствующие на просторах веб:

• semalt.com (и различные субдомены)

• buttons-for-website.com

• see-your-website-here.com

Многие другие сайты приходят и уходят. Это только те сайты, которые были активны в последнее время.

See-your-website-here.com





Этот сайт превзошел всех. Он использует реферер спам (рефспам) как форму генерации лидов. Каков их продукт, спросите вы? Спам. Владелец этого домена был очень любезен, сделав свою WHOIS информацию достоянием общественности. Его зовут Ben Sykes и он из Лондона.

Semalt.com





Semalt - это SEO-продукт, который разработан, чтобы предоставлять on - и off-page анализ, такой как, например, использование ключевых слов и показатели по ссылкам. Продукция сайта, по-видимому, является законной. Чего нельзя сказать об их методах ведения бизнеса.

Semalt использует бота для сканирования интернета и индексации данных веб-страницы, но они не отключают отслеживание аналитики, как и большинство приличных ботов. У них есть форма, чтобы удалить ваш сайт из сканирования http://semalt.com/project_crawler.php, что очень мило с их стороны.

Конечно, я попробовал такой вариант месяц назад, но они до сих пор сканируют наш сайт. Закончилось тем, что я разговаривал с представителем Semalt.com через Twitter после написания этой статьи: How to Stop Semalt.com from Plaguing Your Google Analytics Data. В ней я описал наши взаимодействия и результат проекта.

Darodar.com, econom.co и ilovevitaly.com





Эта сеть существует с целью направления партнерского трафика на сайты интернет-магазинов таких, как AliExpress.com и eBay.com. Я предполагаю, что сайт не платит партнеру, пока трафик не даст в результате покупку, что представляется маловероятным. Субдомен shopping.ilovevitaly.com используется для перенаправления на сайт aliexpress.com напрямую, но теперь он переходит на посадочную страницу, которая содержит ссылки на различные интернет-магазины.

Как остановить спам-ботов

Блокировка через .htaccess

Лучший способ блокировать доступ реферерам на ваш сайт - заблокировать их в .htaccess файле в корневом каталоге домена. Вы можете скопировать и вставить следующий код в .htaccess файл, при условии, что вы используете сервер Apache. Этот метод нравится мне больше, чем просто блокирование домена в аналитике, потому что он предотвращает посещение спам-ботами вашего сервера в целом.

Если вы хотите быть более изобретательным, можно перенаправить трафик на их сайт.

# Block Russian Referrer Spam

RewriteEngine on

RewriteCond %{HTTP_REFERER} ^http://.*ilovevitaly\.com/ [NC,OR]

RewriteCond %{HTTP_REFERER} ^http://.*ilovevitaly.\.ru/ [NC,OR]

RewriteCond %{HTTP_REFERER} ^http://.*ilovevitaly\.org/ [NC,OR]

RewriteCond %{HTTP_REFERER} ^http://.*ilovevitaly\.info/ [NC,OR]

RewriteCond %{HTTP_REFERER} ^http://.*iloveitaly\.ru/ [NC,OR]

RewriteCond %{HTTP_REFERER} ^http://.*econom\.co/ [NC,OR]

RewriteCond %{HTTP_REFERER} ^http://.*savetubevideo\.com/ [NC,OR]

RewriteCond %{HTTP_REFERER} ^http://.*kambasoft\.com/ [NC,OR]

RewriteCond %{HTTP_REFERER} ^http://.*buttons\-for\-website\.com/ [NC,OR]

RewriteCond %{HTTP_REFERER} ^http://.*semalt\.com/ [NC,OR]

RewriteCond %{HTTP_REFERER} ^http://.*darodar\.com/ [NC]

RewriteRule ^(.*)$ - [F,L]


Предупреждение: .htaccess - очень мощный файл, который определяет, как работает сервер. Если вы закачиваете .htaccess файл без одного необходимого символа, вы можете снести весь сайт. Прежде чем вносить изменения в файл, я бы посоветовал сделать резервную копию. Если вы не уверены в таком варианте, обратите внимание на вариант WordPress плагина ниже.

Настройка фильтров в Google analytics

Сам по себе, .htaccess файл не решит всех ваших проблем. Он будет только защищать сайт от будущих сеансов, но не повлияет на сеансы, которые уже произошли. Я хочу настроить фильтры по странам в Google analytics, чтобы удалить старые данные, а также отфильтровать любых других ботов, с которыми мы можем столкнуться в будущем.

Конечно, это не очень хорошая идея, если вы планируете получать легитимный трафик из таких стран, как Россия, Бразилия или Индонезия, но многие американские компании могут безопасно блокировать эти страны, не теряя потенциальных клиентов. Выполните описанные ниже действия, чтобы настроить фильтры.

Во-первых, щелкните по вкладке «Admin» в верхней части страницы. В столбце «View» (Представление) создайте новое представление, чтобы у вас был незапятнанный отчет в Google Analytics. Я назвал свое «Filter Bots». После того, как вы выбрали вновь созданное представление, перейдите в раздел «Filters» и выберите «+New Filter Button».





Настройка фильтров довольно проста, если вы знаете, какие настройки использовать. Я хочу отфильтровать весь трафик из России, Бразилии и Индонезии. Это те страны, которые создавали нам проблемы в последнее время. Вы можете добавить дополнительные фильтры при необходимости.

Имя фильтра может быть произвольным. Я обычно просто ввожу «block [название страны]». Далее выбираем тип фильтра «custom». Выбираем «страну» из выпадающего списка «Filter Field».

«Filter Pattern Field» - это место, где вы определяете, какие страны вы отфильтровывайте, поэтому убедитесь, что вы записали их правильно. Вы можете дважды проверить фильтры с помощью кнопки «Verify This Filter». На экране появится график, показывающий, сколько сеансов будут удалены за последние семь дней.





Я рекомендую выбрать флажок «Bot Filtering», который находится в «View Settings» в разделе «Admin». Я пока не увидел изменений в данных после активации этой функции, но ее настроить совсем не сложно и, возможно, Google будет блокировать некоторых из этих спамеров.





Используете WordPress и не хотите редактировать .htaccess файл?

Ранее я использовал плагин Wp-Ban, с которым легко блокировать нежелательных посетителей. Wp-ban дает возможность блокировать пользователей по IP, диапазону IP, имени хоста, пользовательскому агенту и URL-адресу реферера от посещения WordPress блога, и все это из панели администратора WordPress.

Вывод

Я надеюсь, этот пост поможет вам заблокировать всех назойливых спамеров. Определенно, существуют различные способы решения этой проблемы, я описал лишь те, что помогли мне защитить данные в Google analytics.
Нравится 0   Не нравится 0
Пожаловаться на это сообщение 0  
Ответить с цитированием
Старый 08.04.2015, 04:02
  #2
necelentano
 
Аватар для necelentano
Регистрация: 11.10.2011
Сообщений: 157

Я от Semalt избавился, но к сожалению есть другие спам боты которые рекламируют хостинги и различные сервисы для вебмастеров. С ними не знаю что делать. Спасибо за хороший перевод.
Нравится 0   Не нравится 0
Пожаловаться на это сообщение 0  
Ответить с цитированием
Старый 08.04.2015, 15:57
  #3
Admin
 
Аватар для Admin
Регистрация: 19.03.2011
Сообщений: 917

Во как, оказывается это Виталий Попов развлекается. А я-то смотрю, что это за херня такая в аналитике появилась buttons-for-website.com. Вроде траф есть, а толку ноль. Сейчас ещё social-buttons.com появился. Спасибо Nataly и necelentano, что обратили внимание.

P.S. Надо почаще Rebill.me читать
 
Ответить с цитированием
Старый 28.04.2015, 04:51
  #4
necelentano
 
Аватар для necelentano
Регистрация: 11.10.2011
Сообщений: 157

Admin, на самом деле Nataly ищет хорошие статьи (по крайней мере большой респект тому, кто ищет контент-доноров). Некоторые статьи оседают в закладках, что говорит о высоком качестве инфы.
Нравится 0   Не нравится 0
Пожаловаться на это сообщение 0  
Ответить с цитированием

Ответ
 
 

Похожие темы
Тема Автор Раздел Ответов Последнее сообщение
Как исключить внутренний трафик без IP фильтра Nataly Статьи 1 03.11.2015 15:21
Где прикупить трафик за Вебмани? Leatherdyke Файлообмен 11 06.01.2015 16:33
Реферальный маркетинг: как повысить конверсию annasty Магазины 0 24.10.2014 12:10
Как получить трафик с Google Plus Strike Статьи 4 18.04.2014 03:56
Русские ISP и большой трафик xx-xx Вопросы 5 27.12.2011 14:52

Метки
google analytics, реферальный трафик, реферер спам, спам-боты, спам-домены, спам-сеть, спамеры


Здесь присутствуют: 1 (пользователей: 0, гостей: 1)
 
Опции темы

Быстрый переход


Текущее время: 23:34. Часовой пояс GMT +3.