Вернуться   SEO форум - оптимизация и продвижение сайтов > SEO инструменты > Анализ и обзор статистики

Важная информация
Анализ и обзор статистики - Статистика продвижения сайтов, эффективности оптимизации. Интернет сервисы, анализ статистики, отслеживание переходов. Яндекс.Метрика, Google Analytics и т.д.

Ответ
 
Опции темы Оценить тему Опции просмотра
Старый 21.03.2012, 22:35   #1
 
Аватар для terranodar
 
Сообщений: 410
FR (активность): 14,157

Доп. информация
По умолчанию Автор темы Логи Апача - Google Bot приходит на сайт с непустым реферрером. У кого так было?

Периодически просматриваю логи сервера на предмет подозрительных вещей и вижу следующую картину. В морду сайта регулярно стучится некто под видом Googlebot/2.1; с указанием сайта реферрера.
Выглядит примерно так.
Код:
89.108.102.171 - - [21/Mar/2012:18:19:31 +0400] "GET / HTTP/1.0" 200 22501 "http://music.siteua.org/" "Mozilla/5.0 (compatible; Googlebot/2.1; +http://www.google.com/bot.html)"
89.108.102.171 - - [21/Mar/2012:18:19:32 +0400] "GET / HTTP/1.0" 200 22501 "http://music.siteua.org/" "Mozilla/5.0 (compatible; Googlebot/2.1; +http://www.google.com/bot.html)"
Что характерно, бьют обычно дуплетом с очень коротким (меньше секунды) интервалом.

Удивляет что все посещения ботов, что я видел идут с пустым реферрером, а эти вот с такими интересными. Ссылок с этих сайтов на мой, разумеется, нет.

Реферреры разные. За пару недель наловил таких
Оффтоп:
http://auto.siteua.org/
http://fabrika-shatura.ru/
http://financemp3.at.ua/
http://flhelp.ru/
http://games.siteua.org/
http://kino.siteua.org/
http://krasnoxolm.ru/
http://lady.siteua.org/
http://lugin.ru/
http://music.siteua.org/
http://myltivarka.ru/
http://news.siteua.org/
http://ra-1.ru/
http://showbiz.siteua.org/
http://siteua.org/
http://sport.siteua.org/
http://uistone.ru/
http://vedlozero.ru/
http://w3host.ru/
http://www.apricus-studio.ru/
http://www.artwhite.ru/
http://www.zvezdaput.net/wordpress/


С вот этих IPшников
Оффтоп:
109.120.157.179
193.106.136.37
193.106.136.38
193.106.136.56
213.110.133.221
81.177.166.11
89.108.102.171
92.249.127.111
94.153.65.244


Что интересует?
  1. Во-первых, у кого было такое же?
  2. Во-вторых, капитан очевидность хочет удостовериться, что это ни разу не Гугл.
  3. И напоследок. Как думаете, стоит эти IP забанить или пусть живут?

Обратите внимание на полезные ответы в этой теме!



Чтобы определить – писать глагол с -тся или -ться, спросите себя, на какой вопрос отвечает этот глагол – "что делать?" или "что делает?". Если в вопросе есть мягкий знак, значит он есть и в глаголе.
terranodar вне форума  
Ответить с цитированием Сказать Плохо за это бесполезное сообщение Быстрый ответ на это сообщение
Старый 22.03.2012, 12:03   #2
 
Аватар для Phoenix
 
Сообщений: 1,005
FR (активность): 35,050

Доп. информация
По умолчанию

terranodar,у меня такого не было, хоть и давно не смотрел, но по моему мнению гугло бот должен приходить пустым, может его как то перенаправляют?


В сео денег нет, совсем нет
Phoenix вне форума  
Ответить с цитированием Сказать Плохо за это бесполезное сообщение Быстрый ответ на это сообщение
"Спасибо" от:
terranodar (22.03.2012)
Старый 22.03.2012, 12:45   #3
 
Аватар для terranodar
 
Сообщений: 410
FR (активность): 14,157

Доп. информация
По умолчанию Автор темы

xxxPHOENIXxxx,указанные IP ни разу не пересекались с нормальными посещениями гуглобота. Потому-то вопрос и возник


Чтобы определить – писать глагол с -тся или -ться, спросите себя, на какой вопрос отвечает этот глагол – "что делать?" или "что делает?". Если в вопросе есть мягкий знак, значит он есть и в глаголе.
terranodar вне форума  
Ответить с цитированием Сказать Плохо за это бесполезное сообщение Быстрый ответ на это сообщение
Старый 22.03.2012, 14:46   #4
 
Аватар для specialist-seo
 
Сообщений: 2,199
FR (активность): 49,104

Доп. информация
По умолчанию

terranodar, ISP: "Agava Ltd." - можно и забанить
specialist-seo вне форума  
Ответить с цитированием Сказать Плохо за это бесполезное сообщение Быстрый ответ на это сообщение
"Спасибо" от:
terranodar (22.03.2012)
Старый 22.03.2012, 15:54   #5
 
Аватар для x997
 
Сообщений: 2,205
FR (активность): 70,735

Доп. информация
По умолчанию

terranodar,тебя парсят. бань нафиг всю подсеть агавы


Говорят,что я такое же быдло как и все!!! ха ... Господа хорошие,для системы ценностей большенства людей , Я ЗНАЧИТЕЛЬНО ХУЖЕ!!!
внимание! существенная часть того что я пишу, может оказаться сарказмом!
x997 вне форума  
Ответить с цитированием Сказать Плохо за это бесполезное сообщение Быстрый ответ на это сообщение
"Спасибо" от:
terranodar (22.03.2012)
Старый 22.03.2012, 16:12   #6
 
Аватар для terranodar
 
Сообщений: 410
FR (активность): 14,157

Доп. информация
По умолчанию Автор темы

specialist-seo,
x997,
Спасибо за советы!
Имеете в виду вот это?
Код:
89.108.102.171
  inetnum:        89.108.102.0 - 89.108.102.255
  netname:        AGAVA-DATACENTER-NET3
И забанить всё что влезает в 89.108.102.*?

Остальных, похоже, придётся банить по конкретным IP.
Оффтоп:
Код:
109.120.157.179
  inetnum:        109.120.155.0 - 109.120.157.255
  netname:        INFOBOX-HYPER-V


193.106.136.37
193.106.136.38
193.106.136.56
  inetnum:        193.106.136.0 - 193.106.139.255
  netname:        Smileweb


213.110.133.221
  inetnum:        213.110.128.0 - 213.110.159.255
  netname:        SUNNET2


81.177.166.11
  inetnum:        81.177.166.0 - 81.177.167.255
  netname:        INSOLVERTC6


89.108.102.171
  inetnum:        89.108.102.0 - 89.108.102.255
  netname:        AGAVA-DATACENTER-NET3


92.249.127.111
  inetnum:        92.249.64.0 - 92.249.127.255
  netname:        SYNAPSEUA2-NET


94.153.65.244
  inetnum:         94.153.0.0 - 94.153.127.255
  netname:         KYIVSTAR-NET-14




На счёт парсинга. x997, может не всё так страшно? Ходят только на морду. И это меня удивляет и заставляет недоумевать.

Спрашивается, вот за каким лешим надо ежедневно стучать сайту в корень и только в корень. Причём с разных IPшников с разной географией, прикидываясь гуглоботом да ещё и отправляя какие-то левые сайты в реферрере.


Чтобы определить – писать глагол с -тся или -ться, спросите себя, на какой вопрос отвечает этот глагол – "что делать?" или "что делает?". Если в вопросе есть мягкий знак, значит он есть и в глаголе.
terranodar вне форума  
Ответить с цитированием Сказать Плохо за это бесполезное сообщение Быстрый ответ на это сообщение
Старый 10.02.2013, 18:50   #7
 
Аватар для cvl10v
 
Сообщений: 23
FR (активность): 0

Доп. информация
По умолчанию

>Во-первых, у кого было такое же?
Реферальный спам. Происходит постоянно.
>Во-вторых, капитан очевидность хочет удостовериться, что это ни разу не Гугл.
Не Гугл.
>И напоследок. Как думаете, стоит эти IP забанить или пусть живут?
Бесполезно.
cvl10v вне форума  
Ответить с цитированием Сказать Плохо за это бесполезное сообщение Быстрый ответ на это сообщение
Старый 10.02.2013, 18:58   #8
 
Аватар для dekdegiv
 
Сообщений: 49
FR (активность): 361

Доп. информация
По умолчанию

Цитата:
Сообщение от cvl10v Посмотреть сообщение
Реферальный спам. Происходит постоянно.
А можно подробнее, что это такое и с чем это едят?
dekdegiv вне форума  
Ответить с цитированием Сказать Плохо за это бесполезное сообщение Быстрый ответ на это сообщение
Старый 10.02.2013, 19:04   #9
 
Аватар для cvl10v
 
Сообщений: 23
FR (активность): 0

Доп. информация
По умолчанию

Программа. Подключается к сайту. В запросе передает ссылки типа http://music.siteua.org/ .... На самом деле ссылок на сайт на этих сайтах нет. Один из видов продвижения сайтов. Типа вирусной рекламы.
cvl10v вне форума  
Ответить с цитированием Сказать Плохо за это бесполезное сообщение Быстрый ответ на это сообщение
Старый 10.02.2013, 20:11   #10
 
Аватар для Ебозаврик
 
Сообщений: 272
FR (активность): 9,486

Доп. информация
По умолчанию

Хрум

Цитата:
Метод заключается в отправке реф.запросов страницам сайта, с
указанием в запросе referer="ваш_сайт" ("ваш_сайт" берётся из
Проекта, поле "Домашняя страница"), вследствие чего на тех
сайтах, где установлена статистика Webalizer - и ей подобные - на
спец.странице отображается адрес Вашего сайта. Основная
направленность - на поисковые системы.

Схема работы:

1. Выбор базы во вкладке "База ссылок"
2. Создание проекта через меню "Проект -> Новый", текст значения
не имеет, главное содержимое - поле "Домашняя страница"
3. Включение опций "Включить рефспам" и "Только рефспам" в
настройках.
4. Запуск постинга кнопкой "Старт с начала"

Нюансы:

- работает только с теми сайтами, на которых стоит специфический
модуль статистики посещений, на других эффекта не даёт;
подробнее можно прочесть http://devaka.ru/articles/refspam-info
- рекомендуется использовать прокси / SOCKS
- наиболее эффективно было до 2006-го года, однако и сейчас
может приносить некоторый эффект при больших объёмах


terranodar: сообщение полезно


Не веду никакой деятельности, контактов ICQ, Skype и т.д. не имею. С Уважением.
Ебозаврик вне форума  
Ответить с цитированием Сказать Плохо за это бесполезное сообщение Быстрый ответ на это сообщение
"Спасибо" от:
terranodar (10.02.2013)
Старый 10.02.2013, 20:15   #11
 
Аватар для dekdegiv
 
Сообщений: 49
FR (активность): 361

Доп. информация
По умолчанию

Цитата:
Сообщение от cvl10v Посмотреть сообщение
Программа. Подключается к сайту. В запросе передает ссылки типа http://music.siteua.org/ .... На самом деле ссылок на сайт на этих сайтах нет. Один из видов продвижения сайтов. Типа вирусной рекламы.
То есть банально реклама своих сайтов администраторам других сайтов?
dekdegiv вне форума  
Ответить с цитированием Сказать Плохо за это бесполезное сообщение Быстрый ответ на это сообщение
Старый 10.02.2013, 20:30   #12
 
Аватар для cvl10v
 
Сообщений: 23
FR (активность): 0

Доп. информация
По умолчанию

Информация отображается в разделе "Рефералы" анализаторов лога, систем аналитики, которые анализируют информацию на сайте (внутренние). Cпамят счетчики. В лайфинтернет в разделе "переходы с сайтов".
cvl10v вне форума  
Ответить с цитированием Сказать Плохо за это бесполезное сообщение Быстрый ответ на это сообщение
Старый 10.02.2013, 20:38   #13
 
Аватар для dekdegiv
 
Сообщений: 49
FR (активность): 361

Доп. информация
По умолчанию

Ясно, спасибо
dekdegiv вне форума  
Ответить с цитированием Сказать Плохо за это бесполезное сообщение Быстрый ответ на это сообщение
Ответ

Быстрый ответ
Ваше имя пользователя: Регистрация. Для входа нажмите здесь
Случайный вопрос

Сообщение:
Опции


Опции темы
Опции просмотра Оценка этой теме
Оценка этой теме:

Ваши права в разделе
Вы не можете создавать новые темы
Вы можете отвечать в темах
Вы не можете прикреплять вложения
Вы не можете редактировать свои сообщения

Похожие темы
Тема Автор Раздел Ответов Последнее сообщение
Логи AntonV Индексация сайта 3 30.01.2012 21:24
У кого прогнать сайт...? Art MC Продвижение сайта 41 26.09.2011 16:10
htaccess виртуальный урл для Апача htaccess Индексация сайта 0 28.06.2010 11:29
Апа не было, а сайт упал в выдаче Dikapriest Продвижение сайта 10 11.06.2010 06:18

Текущее время: 01:28. Часовой пояс GMT +3.