Вернуться   SEO форум - оптимизация и продвижение сайтов > SEO инструменты > Анализ и обзор статистики

Важная информация
Анализ и обзор статистики - Статистика продвижения сайтов, эффективности оптимизации. Интернет сервисы, анализ статистики, отслеживание переходов. Яндекс.Метрика, Google Analytics и т.д.

Ответ
 
Опции темы Оценить тему Опции просмотра
Старый 21.03.2012, 22:35   #1
 
Аватар для terranodar
 
Сообщений: 410
FR (активность): 14,157

Доп. информация
По умолчанию Автор темы Логи Апача - Google Bot приходит на сайт с непустым реферрером. У кого так было?

Периодически просматриваю логи сервера на предмет подозрительных вещей и вижу следующую картину. В морду сайта регулярно стучится некто под видом Googlebot/2.1; с указанием сайта реферрера.
Выглядит примерно так.
Код:
89.108.102.171 - - [21/Mar/2012:18:19:31 +0400] "GET / HTTP/1.0" 200 22501 "http://music.siteua.org/" "Mozilla/5.0 (compatible; Googlebot/2.1; +http://www.google.com/bot.html)"
89.108.102.171 - - [21/Mar/2012:18:19:32 +0400] "GET / HTTP/1.0" 200 22501 "http://music.siteua.org/" "Mozilla/5.0 (compatible; Googlebot/2.1; +http://www.google.com/bot.html)"
Что характерно, бьют обычно дуплетом с очень коротким (меньше секунды) интервалом.

Удивляет что все посещения ботов, что я видел идут с пустым реферрером, а эти вот с такими интересными. Ссылок с этих сайтов на мой, разумеется, нет.

Реферреры разные. За пару недель наловил таких
Оффтоп:
http://auto.siteua.org/
http://fabrika-shatura.ru/
http://financemp3.at.ua/
http://flhelp.ru/
http://games.siteua.org/
http://kino.siteua.org/
http://krasnoxolm.ru/
http://lady.siteua.org/
http://lugin.ru/
http://music.siteua.org/
http://myltivarka.ru/
http://news.siteua.org/
http://ra-1.ru/
http://showbiz.siteua.org/
http://siteua.org/
http://sport.siteua.org/
http://uistone.ru/
http://vedlozero.ru/
http://w3host.ru/
http://www.apricus-studio.ru/
http://www.artwhite.ru/
http://www.zvezdaput.net/wordpress/


С вот этих IPшников
Оффтоп:
109.120.157.179
193.106.136.37
193.106.136.38
193.106.136.56
213.110.133.221
81.177.166.11
89.108.102.171
92.249.127.111
94.153.65.244


Что интересует?
  1. Во-первых, у кого было такое же?
  2. Во-вторых, капитан очевидность хочет удостовериться, что это ни разу не Гугл.
  3. И напоследок. Как думаете, стоит эти IP забанить или пусть живут?

Обратите внимание на полезные ответы в этой теме!



Чтобы определить – писать глагол с -тся или -ться, спросите себя, на какой вопрос отвечает этот глагол – "что делать?" или "что делает?". Если в вопросе есть мягкий знак, значит он есть и в глаголе.
terranodar вне форума  
Ответить с цитированием Сказать Плохо за это бесполезное сообщение Быстрый ответ на это сообщение
Старый 22.03.2012, 12:03   #2
 
Аватар для Phoenix
 
Сообщений: 1,007
FR (активность): 35,452

Доп. информация
По умолчанию

terranodar,у меня такого не было, хоть и давно не смотрел, но по моему мнению гугло бот должен приходить пустым, может его как то перенаправляют?


В сео денег нет, совсем нет
Phoenix вне форума  
Ответить с цитированием Сказать Плохо за это бесполезное сообщение Быстрый ответ на это сообщение
"Спасибо" от:
terranodar (22.03.2012)
Старый 22.03.2012, 12:45   #3
 
Аватар для terranodar
 
Сообщений: 410
FR (активность): 14,157

Доп. информация
По умолчанию Автор темы

xxxPHOENIXxxx,указанные IP ни разу не пересекались с нормальными посещениями гуглобота. Потому-то вопрос и возник


Чтобы определить – писать глагол с -тся или -ться, спросите себя, на какой вопрос отвечает этот глагол – "что делать?" или "что делает?". Если в вопросе есть мягкий знак, значит он есть и в глаголе.
terranodar вне форума  
Ответить с цитированием Сказать Плохо за это бесполезное сообщение Быстрый ответ на это сообщение
Старый 22.03.2012, 14:46   #4
 
Аватар для specialist-seo
 
Сообщений: 2,199
FR (активность): 49,104

Доп. информация
По умолчанию

terranodar, ISP: "Agava Ltd." - можно и забанить
specialist-seo вне форума  
Ответить с цитированием Сказать Плохо за это бесполезное сообщение Быстрый ответ на это сообщение
"Спасибо" от:
terranodar (22.03.2012)
Старый 22.03.2012, 15:54   #5
 
Аватар для x997
 
Сообщений: 2,205
FR (активность): 70,735

Доп. информация
По умолчанию

terranodar,тебя парсят. бань нафиг всю подсеть агавы


Говорят,что я такое же быдло как и все!!! ха ... Господа хорошие,для системы ценностей большенства людей , Я ЗНАЧИТЕЛЬНО ХУЖЕ!!!
внимание! существенная часть того что я пишу, может оказаться сарказмом!
x997 вне форума  
Ответить с цитированием Сказать Плохо за это бесполезное сообщение Быстрый ответ на это сообщение
"Спасибо" от:
terranodar (22.03.2012)
Старый 22.03.2012, 16:12   #6
 
Аватар для terranodar
 
Сообщений: 410
FR (активность): 14,157

Доп. информация
По умолчанию Автор темы

specialist-seo,
x997,
Спасибо за советы!
Имеете в виду вот это?
Код:
89.108.102.171
  inetnum:        89.108.102.0 - 89.108.102.255
  netname:        AGAVA-DATACENTER-NET3
И забанить всё что влезает в 89.108.102.*?

Остальных, похоже, придётся банить по конкретным IP.
Оффтоп:
Код:
109.120.157.179
  inetnum:        109.120.155.0 - 109.120.157.255
  netname:        INFOBOX-HYPER-V


193.106.136.37
193.106.136.38
193.106.136.56
  inetnum:        193.106.136.0 - 193.106.139.255
  netname:        Smileweb


213.110.133.221
  inetnum:        213.110.128.0 - 213.110.159.255
  netname:        SUNNET2


81.177.166.11
  inetnum:        81.177.166.0 - 81.177.167.255
  netname:        INSOLVERTC6


89.108.102.171
  inetnum:        89.108.102.0 - 89.108.102.255
  netname:        AGAVA-DATACENTER-NET3


92.249.127.111
  inetnum:        92.249.64.0 - 92.249.127.255
  netname:        SYNAPSEUA2-NET


94.153.65.244
  inetnum:         94.153.0.0 - 94.153.127.255
  netname:         KYIVSTAR-NET-14




На счёт парсинга. x997, может не всё так страшно? Ходят только на морду. И это меня удивляет и заставляет недоумевать.

Спрашивается, вот за каким лешим надо ежедневно стучать сайту в корень и только в корень. Причём с разных IPшников с разной географией, прикидываясь гуглоботом да ещё и отправляя какие-то левые сайты в реферрере.


Чтобы определить – писать глагол с -тся или -ться, спросите себя, на какой вопрос отвечает этот глагол – "что делать?" или "что делает?". Если в вопросе есть мягкий знак, значит он есть и в глаголе.
terranodar вне форума  
Ответить с цитированием Сказать Плохо за это бесполезное сообщение Быстрый ответ на это сообщение
Старый 10.02.2013, 18:50   #7
 
Аватар для cvl10v
 
Сообщений: 23
FR (активность): 0

Доп. информация
По умолчанию

>Во-первых, у кого было такое же?
Реферальный спам. Происходит постоянно.
>Во-вторых, капитан очевидность хочет удостовериться, что это ни разу не Гугл.
Не Гугл.
>И напоследок. Как думаете, стоит эти IP забанить или пусть живут?
Бесполезно.
cvl10v вне форума  
Ответить с цитированием Сказать Плохо за это бесполезное сообщение Быстрый ответ на это сообщение
Старый 10.02.2013, 18:58   #8
 
Аватар для dekdegiv
 
Сообщений: 49
FR (активность): 361

Доп. информация
По умолчанию

Цитата:
Сообщение от cvl10v Посмотреть сообщение
Реферальный спам. Происходит постоянно.
А можно подробнее, что это такое и с чем это едят?
dekdegiv вне форума  
Ответить с цитированием Сказать Плохо за это бесполезное сообщение Быстрый ответ на это сообщение
Старый 10.02.2013, 19:04   #9
 
Аватар для cvl10v
 
Сообщений: 23
FR (активность): 0

Доп. информация
По умолчанию

Программа. Подключается к сайту. В запросе передает ссылки типа http://music.siteua.org/ .... На самом деле ссылок на сайт на этих сайтах нет. Один из видов продвижения сайтов. Типа вирусной рекламы.
cvl10v вне форума  
Ответить с цитированием Сказать Плохо за это бесполезное сообщение Быстрый ответ на это сообщение
Старый 10.02.2013, 20:11   #10
 
Аватар для Ебозаврик
 
Сообщений: 272
FR (активность): 9,486

Доп. информация
По умолчанию

Хрум

Цитата:
Метод заключается в отправке реф.запросов страницам сайта, с
указанием в запросе referer="ваш_сайт" ("ваш_сайт" берётся из
Проекта, поле "Домашняя страница"), вследствие чего на тех
сайтах, где установлена статистика Webalizer - и ей подобные - на
спец.странице отображается адрес Вашего сайта. Основная
направленность - на поисковые системы.

Схема работы:

1. Выбор базы во вкладке "База ссылок"
2. Создание проекта через меню "Проект -> Новый", текст значения
не имеет, главное содержимое - поле "Домашняя страница"
3. Включение опций "Включить рефспам" и "Только рефспам" в
настройках.
4. Запуск постинга кнопкой "Старт с начала"

Нюансы:

- работает только с теми сайтами, на которых стоит специфический
модуль статистики посещений, на других эффекта не даёт;
подробнее можно прочесть http://devaka.ru/articles/refspam-info
- рекомендуется использовать прокси / SOCKS
- наиболее эффективно было до 2006-го года, однако и сейчас
может приносить некоторый эффект при больших объёмах


terranodar: сообщение полезно


Не веду никакой деятельности, контактов ICQ, Skype и т.д. не имею. С Уважением.
Ебозаврик вне форума  
Ответить с цитированием Сказать Плохо за это бесполезное сообщение Быстрый ответ на это сообщение
"Спасибо" от:
terranodar (10.02.2013)
Старый 10.02.2013, 20:15   #11
 
Аватар для dekdegiv
 
Сообщений: 49
FR (активность): 361

Доп. информация
По умолчанию

Цитата:
Сообщение от cvl10v Посмотреть сообщение
Программа. Подключается к сайту. В запросе передает ссылки типа http://music.siteua.org/ .... На самом деле ссылок на сайт на этих сайтах нет. Один из видов продвижения сайтов. Типа вирусной рекламы.
То есть банально реклама своих сайтов администраторам других сайтов?
dekdegiv вне форума  
Ответить с цитированием Сказать Плохо за это бесполезное сообщение Быстрый ответ на это сообщение
Старый 10.02.2013, 20:30   #12
 
Аватар для cvl10v
 
Сообщений: 23
FR (активность): 0

Доп. информация
По умолчанию

Информация отображается в разделе "Рефералы" анализаторов лога, систем аналитики, которые анализируют информацию на сайте (внутренние). Cпамят счетчики. В лайфинтернет в разделе "переходы с сайтов".
cvl10v вне форума  
Ответить с цитированием Сказать Плохо за это бесполезное сообщение Быстрый ответ на это сообщение
Старый 10.02.2013, 20:38   #13
 
Аватар для dekdegiv
 
Сообщений: 49
FR (активность): 361

Доп. информация
По умолчанию

Ясно, спасибо
dekdegiv вне форума  
Ответить с цитированием Сказать Плохо за это бесполезное сообщение Быстрый ответ на это сообщение
Ответ

Быстрый ответ
Ваше имя пользователя: Регистрация. Для входа нажмите здесь
Случайный вопрос

Сообщение:
Опции
Внимание!
Этой теме более 1931 дней. Вы можете оставить сообщение здесь. Но, обращаем внимание. Возможно, рациональней создать новую тему (найти свежее обсуждение)?


Опции темы
Опции просмотра Оценка этой теме
Оценка этой теме:

Ваши права в разделе
Вы не можете создавать новые темы
Вы можете отвечать в темах
Вы не можете прикреплять вложения
Вы не можете редактировать свои сообщения

Похожие темы
Тема Автор Раздел Ответов Последнее сообщение
Логи AntonV Индексация сайта 3 30.01.2012 21:24
У кого прогнать сайт...? Art MC Продвижение сайта 41 26.09.2011 16:10
htaccess виртуальный урл для Апача htaccess Индексация сайта 0 28.06.2010 11:29
Апа не было, а сайт упал в выдаче Dikapriest Продвижение сайта 10 11.06.2010 06:18

Текущее время: 03:18. Часовой пояс GMT +3.