Вернуться   SEO форум - оптимизация и продвижение сайтов > SEO инструменты > Анализ и обзор статистики

Важная информация
Анализ и обзор статистики - Статистика продвижения сайтов, эффективности оптимизации. Интернет сервисы, анализ статистики, отслеживание переходов. Яндекс.Метрика, Google Analytics и т.д.

Ответ
 
Опции темы Оценить тему Опции просмотра
Старый 05.11.2017, 14:25   #1
 
Аватар для OS_ZP_UA
 
Сообщений: 1,252
FR (активность): 38,366

Доп. информация
По умолчанию Автор темы Накручивают Г трафик

Собственно, в течении года кто то плавненько вошел и начал крутить трафик (direct) / (none) с показателем отказов за 90%, по 200 человек в сутки.
Заметил это когда он вдруг обвалился на 1-2 число. Трафик (direct) / (none) упал на 2 дня с 400 до 200 человек, а показатель отказов и время на сайте, пришло на эти два дня к почти средним показателям по больнице.
У меня собственно вопрос, зачем это кому то надо? Ведь такая дурь ни на что не влияет...или я что то упускаю?


Не забываем, для спасибо существует кнопка
OS_ZP_UA на форуме  
Ответить с цитированием Сказать Плохо за это бесполезное сообщение Быстрый ответ на это сообщение
Старый 06.11.2017, 12:04   #2
 
Аватар для Wardal
 
Сообщений: 432
FR (активность): 18,702

Доп. информация
По умолчанию

Может думают что поведенческими вас задушат?
Wardal вне форума  
Ответить с цитированием Сказать Плохо за это бесполезное сообщение Быстрый ответ на это сообщение
Старый 06.11.2017, 12:39   #3
 
Аватар для OS_ZP_UA
 
Сообщений: 1,252
FR (активность): 38,366

Доп. информация
По умолчанию Автор темы

Ну возможно поведенческие и можно задушить таким образом, но только в Яндексе, да и кол-ва должны быть минимум раз в 10 больше. Гуглу на такие танцы пофик... Да и, как по мне, это просто кто то бюджет на непонятно что сливает...при этом уже с пол года, и не видя результата.


Не забываем, для спасибо существует кнопка
OS_ZP_UA на форуме  
Ответить с цитированием Сказать Плохо за это бесполезное сообщение Быстрый ответ на это сообщение
Старый 06.11.2017, 19:27   #4
 
Аватар для Косма
 
Сообщений: 20
FR (активность): 110

Доп. информация
По умолчанию

так в чем разница между гуглом и яндексом в данном случае, можно поконкретнее?
Косма вне форума  
Ответить с цитированием Сказать Плохо за это бесполезное сообщение Быстрый ответ на это сообщение
Старый 06.11.2017, 21:34   #5
 
Аватар для OS_ZP_UA
 
Сообщений: 1,252
FR (активность): 38,366

Доп. информация
По умолчанию Автор темы

В том что Гугл однозначно такое не учитывает, а Яндекс со своими тысячами сигналов, может учитывает, а может и нет...


Не забываем, для спасибо существует кнопка
OS_ZP_UA на форуме  
Ответить с цитированием Сказать Плохо за это бесполезное сообщение Быстрый ответ на это сообщение
Старый 07.11.2017, 01:16   #6
 
Аватар для cthulchu
 
Сообщений: 3,659
FR (активность): 106,746

Доп. информация
По умолчанию

400 хитов в сутки - это ничто.
яндекс никогда в жизни это не учтет если хватило ума не ставить метрику. надорвется. А для накрутки всяких бесполезных яндекс-баров заходить на сайт вообще не нужно. отправляй себе джейсоны молча и все.
скорей всего это боты, которые даже не вкурсе что их трекают. Нолевое влияние на сео. Если не нравится этот мусор в аналитике, настрой фильтры чтоб убирать это.

я бы взял лог веб-сервера и проанализировал этих ботов, чтоб понять кто это и откуда. Аналитикс для подобной диагностики не годится. Правда, дефолтный лог тоже ни о чем будет. Сначала логирование нужно настроить, потом лог парсить.

вообще, ребят, первым делом подозревать накрутку пф в таком случае - это тупое ламерство. Это, знаете, та же ситуация когда дантист свято уверен в том, что распад СССР произошел исключительно из-за отсутствия в продаже нитей для чистки зубов. Это говорит о дантисте не только то, что он нихрена кроме своего ремесла не знает, это значит что и свое ремесло он не очень-то вкуривает.

PS
Разница между яшей и гуглом в том. что гугл уважает своих пользователей.

Гугл не использует данные аналитикса даже в статистических целях, если ему запретить. Но даже если ему разрешить, гугл никогда не будет использовать любые данные аналитикса как входные данные для ранжирования даже если этот фактор будет иметь минимальное влияние.

Яшка же открыто юзает данные метрики для ранжирования.

Ну, короче. Вот так.
cthulchu вне форума  
Ответить с цитированием Сказать Плохо за это бесполезное сообщение Быстрый ответ на это сообщение
Старый 07.11.2017, 10:53   #7
 
Аватар для Wardal
 
Сообщений: 432
FR (активность): 18,702

Доп. информация
По умолчанию

Цитата:
Сообщение от cthulchu Посмотреть сообщение
400 хитов в сутки - это ничто.
яндекс никогда в жизни это не учтет если хватило ума не ставить метрику. надорвется. А для накрутки всяких бесполезных яндекс-баров заходить на сайт вообще не нужно. отправляй себе джейсоны молча и все.
скорей всего это боты, которые даже не вкурсе что их трекают. Нолевое влияние на сео. Если не нравится этот мусор в аналитике, настрой фильтры чтоб убирать это.

я бы взял лог веб-сервера и проанализировал этих ботов, чтоб понять кто это и откуда. Аналитикс для подобной диагностики не годится. Правда, дефолтный лог тоже ни о чем будет. Сначала логирование нужно настроить, потом лог парсить.

вообще, ребят, первым делом подозревать накрутку пф в таком случае - это тупое ламерство. Это, знаете, та же ситуация когда дантист свято уверен в том, что распад СССР произошел исключительно из-за отсутствия в продаже нитей для чистки зубов. Это говорит о дантисте не только то, что он нихрена кроме своего ремесла не знает, это значит что и свое ремесло он не очень-то вкуривает.

PS
Разница между яшей и гуглом в том. что гугл уважает своих пользователей.

Гугл не использует данные аналитикса даже в статистических целях, если ему запретить. Но даже если ему разрешить, гугл никогда не будет использовать любые данные аналитикса как входные данные для ранжирования даже если этот фактор будет иметь минимальное влияние.

Яшка же открыто юзает данные метрики для ранжирования.

Ну, короче. Вот так.
И много ты видел ботов чтобы делало 200 уникальных хитов, да еще и в течении какого-то периода на постоянной основе? Особенно если сайт мелкий, что им там делать?
В целом методика анализа верна, но для этой ли ситуации - это вопрос.

И чем дефолтный лог не угодил, особенно если там 90% отказов?

К ТСу, конечно, хотя бы небольшая выборка ip адресов уже может что-то сказать. Глянь в логах на досуге и скинь сюда.
Wardal вне форума  
Ответить с цитированием Сказать Плохо за это бесполезное сообщение Быстрый ответ на это сообщение
Старый 07.11.2017, 18:16   #8
 
Аватар для cthulchu
 
Сообщений: 3,659
FR (активность): 106,746

Доп. информация
По умолчанию

Цитата:
Сообщение от Wardal Посмотреть сообщение
И много ты видел ботов чтобы делало 200 уникальных хитов, да еще и в течении какого-то периода на постоянной основе? Особенно если сайт мелкий, что им там делать?
Постоянно вижу. Очевидный пример - боты, которые на конвеере брутят админки и не только админки всего нового, что появляется в выдачах по их доркам.

Да и много другого, я и на своих сайтах такое частенько замечал. У меня, правда, это больше про ддос, но тоже крайне малой выборкой так как ддос там был не какой-то идиотский icmp или tcp, а там были последовательные запросы к какому-то скрипту, который у меня тупо жрал больше проца, чем нужно, так что они ложили сервер малой сетевой нагрзкой. Опять же, это скорей была какая-то отработка техническая со стороны конвеера типа теста ддоса.

При чем тут отказы? Как я вообще с лога веб-сервера пойму, что это отказы. По айпи разве что, но я бы лучше по сессии в куках ориентировался. Но в дефолтном логе сессии нету. Вообще, я не помню умеет ли апач ее видеть. Нжинкс рулит. Нужно исследовать ботов. Нужно знать их пост, гет, айпишки, протокол, хедеры и т.п. Тупо по айпишкам смотреть - обычно бесполезно. Кроме случаев, когда это какой-то известный бот. Но тогда там по юзерагенту видно даже с самого аналитикса. Короче, надо крутить-вертеть данные.

Вообще, идеально им ловушку запилить и собрать список джаваскриптовых переменных и их значений, которые эти боты с собой несут. Это часто сильно помогает в дебагинге.
cthulchu вне форума  
Ответить с цитированием Сказать Плохо за это бесполезное сообщение Быстрый ответ на это сообщение
"Спасибо" от:
Wardal (07.11.2017)
Старый 07.11.2017, 18:32   #9
 
Аватар для Wardal
 
Сообщений: 432
FR (активность): 18,702

Доп. информация
По умолчанию

Цитата:
Сообщение от cthulchu Посмотреть сообщение
Постоянно вижу. Очевидный пример - боты, которые на конвеере брутят админки и не только админки всего нового, что появляется в выдачах по их доркам.

Да и много другого, я и на своих сайтах такое частенько замечал. У меня, правда, это больше про ддос, но тоже крайне малой выборкой так как ддос там был не какой-то идиотский icmp или tcp, а там были последовательные запросы к какому-то скрипту, который у меня тупо жрал больше проца, чем нужно, так что они ложили сервер малой сетевой нагрзкой. Опять же, это скорей была какая-то отработка техническая со стороны конвеера типа теста ддоса.

При чем тут отказы? Как я вообще с лога веб-сервера пойму, что это отказы. По айпи разве что, но я бы лучше по сессии в куках ориентировался. Но в дефолтном логе сессии нету. Вообще, я не помню умеет ли апач ее видеть. Нжинкс рулит. Мне нужно исследовать ботов. Нужно знать их пост, гет, айпишки, протокол, хедеры и т.п. Тупо по айпишкам смотреть - обычно бесполезно. Кроме случаев, когда это какой-то известный бот. Но тогда там по юзерагенту видно даже с самого аналитикса. Короче, надо крутить-вертеть данные.
Да, ты можешь видеть это, но на посещаемых, популярных ресурсах, но не там где 400 посещаемость и 200 из них брутфорс, на таких сайтах обычно этого нету. Хотя если это вордпрес, то кто его знает, я с ним давно не работал, а взломат ьего пытаются постоянно. Из своей практики я бы вывел статистику, что из 100 уникальных айпи, где-то 2-5 пытаются просканить сайт на структуру или какие-то конкретные пути/запросы. Если процент больше, то тут явно что-то не так.

По поводу ДДОСа на сервисы которые требовательны по ресурсам - действительно довольно частая тема и в целом выгодная, потому что зачастую сайты не сильно то оптимизированы, и практически всегда можно легко найти запросы которые будут требовательны и которые можно нагрузить потоком. То же самое мы иногда проворачивали с большими изображениями, если они хостятся не на другом сервере от основного сайта.

А отказы тут при том, что зачастую такой отказ - это просто заход на страницу и сразу выход. В логах это просто 1 строка - 1 гет запрос и все. Дальше должным образом спарсить этот лог и все данные уже есть. Для тривиальных задач этого достаточно. Конечно, когда задача более сложная, и нужен тот список данных что ты указал (хотя, если я правильно помню, в стандартных запросах нету только пост-запросов и хедеров), то надо что-то кастомное. С другой стороны, я пока не представляю как разобраться и нормально обработать, и понять целую свалку из хедеров разных запросов и для чего. Разве что-бы как-то объединить и понять природу какой-то группы заходов/ботов.
Wardal вне форума  
Ответить с цитированием Сказать Плохо за это бесполезное сообщение Быстрый ответ на это сообщение
Старый 07.11.2017, 18:58   #10
 
Аватар для cthulchu
 
Сообщений: 3,659
FR (активность): 106,746

Доп. информация
По умолчанию

плевать на посещаемость. Это делают конвееры. Им что шелл с сайта без трафа, что шелл с трафом - плевать. Любой шелл хорош, если его добыл сам конвеер. Дальше шеллы с недосайтов идут как прокси, или под спам. Если сайт вот такой с каким-то минимумом трафа типа 100 уников в сутки, можно этот шелл отдать конвееру дорвеев. Автоматически, конечно. Если трафа больше 1000 уников в сутки, имеет смысл иначе как-то монетнуть. Неважно вообще.

Еще раз - любой сайт, что появился в выдаче по дорку будет обработан. Появится по двум доркам - будет обработан дважды. Появится по популярному дорку - будет обработан целой тучей школоты много раз.

Подобный брут как раз и делается сотней-другой айпишников. Чисто прогнать топ сколько-то там используемых айпишников плюс какие-то хеккерские догадки типа домена, записи с хуиза и т.п. И вот так они будут по тысяче паролей пробовать каждый день, пять паролей на айпишку, пока не закончится их маленький рейнбоу тейбл. А потом следующий школьник доберется до этого сайта и начнет то же делать.

ддос по изображениям отличается от тупого icmp только тем, что аплоад канал у ддосера не забит. Обычно это бессмысленно. Лучший, в этом плане, ддос делается через иньекции в код или в базу. Там вообще не нужны боты и айпишники.

не спарсишь ты так лог. У тебя к ботам подмешаются куча нормальных запросов. Но даже и без этого, у тебя же кук нету, как ты парсить будешь? по уникальным айпишникам в сутки? А если боты два-три раза в сутки брутят? А может там вообще 10 айпишников каждый час коннектятся, инициируя новые сессии в аналитиксе? Сначала нужно попробовать закономерности выявить в аналитиксе, а потом уже на их основе лог парсить. В стандартных запросах еще куков нету. Я уже не помню есть ли там протокол, наверное есть. Совершенно верно. Когда после аналитикса мы придумываем как оттенить ботов, скажем, они в одно и то же время приходят, или у них одна страна, или один юзерагент, или один реферер, то дальше есть на основании чего парсить лог и да, из хедеров, куков, юзерагентов и всего остального, пусть даже айпишек, стараться понять природу этих хитов.

Не, можно, конечно, попробовать с места в лог нырять, но пользы будет мало от этого, так как быстро выяснится, что нужно идти в аналитикс и отвечать на какие-то в общем-то очевидные вопросы, которые сильно упростят дальнейший парсинг.

Вообще, я паршу логи веб-серверов мускулем. Я их либо сначала админа прошу поменять маску логирования, либо, если админа толкового нету, паршу через apache log parser (там не только апач, там и нжинкс парсится отлично), потом делаю нужную мне разметку там, дальше импортирую в табличку стандартным парсером мускуля типа что-то вот такое:
Оффтоп:

И в мускуле уже паршу как мне надо. Ну мне оно обычно для сео удобней собирать ошибки, статистику по реиндексации ботом страниц и всякое подобное. Но графической репрезентации данных мне мускуль, конечно, не даст. Так что всю графику я в аналитиксе получаю, а дальше паршу ручками уже.

Не, если у тебя есть тулза для графической репрезентации логов веб-сервера, то может и подход а-ля с места в лог пойдет.
cthulchu вне форума  
Ответить с цитированием Сказать Плохо за это бесполезное сообщение Быстрый ответ на это сообщение
Ответ

Быстрый ответ
Ваше имя пользователя: Регистрация. Для входа нажмите здесь
Случайный вопрос

Сообщение:
Опции


Опции темы
Опции просмотра Оценка этой теме
Оценка этой теме:

Ваши права в разделе
Вы не можете создавать новые темы
Вы можете отвечать в темах
Вы не можете прикреплять вложения
Вы не можете редактировать свои сообщения

Похожие темы
Тема Автор Раздел Ответов Последнее сообщение
[ Вопрос ] Трафик. Домен .com. Трафик 60% с Украины. Необходим трафик из России. Как быть? Autor1 Продвижение сайта 11 05.08.2013 05:37
WAP трафик mr.mause Курсы, обучение 0 31.10.2012 22:49
Продам поисковый трафик из Яндекса/Google. Трафик на заказ. Talkpeople Мусорка 12 22.10.2012 13:16
HTracer: собираем трафик или "оптимизатор спит - трафик идет" x997 Софт оптимизатора, SEO утилиты 48 18.04.2012 23:57
Качественный трафик Evans Трафик, загрузки 11 19.12.2011 04:29

Текущее время: 16:47. Часовой пояс GMT +3.