События 12-13 мая 2024 года

Константин 2026.03.01, 21:48
У меня несколько сайтов — этот блог, пара сайтов действующих компаний и несколько полуброшенных проектов. На всех стоит Яндекс.Метрика, собирающая статистику. Все сайты работают на одной системе управления, хостинг — разный. Поисковое продвижение сейчас по сути не ведётся, но статистику я иногда посматриваю в процессе работы над ошибками и любопытства ради. Так вот, на большинстве сайтов есть аномальный показатель — огромное количество отказов, то есть ситуаций, когда посетитель на сайт зашёл и очень быстро его покинул.

Почему это плохо:

• отказ является поведенческим фактором и указывает поисковым системам, что сайт подобран неверно или он не интересен посетителю и, вероятно, его стоит понизить в поиске,
• статистика становится неадекватной, очень сложно становится её анализировать.

Так себе картинка, да? Прямые заходы — это именно то, о чём я и пишу. Те самые аномальные посещения, сворачивающие всю статистику напрочь. 98% посещений, судя по графику выше! На большинстве сайтов цифры подобные – 85-95% левых заходов. Посетители — разные устройства, разные IP-адреса, разное время, но всегда время посещений — 0 секунд! Браузер у большинства прописан как Chrome Mobile, но это легко подделывается.

12 или 13 мая 2024 года что-то случилось. Какая-то мощная компания включила неведомый сервис, обладающий огромными ресурсами и накручивающий посещения множеству сайтов без какой-либо очевидной цели. Десятки гигабайт передаваемой информации ежедневно.



Сначала я пытался это фильтровать возможностями Метрики. Получилось так себе, честно говоря. А потом я включил статистику, встроенную в систему управления, и оказалось, что всё таки что-то Метрика или фильтрует или просто не успевает учитывать, а посещений, на самом деле, существенно больше. Потом начал строить теории и искать варианты выхода из нынешней ситуации.

Тупые теории:

• Очередной майнинг, завязанный на этот раз не на мощности видеокарт, а на тупо перекачиваемый траффик. Кто больше перекачал данных со случайных сайтов, тот больше и добыл очередных монет. Хм...
• Очередные нейросети учатся. Но тут непонятно зачем одно и то же качать многократно, учитывая что заходы идут на главные страницы сайтов и дальше не продвигаются. Ну может ещё пока не умеют ходить по ссылкам и находить карты сайтов. Была мысль, что это Алиса Яндекса изучает сайты, чтобы отвечать на вопросы в поиске, но на главной странице много-то не узнаешь...
• Очередные сервисы и роботы получают данные. Но столько во всём мире сервисов нет, сколько идёт запросов.
• Очередной вирус. Я не знаю кто и что может сделать такое, что будет бесцельно качать данные, разве что операторы сотовых сетей, чтобы их абонентам высчитывать предоплаченные гигабайты и драть деньги за дополнительные пакеты. Ну тоже версия, причём не такая бредовая, как предыдущие.

Более умные теории:

• Действия сотовых операторов для «сжигания» гигабайт абонентов (про это выше писал).
• Особенности мобильных браузеров и их систем кэширования.
• Борьба агрегаторов с конкурентами для понижения их сайтов в поиске.
• Активная реклама сервисов защиты от DDOS-атак.

Десятки и сотни гигабайт данных, перекачиваемых ежедневно в течении нескольких лет. Размах крупных корпораций. Помимо версии накрутки трафика сотовыми операторами была ещё идея, что это особенности мобильных браузеров, подгружающих тысячи незакрытых вкладок. Чтобы отсечь такой трафик, я в систему управления встроил маленький код, который считал посещения одних и тех же страниц подряд и по достижению порога перекидывал на простейшую заглушку без статистики. За пару недель — пара десятков таких посетителей поймались, у которых была не закрыта вкладка и их всех перекинуло на заглушку. Причём большинство устройств – айфоны. Но это капля в море, остальных паразитных посещений — тысячи... То есть тут я прям промахнулся, не туда пошёл, но зато это подтолкнуло к последней версии.

Ещё одна версия — действия агрегаторов. Кто у нас вверху поисковой выдачи? Агрегаторы. Все коммерческие сайты у меня имеют такой паразитный траффик, у всех показатель отказов стремится к 99%, а это — первый знак для пессимизации сайта в поисковой выдаче.

Последняя версия — реклама сервисов анти-DDOS защиты. Когда моя защита через заглушку в очередной раз словила меня самого, я подумал про подключение такого сервиса. А потом ещё раз подумал, а не подтолкнули ли меня к такому решению?

Как со всей этой ерундой бороться? Подключать анти-DDOS )

Ни по адресу, ни по браузеру, ни по чему другому таких посетителей не отфильтровать и не заблокировать. По идее, можно фильтровать по нулевому времени посещения, но я не самый большой специалист по Метрике и у меня это не получилось, зато задумался о том, как фиксируются посещения, но не фиксируется время на сайте? Есть вероятность, что через подгрузку пиксельной картинки. Поэтому в качестве теста на одном сайте у Метрика из счётчика удалил noscript-код. Посмотрим что будет.

Теги: Статистика

• Общественный транспорт в Новосибирске

  2012.11.26 Читать далее

• Рашн традишн

  2012.11.27 Читать далее

• Годы идут

  2017.04.17 И снова здравствуйте! Вновь вернулся к блогу по прошествии почти 5 лет. С момента последнего (или как нынче модно говорить, крайнего) поста прошло 1600 дней с лишним. В какое-то время просто стало не до него, внезапно стало категорически не хватать времени, поэтому пришлось вычёркивать лишнее. Читать далее

• Пустые люди

  2017.05.12 Я вспомнил ещё об одном важном положительном качестве личного блога. Здесь можно выговориться, если этого захочется, а если кому что не понравится — «Янки, гоу хоум!» Осталось только компонент... Читать далее

• Создание сайтов — от теории к практике

  2018.01.16 Я много лет занимаюсь созданием сайтов, в активе десятки клиентов, сотни созданных сайтов и собственная система управления сайтами. Но лишь недавно я решил перейти на другую сторону – сторону клиентов. Читать далее

• Годы идут — 2

  2026.02.17 Дело было вечером, делать было нечего... Однако... И снова здравствуйте! Вновь вернулся к блогу по прошествии почти 8 лет. Читать далее

Пост #265. Постоянная ссылка на пост: http://bogdanovichi.ru/blog/post/sobytiya-12-13-maya-2/