Боты задолбали

кто-то шлет ботов конкретно (noref) с серваков webazill-ы, заблокировал одни IPы, начинают идти с других
делаю в htactss-е:

Цитата:

Order Deny,Allow Deny from 62.212.66.153 Deny from 78.140.138.69 Deny from 62.212.66.153 Deny from 78.140.176.11 Deny from 78.140.176.17 Deny from 78.140.133.27

Как правильно залочить на уровне сервера целиком подсети, чтоб все htactssы не править постоянно?

п.с. владельцы IPов, проверьте серваки на предмет взлома

Последний раз редактировалось: awm_mark (23/08/10 в 15:14), всего редактировалось 1 раз

Deny from 78.140.176.0/24

А еще лучше фаерволом блочить.

Это граберы скриптов, тумбы для топа которые делают.

ну да, по 2-3к заходов с одного IP в сутки за тумбами

Deny from 62.212.64.0/19
Deny from 78.140.128.0/18

эти две строки закроют весь диапазон ИП что в первом посте.

awm_mark писал:

ну да, по 2-3к заходов с одного IP в сутки за тумбами

Я это не сам придумал, например суппорт кристалла такое говорил. (в дефолтной установке, кристалл, если мне не изменяет память, ходит за тумбами раз в пять минут)
Да и собственно, проверь, что висит на айпи. Будет интерфейсный айпи коробки.

а если им ским 100% поставить? (всем норефам)

ским стоит, но они же бендвича жрут немеряно

Так по идее, зачем кому-то тянуть твои тумбы, если это не твои же трейдеры для топа.
Может за день составить список этих ip и сравнить с айпи всех трейдеров, будет яснее картина.

iptables -A INPUT -s x.y.z.j -j DROP

WannaSex писал:

а если им ским 100% поставить? (всем норефам)

это само собой, прода около 2к стала, нотрейдеры и СЕ тоже зашкаливает
но после лока сеток IP бендвич выжирает в несколько раз меньше
еще, Malvina, Rob, .., и иже с ними, поправьте свои кристалы, или улетите в "список хитботчиков" , я ужо заибался за перерасход бендвича платить

Я в суппорт кристалла предложение кидал, написать юзер агента чтобы такие ины не засчитывались. Там делов на пару часов, если не меньше. Х.з прошло или нет.

И вроде с последним апдейтом, дефолтные настройки поменять должны были. Право слово не знаю, свежих копий, с тех пор не ставил.

И вообще авторов скриптов можно эпизодически, всем дружно, попинывать. Сейчас скрипты, что только не делают. Тумбы тащат, позиции в топах проверяют, и т.д и т.п Написать юзерагента, и дать в паблик переменные, чтобы не учитывался такой трафф, не такая уж не посильная задача. В смарте, если не ошибаюсь, такое есть. Остался кристалл, трейдэксперт, и арроу. Уверен что кристалл и трейдэксперт такое смогут сделать. За арроу не уверен

да причем учитывать\неучитывать - они бендвич жрут, а он денег стоит. А когда за бендвич переплачиваешь несколько сотен баксов - начинаешь задумываться и раздражаться

От вы жжоте, господа Вы ж когда что-то постите - думайте о том, что это люди читают

Стучит трейдер. Говорит "Прочёл на форуме, что с кристалами невыгодно трейдить, потому что твои скрипты потребляют много моего бендвича".
Хорошо, что я сидел, как говорится
Окстись, говорю, товарищ! Наркотеги - зло! Даёт линк на этот топик.

1. В крыстале отродясь небыло периода грабинга меньше 1 часа (оно стоит по дефолту). Про какие 5 минут написал Slim и какой сапорт ему такое мог сказать - хз, даже
2. Граберу (любого скрипта) нахуй не нужно тянуть страницу с графикой (тем самым мотая бендвич и себе и трейдеру, нагружать свои диски и т.д.). Такое даже танкист, выучивший php по книжке не напишет. Берётся страница (код, без графики), из неё парсится урл первой тумбы. Всё. Крайняк 100 киллобайт в сумме, рассуждать о бендвиче при такой цифре - смешно было бы даже в 2002 году.
3. Трафик всяких там граберов, чекеров кода и места в топлисте не имеет проды, ему нахуй не надо кликать что-то (а у марка там прода 2к)

Чуваки, начните думать, не постите хуйню - люди пугаюца уже

у меня не прода 2к, а хитов такое к-во
о бендвиче я вижу со счетов хостера и с вебилайзера и с логов сервака
и твоему мозгу надо как-то одуплить, что я ничего не имею против кристала, я против конкретных IP

Выходит, это просто флуд с попыткой подсадить на трафик, или тупо настроенные чьи-то боты?
Может, на хостера надо внимательнее посмотреть... (параноик во мне снова проснулся)

О! Шалом защитникам кристалла )

Во первых, не надо сразу кидаться грудью на амбразуру, про танкистов и пхп рассказывать.
Скрипт то пиздатый, ктобы спорил )
Про пять минут, я выше сразу отписал, если не изменяет память.
Изменяет.

Цитата:

27.04.2010 14:54:06, Crystal support а прода низкая потому, что сейчас в моде всякие чеккеры, граберы тумб для топа и т.д. во многих скриптах - а это всё нореф и он без проды, он не кликает 27.04.2010 18:23:04, Slim кстати как варинат в дефолтной установке держать не 1 час, а сутки ) 27.04.2010 18:23:28, Crystal support это я сказал программеру ещё после вашего вчерашнего обращения, да, сделаем

Это было в апреле, я шито помнить это должен?

Ипы у Марка, я голову даю на отсечение, это грабберы трейдскрипта. Кто докажет обратное - получит пирожок

А за бендвич я ничо не говорил, тут не ко мне, но подозреваю, что именно граббер его много кушать не будет. Не в коня корм

Цитата:

это само собой, прода около 2к стала

Написано - прода 2к, я понимаю - прода 2к

За мозг спасибо, рад, что ты предположил, что он у меня таки есть (значит я не один, кто так думает, это обнадёживает, как минимум). Также топик пролил для меня таки свет на вопрос "Кто же, блять, погрыз ту клавиатуру" ... Поддерживаю, я когда инвойсы от хостера получаю - тоже нервничаю сильно.

По поводу IP выше бегемот всё прально написал - пни админов, они тебе вмиг всю подсетку заебошут в айпитейблз, в чём вопрос то ?

Slim: Не, ну смех-смехом, но реально чел вот стукнул и такой вот волшебный вывод (который он для себя сделал из этого топика) мне изложил. Ну вот я и очкую - у меня всё таки тех кристалов под сотню, если ещё человек 10 трейдеров такую херь из прочитанного выведут для себя - я на завод пойду ...

Последний раз редактировалось: Woland (25/08/10 в 20:54), всего редактировалось 1 раз

2 Woland прода около 2к стала после лока этих IP
сетку я уже сам локнул
а клаву Кеша погрыз, улетел гад, тренировался пару лет летать, где-то в парке обитет уже, с 7 соседскими попугаями (они суки планировали побег, мой, и у соседа 7 за 2 дня улиняли)
а сволочь делал вид что открытое окно боится

Woland писал:

Slim: Не, ну смех-смехом, но реально чел вот стукнул и такой вот волшебный вывод (который он для себя сделал из этого топика) мне изложил. Ну вот я и очкую - у меня всё таки тех кристалов под сотню, если ещё человек 10 трейдеров такую херь из прочитанного выведут для себя - я на завод пойду ...

Не, ну я то вообще мимо проходил, думаю чо банить то, если это грабберы. Тубм не будет. Самому ж не хорошо в итоге. 2-3к заходов с интерфейсного айпи вполне объяснимо, трейд с тройкой - пятаком сайтов на этой коробке, и вуаля.

Ну а выводы каждый сам для себя делает, в силу своей испорченности

Цитата:

а клаву Кеша погрыз, улетел гад, тренировался пару лет летать, где-то в парке обитет уже ... а сволочь делал вид что открытое окно боится

Да, читал про эту историю на форуме, как Кеша пару лет не открывал окно со статсами, а потом улетел с баблом, гад ...


Slim: 2-3к с ИП это если с дефолтными настройками - сотня сиджей на одном серваке должна быть, 24(раз в час)х100(штук)=2400
Но суть в том, что потребить они смогут аж 200-300Mb траффика, что есть эквивалент сотни серферов (особенно для сиджа с минимум 100 трейдерами на борту), т.е. цифра довольно смешная.

Woland: Боюсь ошибиться вновь, но не в кристалле ли есть такая настройка как, количество попыток граба на одну работу крона? Проверять сейчас точно не полезу, но если в нем, то твою арифметику надо поделить на оную.

Кстати, если прода стала 2к после бана айпишек, это повод задуматься.
либо это гугль бот, либо это байда бот, либо бот бешенных японцев анимешников (есть, блядь, и такие ) они то и могут бендвич кушать.

Slim: Такая настройка есть, только это не попыток на 1 крон, а попыток, если не удалось сдёрнуть тумбу с трейдера (а это как бы очень не часто бывает, что тумбу нельзя дёрнуть, у меня обычно на 1 сидж 1 такой трейдер встречается, да и то только в паре-тройке ниш). Вобщем это выходит исключительный случай и им мона принебречь, а не умножать мою арифметику на эту цифру

awm_mark писал:

п.с. владельцы IPов, проверьте серваки на предмет взлома

Ты бы тоже проверил. А то окажется в конце, что мухи... тьфу... грабберы - отдельно, а, скажем, взломанный сервак, рассылающий спам на полсвета или служащий нодой какой-то варезной сети - отдельно. Такой расклад куда более правдоподобен в плане перерасхода трафика, чем грабберы. Или гугл-бот, упаси господи.