Ищу рай
С нами с 20.09.06
Сообщения: 6999
Рейтинг: 525
|
Добавлено: 24/11/11 в 18:05 |
какой у них алгоритм?
|
|
|
|
нет судьбы
С нами с 27.03.03
Сообщения: 4427
Рейтинг: 4204
|
Добавлено: 24/11/11 в 18:08 |
Алгоритм простой в принципе. Как собственно и у всех остальных!
|
|
|
|
С нами с 24.10.04
Сообщения: 18881
Рейтинг: 9010
|
Добавлено: 24/11/11 в 18:19 |
robots.txt
Код: |
User-agent: Baiduspider
Disallow: / |
|
|
|
|
С нами с 15.07.03
Сообщения: 1122
Рейтинг: 1630
|
Добавлено: 24/11/11 в 18:27 |
Стоит в .htaccess
BrowserMatchNoCase sogou bad_bot
BrowserMatchNoCase sosospider bad_bot
BrowserMatchNoCase Baiduspider bad_bot
BrowserMatchNoCase MJ12bot bad_bot
Order Allow,Deny
Allow from all
Deny from env=bad_bot
Тьфу-тьфу-тьфу, но больше проблем нет с Baidu и иже с ним....
|
|
|
|
С нами с 02.10.08
Сообщения: 36
Рейтинг: 5
|
Добавлено: 24/11/11 в 23:02 |
Barkley писал: | но больше проблем нет с Baidu и иже с ним.... |
шо уже?
|
|
|
|
+ +
клоны загельмахера
С нами с 11.10.08
Сообщения: 14532
Рейтинг: 1943
|
Добавлено: 25/11/11 в 05:37 |
алгоритм всех задрочить, чтоб все знали что есть такой ПС байду ) прогрессивный
ну а так вообще если не нужен то локни в htaccess, в конфиге апача или нгинкс, или фаерволлом если ипы его искать не влом ... как удобней ... лично мне он не мешает ни сколько, не чаще гугла подрочить приходит на мои сайты ...
|
|
бандера придет - пизды огребет
|
0
|
|
|
С нами с 03.04.03
Сообщения: 2464
Рейтинг: 1841
|
Добавлено: 25/11/11 в 09:29 |
.
Последний раз редактировалось: Lost (15/05/15 в 15:05), всего редактировалось 2 раз(а)
|
|
|
|
С нами с 17.07.09
Сообщения: 114
Рейтинг: 155
|
Добавлено: 25/11/11 в 10:35 |
По статистике обращений в наш саппорт примерно половине пользователей дописывание htaccess и robots не дали ничего. 100% результат даёт только бан 2-3 (обычно он приходит с 2-3) подсетей, с которых он приходит на сидж. Подсетей много, среди них далеко не только китай (хотя преобладает).
Цитата: | лично мне он не мешает ни сколько, не чаще гугла подрочить приходит на мои сайты ... |
Если бы он только приходил, он ещё кликает и кликает много, кликает исключительно по топам и портит статистику, а при трейде по ref в линке ещё и ауты на трейд уродует. Бот гугла кликает реже на пару порядков.
|
|
|
|
Ищу рай
С нами с 20.09.06
Сообщения: 6999
Рейтинг: 525
|
Добавлено: 25/11/11 в 15:24 |
существенный вред наносит байду.. уже банил раньше, опять всплыл
|
|
|
|
С нами с 02.10.08
Сообщения: 36
Рейтинг: 5
|
Добавлено: 25/11/11 в 15:59 |
Crystal Scripts писал: | По статистике обращений в наш саппорт примерно половине пользователей дописывание htaccess и robots не дали ничего. |
в robots дописывание и не должно ничего давать, это просто как пожелание для поисковика, которому он следует по своему усмотрению.
с htaccess не совсем понятно, это безусловная команда для апача - тут разве адреса указывают неправильно.
|
|
|
|
С нами с 17.07.09
Сообщения: 114
Рейтинг: 155
|
Добавлено: 25/11/11 в 19:12 |
Цитата: | в robots дописывание и не должно ничего давать, это просто как пожелание для поисковика, которому он следует по своему усмотрению.
с htaccess не совсем понятно, это безусловная команда для апача - тут разве адреса указывают неправильно. |
Имелся ввиду тот код, который приведён тут в постах выше в robots и в htaccess, а не бан по IP. Вот эти письмена помогают фифти-фифти, а бан по IP помогает всегда.
|
|
|
|
gogettop.net
С нами с 03.01.11
Сообщения: 11291
Рейтинг: 445
|
Добавлено: 25/11/11 в 21:47 |
Гдето тут была была ссылка на все китайские IP с байду в том числе, на том ресе даже с примером кода хтацесса было, спаманите кто знает подобные ресы плизз
|
|
|
|
С нами с 17.07.09
Сообщения: 114
Рейтинг: 155
|
Добавлено: 25/11/11 в 21:55 |
|
|
|
|
С нами с 21.03.08
Сообщения: 720
Рейтинг: 1013
|
Добавлено: 25/11/11 в 23:13 |
Crystal Scripts писал: | Вот эти письмена помогают фифти-фифти, а бан по IP помогает всегда. |
Да потому, что приведенный код, неверный.
Необходимо др переменные использовать.. Отсюда и косяки
Есть хорошая переменная HTTP_USER_AGENT. Все остальное от лукавого.
PS:Читать мат часть по апачу три раза.
|
|
|
|
С нами с 02.10.08
Сообщения: 36
Рейтинг: 5
|
Добавлено: 29/11/11 в 01:47 |
L.Estel писал: | Есть хорошая переменная HTTP_USER_AGENT. Все остальное от лукавого.
|
лукавого незнаю. HTTP_USER_AGENT. одно из и этим не решается
|
|
|
|
С нами с 21.03.08
Сообщения: 720
Рейтинг: 1013
|
Добавлено: 29/11/11 в 11:20 |
У меня именно оно...
Никаких байду и в помине нет... Вообще забыл что это
|
|
|
|
С нами с 28.11.11
Сообщения: 671
Рейтинг: 626
|
Добавлено: 29/11/11 в 14:49 |
У меня тоже оно - и тоже все это дерьмо исчезло
|
|
|
|
С нами с 17.08.01
Сообщения: 353
Рейтинг: 83
|
Добавлено: 12/12/11 в 18:52 |
глюк
|
|
|
|
С нами с 09.05.00
Сообщения: 2228
Рейтинг: 744
|
Добавлено: 27/03/12 в 01:09 |
Народ, а никто не подскажет что за херня EC2LinkFinder? Заливает зараза 1н мой СЖ. Понятно можно через htaccess IPники забанить. Но хотелось бы сначала узнать что за херня.
|
|
|
|
Bitcoin
С нами с 18.11.01
Сообщения: 4709
Рейтинг: 3066
|
Добавлено: 27/03/12 в 01:38 |
Mоrgan писал: | Народ, а никто не подскажет что за херня EC2LinkFinder? Заливает зараза 1н мой СЖ. Понятно можно через htaccess IPники забанить. Но хотелось бы сначала узнать что за херня. |
Это какая-то хрень от Amazon [EC2 = Elastic Compute Cloud (Amazon)]. Имхо бань.
|
|
Tube.Cash выкупит ваш трафик на галеры, заплатит за переходы с эмбедов
|
3
|
|
|
Soul's Buyer
С нами с 16.11.05
Сообщения: 12702
Рейтинг: 10740
|
Добавлено: 27/03/12 в 19:22 |
Цитата: | Я baidu найду и убью |
Смотрю выебать чё-то азиатское - это стаёт навязчивой идеей
|
|
|
|
С нами с 19.02.10
Сообщения: 251
Рейтинг: 276
|
Добавлено: 27/03/12 в 20:17 |
Бан B-С-сетей через .htaccess снял проблему раз и навсегда:
Цитата: | BAIDU/CHINANET
123.125
180.76.0
180.76.1
180.76.2
180.76.3
180.76.4
180.76.5
180.76.6
180.76.7
180.76.8
180.76.9
180.76.10
180.76.11
180.76.12
180.76.13
180.76.14
180.76.15
180.76.16
220.181 |
а про robots.txt пора уже забыть.. RIP ему
|
|
|
|
С нами с 19.02.10
Сообщения: 251
Рейтинг: 276
|
Добавлено: 27/03/12 в 20:21 |
А ..ну и для htaccess не забыть добавить:
Цитата: | Order Allow,Deny
Allow from all
Deny from 123.125
Deny from 180.76.0 |
...и далее по списку
+ очень актуально для забывчивых:
Цитата: | <Files .htaccess>
order allow,deny
deny from all
</Files> |
А то потом голову ломают: чет хтакцесс не пашет млин
|
|
|
|
С нами с 09.05.00
Сообщения: 2228
Рейтинг: 744
|
Добавлено: 27/03/12 в 23:06 |
EC2LinkFinder забанить через IP оказалось не просто. Каждый раз приходит пачка ботов с новым IP
|
|
|
|
just smoke it
С нами с 17.07.07
Сообщения: 1548
Рейтинг: 429
|
Добавлено: 02/04/12 в 17:05 |
RiverVanRain писал: | Цитата:
<Files .htaccess>
order allow,deny
deny from all
</Files>
|
это для чего?
|
|
|
|