С нами с 28.10.06
Сообщения: 1841
Рейтинг: 929
|
Добавлено: 02/09/10 в 01:37 |
Мне надо вычислить всех гуугл ботов)
Или их датацентры - может кто таким уже занимался и есть список - или подскажите как это лучше сделать.
за ранее спасибо
все рейтинг
|
|
|
|
С нами с 16.10.08
Сообщения: 1372
Рейтинг: 834
|
Добавлено: 02/09/10 в 03:29 |
это уже давно не актуально т.к. гугл помимо своих закупает айпишники у крупных провайдеров и ходит под ними, так что всех не пропасешь
|
|
|
|
С нами с 10.02.09
Сообщения: 901
Рейтинг: 860
|
Добавлено: 02/09/10 в 07:12 |
Кто-то где-то говорил здесь в каком-то топике, что гугл не предоставляет список ip-ов по которым бродит => я думаю это крайне тяжело будет сделать
|
|
|
|
php
С нами с 09.10.06
Сообщения: 3706
Рейтинг: 2410
|
Добавлено: 02/09/10 в 08:18 |
все реализуемо, только вот актуально ли это как уже сказали
|
|
|
|
С нами с 28.10.06
Сообщения: 1841
Рейтинг: 929
|
Добавлено: 02/09/10 в 17:16 |
это актуально) меня инетересуют методы по которым можно их вычислить
|
|
|
|
php
С нами с 09.10.06
Сообщения: 3706
Рейтинг: 2410
|
Добавлено: 02/09/10 в 17:22 |
анализируй логи
|
|
|
|
См.Подпись
С нами с 30.01.07
Сообщения: 33345
Рейтинг: 6370
|
Добавлено: 02/09/10 в 17:24 |
Да, скорее всего только через логи.
|
|
Подпись Сдаётся в Аренду. $100 за одну строчку в месяц.
Больше 1000 постов в месяц. Обращайтесь в ЛС.
|
6
|
|
|
php
С нами с 09.10.06
Сообщения: 3706
Рейтинг: 2410
|
Добавлено: 02/09/10 в 17:26 |
ну почему, можно например через пыхапе, составить свой лог запросов но имхо зачем..
|
|
|
|
С нами с 16.10.08
Сообщения: 1372
Рейтинг: 834
|
Добавлено: 02/09/10 в 17:58 |
ТС глянь еще на форуме blackhatworld.com там клоакеры водятся и частенько выкладывают списки айпишников гуглботов
|
|
|
|
С нами с 28.10.06
Сообщения: 1841
Рейтинг: 929
|
Добавлено: 02/09/10 в 18:47 |
спасибо всем рейт отсыпал +6
по прежнему ищу советов) как лучше поступить.
|
|
|
|
>100 сайтов вебкам. ссылки.
С нами с 31.03.08
Сообщения: 2372
Рейтинг: 3463
|
Добавлено: 02/09/10 в 19:35 |
gleoz http://en.utrace.de/
вбиваешь IP посетителя, и видишь, откуда он пришел. часто прямо так и написано: гугл-датацентр.
но, если гугл маскируется, как тут выше писали, то нужны и какие-то другие методы.
|
|
|
|
+ + +
С нами с 11.11.05
Сообщения: 580
Рейтинг: 416
|
Добавлено: 02/09/10 в 20:52 |
66.249.71.16 ип гуглкомовского бота, юса, 5к - 25к инов дейли получается,по норефу можно ловить их.
пс: от твоего дата центра будет зависеть и многое от сайта.
|
|
|
|
С нами с 10.02.09
Сообщения: 901
Рейтинг: 860
|
Добавлено: 02/09/10 в 23:27 |
Farel777 писал: | 66.249.71.16 ип гуглкомовского бота, юса, 5к - 25к инов дейли получается,по норефу можно ловить их.
от твоего дата центра будет зависеть и многое от сайта. |
Оффтопик: 25к СЕ трафа с гугла получается в сутки? А люди парятся... ищут решение...
|
|
|
|
php
С нами с 09.10.06
Сообщения: 3706
Рейтинг: 2410
|
Добавлено: 03/09/10 в 07:38 |
чета я сомневаюсь что гугл будет заходить с 1 айпи причем в таком количестве
|
|
|
|
С нами с 22.07.07
Сообщения: 5
Рейтинг: 6
|
Добавлено: 08/09/10 в 12:49 |
Если в php, используй gethostbyaddr($_SERVER['REMOTE_ADDR']), получишь имя хоста, оно должно содержать googlebot.com, но это только если гугл не шифруется...
|
|
|
|