> Другие говорили, что ты затевал немыслимый фокус с PR.

Я знаю, что вопрос интересует многих участников WW. Однако некоторые заявления уважаемых вебмастеров меня удивляют, другие показывают их конкурентную заинтересованность, а некоторые просто выявляют полное отсутствие понимания технических вопросов. Один из ведущих блоггеров предположил, что для решения проблемы достаточно было ввести пару банов в список htaccess. Мне было смешно слушать подобные рассуждения, поскольку у нас в списке было около 4000 IP, и мы были на грани забанивания целых С-блоков, и все прокси-серверы AOL. Очевидно, что технические вопросы прошли мимо его внимания.

> Некоторые предположили, что ты хотел показать поисковым системам, что ты в них не нуждаешься.

Да, сотня тысяч таргетированных реферралов в день просто ничего не стоят. Давай смотреть правде в глаза: я обожаю поисковый трафик, но моя главная обязанность, как вебмастера, обеспечить условия для посетителей и участников нашего сайта. Против всего, что мешает нормальной работе – мошеннические спайдеры, загрузчики, офлайн-браузеры, мониторинговые службы, сайтокачалки, и прочая, - я должен принимать меры.

> Уверен, что ты слышал много других предположений. Какое из них, на твой взгляд, самое оскорбительное?

Что я запустил сервис по выкидыванию ботов, о котором я говорил 4 года назад.

> И как ты ответишь на эти выпады?

Я не стану отвечать на них. Моя первая и единственная обязанность относится к участникам и посетителям WW. Все, что я могу сделать, чтобы улучшить их пребывание на сайте – вот наша цель. Эта позиция создала WW, она же позволит сохранить его. Заботьтесь о своих участниках в первую очередь, а остальное уладится. Чем более прозрачной мы сделаем техническую сторону дел, тем лучше она будет работать.

Barry: Ожидаешь ли ты поддержки со стороны Google, Yahoo, MSN и AskJeeves, чтобы быстрее попасть в их индексы снова? Предлагали ли они тебе помощь или совет?

Brett:

>Рассчитываешь ли ты быстро попасть обратно в их индексы ?

Не быстрее, чем любой другой сайт.

>Предлагали ли они тебе помощь или совет?

Да, за сценой они проявили себя с очень хорошей стороны. Однако это не те вопросы, о которых они могут говорить публично. Печально, но факт: большие сайты попросту не могут позволить себе публично обсуждать вопросы безопасности или технические детали, опасаясь негативного эффекта на работу их собственной системы.

Barry: Каковы твои планы на ближайшие 7 дней? И затем, следующий месяц или два, в разрезе этих пауков-мошенников и честных паучат?

Brett: Надо заглянуть в морозильник, там должно быть 5 фунтов праздничной индейки, да и последний кусок тыквенного пирога нужно закончить сегодня к вечеру J

Ну а помимо этого, мне нужно закончить работу по исправлению недостатков в поисковой системе сайта, затем мы открываем новый офис, Christmas travek, PubCon в Австралии, обучение нового персонала, запланирован также весенний PubCon в Бостоне. Интересные времена наступают!

> И затем, следующий месяц или два, в разрезе этих пауков-мошенников и честных паучат?

За последнюю неделю мы сделали много изменений в самой архитектуре процесса определения ботов. Участники сайта очень помогли нам новыми идеями и новыми углами зрения, под которыми можно рассматривать проблему. Не существует волшебного меча, чтобы разрубить этот Гордиев узел, поэтому приходится аккуратно работать, используя все доступные технологии. Люди даже бесплатно пишут коды, чтобы мы могли их использовать.

С чем я бы хотел оставить читателей? Загрузите несколько программ-сайтокачалок, и натравите их на ваш сайт. Протестируйте, насколько легко сайт может быть пройден пауками. Многие владельцы сайтов с удивлением узнают, что их сайт либо совершенно доступен для пауков, невзирая на файл robots.txt, или непроходим из-за различных проблем в архитектуре сайта. Каждому владельцу сайта неплохо бы выучить этот урок.

Barry: Что ж, спасибо тебе за потраченное время и ответы на мои вопросы. Желаю самого лучшего, и надеюсь, что по большому счету все будет хорошо.

Brett: Спасибо.