Гугл штормит?

если кому интересно нашел лог nginx на заброшенном ресурсе
тут уже писали что бот ищет файлы скриптов, но раньше сам не наблюдал
угадываем, какой файл к какому скрипту относится. я половины не знаю
/add.php
/ai/webmaster.php
/cgi-bin/a2/signup.cgi
/cgi-bin/at3/signup.cgi
/cgi-bin/atc/signup.cgi
/cgi-bin/atx/signup.cgi
/cgi-bin/rb4/signup.cgi
/cgi-bin/te/webmaster.cgi
/cgi-bin/tm3/signup
/cgi-bin/trade.cgi
/cgi-bin/ucj/webmaster.cgi
/cj/webmaster.php
/crtr/trade.php
/ept/webmasters/index.php
/fet/webmasters.php
/ftt/signup.php
/ftt2/signup.php
/linktrade.php
/scj/scjwebmaster.php
/signup.php
/sloth_webmaster.php
/stt-webmaster.php
/te3/signup.php
/tp/trade.php
/trade.php
/ttt-webmaster.php
/tx/register.php
/webmaster.php
/webmasters.php
это выборка 404 ошибок с ip 65.111.173.60, возможно есть и другие - не заморачивался. и кстати я ошибаюсь или ротаторов здесь нет? если так то похоже все-таки на борьбу с трейдом...

XZ:

NetRange: 65.111.164.0 - 65.111.175.255
CustName: Server Pronto (infolink.com)

чей-то скрипт ищет открытые формы сайнапов.

LemonS: хм, похоже ты прав, тоже видел что подсеть другая. юзерагент у него Googlebot/2.1 (http://www.googlebot.com/bot.html), но понятно что там пиши что душе угодно.

pornolady писал:

Кто подскажет что за двиг fapvid дот ком и почему они растут как на дрожжах, имея всего сотню беков (половина с хакнутых ресов). На каком принципе генерируются страницы сёрчей для переводов... под тумбами появляются ссылки не на категории, а на серчы (синонимы чтоли?)

Думаю вписано руками после разбора.

Пробовали выборку делать по тагам, по дескам и тп - получается плюс минус одно и тоже.

В итоге остановились на выборке из search_log по кейворду теекущей категории. Те храним поиски все за Х дней, а потом при выводе фильтруем все поиски на наличие кейворда текущей категории (продвинутые вписывают доп слова поиска в кастом вар категорий) и выводим их какое-то кол-во.

genieinbottle писал:

Там кстати Кац в отпуск ушел до октября, или его ушли, так что следите за изменениями. Просто так на 4 месяца в отпуск не уходят.

Будем надеяться что ему понравиться отдыхать и останеться на вечном отпуске

забил на что либо и стал наблюдать такую картину, ресы стали просто выпадать из индекса по запросу site:domain.com сначала это был один рес, потом потихоньку остальные, при этом траф на этих ресах в ноль срезало еще (повторно) 28 мая. До этого сделал обновление кристала, последнее обновление не делал.
Кстати под бан попали и так скажем сильнее всего пострадали именно ресы на которых было подобие тьюба со спонсорским контентом. Одностаничники пиксовые, траф потеряли, но не все в ноль.

LemonS писал:

Думаю вписано руками после разбора. Пробовали выборку делать по тагам, по дескам и тп - получается плюс минус одно и тоже. В итоге остановились на выборке из search_log по кейворду теекущей категории. Те храним поиски все за Х дней, а потом при выводе фильтруем все поиски на наличие кейворда текущей категории (продвинутые вписывают доп слова поиска в кастом вар категорий) и выводим их какое-то кол-во.

Фактически.. смогу ли отпарсить все урлы search фапвида Скриминг фрогом... Получу базу кеев, а потом как то применю ее к Кастом Вар полям внутри категорий...
?

pornolady писал:

Фактически.. смогу ли отпарсить все урлы search фапвида Скриминг фрогом... Получу базу кеев, а потом как то применю ее к Кастом Вар полям внутри категорий... ?

ебать, отличная идея. где ты раньше был - вобще алекс зед одобряет

могу тебя заверить что даже спиздив базу кеев у тебя ничего не выдет потому что ты неудачник и не умеешь программировать на луа и еще на смартсж ездишь

ну а в целом что ты тут спрашиваешь на форуме - хочешь что бы из тебя "джордано бруно" сделали

fish_ka: так он тебя и наймет на луа программить и гуглоботов файрволлом блокировать

pornolady: я хз что такое стриминг фрог, но не вижу проблемы сделать тоже самое.

В остальном конечно надо слушать fish_ka, видно человек старается, помогает конкурентам время потратить

не

Последний раз редактировалось: MO $$$ (27/05/16 в 17:54), всего редактировалось 1 раз

LemonS писал:

pornolady: я хз что такое стриминг фрог, но не вижу проблемы сделать тоже самое. В остальном конечно надо слушать fish_ka, видно человек старается, помогает конкурентам время потратить

ты главное не бросай меня в терновый куст = ну а лемон к успеху шел - шел - шел и вдруг гопник гугл с фильтрами и банами из-за угла - ты раскажи как уже банят новые домены на НОВЫХ версиях твоего супер пупер трейда и ротационного скрипта - кастом вар

зы - уезжаю в отпуск скоро - чего и вам желаю

fish_ka писал:

ты главное не бросай меня в терновый куст = ну а лемон к успеху шел - шел - шел и вдруг гопник гугл с фильтрами и банами из-за угла - ты раскажи как уже банят новые домены на НОВЫХ версиях твоего супер пупер трейда и ротационного скрипта - кастом вар зы - уезжаю в отпуск скоро - чего и вам желаю

Скосило все скрипты, что ты предлагаешь?

MO $$$ писал:

есть пачка генеренки под сиджи - естественно трейда на них нет ))) убивают только штучно по стуку - все алгоритмы проходят нормально так что убирать общие признаки - имена скриптов и т.д. - стоило еще несколько лет назад готовиться, тем более это не сложно лень однако скриптописателей).

Что непосредственно нужно вычистить/изменить?

fish_ka: за меня можешь не переживайть, я ж тоже тебя слушаю )

мы скрипт не продаем уже, теперь двигаем курсы программирования на lua ))

LemonS писал:

fish_ka: за меня можешь не переживайть, я ж тоже тебя слушаю ) мы скрипт не продаем уже, теперь двигаем курсы программирования на lua ))

засвети урл курсов - я пойду на повышение квалификации - а то что скрипт не продаешь оно и понятно - никто не покупает - все на отдых поехали


в сентябре или когда там катц с отпуска выдет - он и подведет итоги лета и половины осени похоже

alligator писал:

Скосило все скрипты, что ты предлагаешь?

залечь на дно в брюге

в сентябре будет видно, что и как = может к сентябрю и будет амнистия итд -

короче забить на строительство новых сайтов и ехать отыдхать


че счас копья ломать - нифига же не выходит

Опять пошло все вниз...

не

Последний раз редактировалось: MO $$$ (27/05/16 в 17:54), всего редактировалось 1 раз

GypsyKing писал:

Опять пошло все вниз...

ты видмо из счастливцев кто с аперля даже подьём вверх видел

LemonS писал:

и мы над этим работаем. Еще пара недель и будет новый скрипт с полной уникальностью.

Как там скрип то?

Поделюсь пожалуй своей инфой.

Все хозяйство на одном серваке, один (точнее два) айпишника. Скрипт, в основном smartcj. Все дески титлы неуникальные, либо спонсорские, либо хамстера и подобных тюбов.

1 группа - на спонсорских, один отдельный мастер и группа слейвов с другим мастером. Все забанены (в ГВТ их нет), site:domain.com ничего не выдает.
2 группа - хамстеровские, 4 штуки, у двух слаги были сделаны уникально, у двух по умолчанию смартсиджеем. П оумолчанию в бане, один в ГВТ там пюре спам. С уникальными слагами, но неуник десками в выдаче есть, правда траф практически нулевой.
3 группа - тоже спонский неуник, но скрипт кастомный. Все в индексе, несколько штук были раньше на самрте, и его страницы в индексе сидят. СЕ трафик немного капает, на бывшие смарты вроде как поменьше, хотя судить трудно общее количество небольшое.

На вывод попробовал только один из первой группы, сменил слаги, в гвт не писал. Пока жду, в выдаче нет гуглобота тоже не видать в статах.

Vslav: все ок, сделали тестовую версию без кук, без параметра ротации, в любой каталог и тп. Одним словом дабы снять любые общие признаки.

Но как я уже говорил имхо вопрос в общей уникальности контента.
Для пиксового конетента решение уже есть.

А вот для ембедов как я понимаю никто тубы не просил дабы они начали выдавать уникальный код адверам ?

LemonS писал:

Vslav: все ок, сделали тестовую версию без кук, без параметра ротации, в любой каталог и тп. Одним словом дабы снять любые общие признаки. Но как я уже говорил имхо вопрос в общей уникальности контента. Для пиксового конетента решение уже есть. А вот для ембедов как я понимаю никто тубы не просил дабы они начали выдавать уникальный код адверам ?

LemonS:

1. Как насчет сайтов у которых свои флв были? На своем сервере , без экзоклика, попандеров , мобильных редиректов.
2. Сайты , которые тупо продавали траффик на тубы, т.е не использовали ембеды.

LemonS писал:

все ок, Для пиксового конетента решение уже есть.

Хотелось бы поскорей увидеть версию для пиксовых cj