Реклама на сайте Advertise with us

Чем пропарсить индексацию Гугла?

Расширенный поиск по форуму
 
Новая тема Новая тема   
Автор
Поиск в теме:

8=========D

С нами с 29.02.04
Сообщения: 2254
Рейтинг: 1587

Ссылка на сообщениеДобавлено: 26/01/14 в 20:16       Ответить с цитатойцитата 

На выходе Нужно 2 списка
1. Страницы сайта в индексе site:site.ru/
2. Страницы в выдаче site:site.ru/&

Хочу узнать какие страницы на сайте попали в сопли.
Кто что посоветует - софт, скрипты, сервисы, платное/ бесплатное.

Porn sites reviews

1
 

Кладовщик

С нами с 04.03.09
Сообщения: 4495
Рейтинг: 1163

Ссылка на сообщениеДобавлено: 27/01/14 в 03:34       Ответить с цитатойцитата 

По дефолту первый пункт тебе не нужен facepalm.gif
пройдись любым пауком по сайту и все trollface.png


sawaporn писал:
site:site.ru/&


Этот список можно взять в вебмастерсе если сайт статичнен (на протяжении хз какого времени, не проверял) в разделе внутренних ссылок (все что там есть это и есть страницы без соплей), если контент добавляется каждый день то в вебмастерс отстает с выводом информации конкрено.

Вообще причин соплей много и один из вариантов избавления от соплей: хорошая перелинковка или рандомный вывод материалов на всех страницах (это если влом замарачиватся, но тоже есть свои ньюаснсы и можно остаться вообще без трафа trollface.png ) и в сопли идут только страницы попавшие уже конкретно под фильтр и дубли если такие есть

Кладу на все

1
 

8=========D

С нами с 29.02.04
Сообщения: 2254
Рейтинг: 1587

Ссылка на сообщениеДобавлено: 27/01/14 в 13:18       Ответить с цитатойцитата 

Почему мне не нужен 1й список ?
Чтобы понять какие страницы в соплях нужно из списка 1 вычесть спиок 2


karbonv писал:
пройдись любым пауком по сайту и все

Очень смешно - я вроде бы это и спрашивал, или мне паука с чулана достать?

karbonv писал:
Вообще причин соплей много

собственно именно для того чтобы понять природу соплей - нужно сначала знать какие страницы там оказались. Учитывая количество страниц несколько тысяч, вручную сделать это проблематично, поэтому я и спросил - есть ли инструменты.

Porn sites reviews

0
 

Кладовщик

С нами с 04.03.09
Сообщения: 4495
Рейтинг: 1163

Ссылка на сообщениеДобавлено: 27/01/14 в 14:25       Ответить с цитатойцитата 

sawaporn писал:
или мне паука с чулана достать?


Как раз в чулане и есть такой, паук с бородой trollface.png

Ищи Xenu - это для сайта

По второму хз софт не попадался, самопис если много очень

Если страниц много и все в соплях и в губной помаде trollface.png то тут считай или не считай, не поможет.

Как вариант я подсказал - нужна перелинковка, немного забегая на перед думаю что было так - была отгружена туча контента на сайт, при чем все сразу или очень быстрыми темпами, я тоже так делаю

Че я делал: рандом как описал выше + комментсы систиматичиски добавлялись, и на каждый комментс с профиля юзера вела ссылка (как на форуме)

Кладу на все

0
 
Новая тема Новая тема   

Текстовая реклама в форме ответа
Заголовок и до четырех строчек текста
Длина текста до 350 символов
Купить рекламу в этом месте!


Перейти:  



Спонсор раздела Стань спонсором этого раздела!

Реклама на сайте Advertise with us

Опросы

Рецепт новогоднего блюда 2022



Обсудите на форуме обсудить (11)
все опросы »