Реклама на сайте Advertise with us

Webmaster Tools, Crawl errors, Not found - куча левых URL's

Расширенный поиск по форуму
 
Новая тема Новая тема   
Автор
Поиск в теме:

нет судьбы

С нами с 27.03.03
Сообщения: 4427
Рейтинг: 4204


Передовик Master-X (16.07.2011) Передовик Master-X (16.10.2011) Передовик Master-X (01.11.2011) Передовик Master-X (16.11.2011) Передовик Master-X (01.01.2012) Ветеран трепа Master-X (16.02.2012)
Ссылка на сообщениеДобавлено: 22/11/11 в 13:16       Ответить с цитатойцитата 

Что за хрень, постоянно приходится вычищать из Crawl errors\Not found разномастные урлы, который в реалии нет и небыло.

На сайте есть несколько урлов такого вида:
http://domain.com/dir1/
http://domain.com/dir2/
http://domain.com/dirN/
http://domain.com/file1.html
http://domain.com/file2.html
http://domain.com/fileN.html
Эти урлы не генерятся скриптом, их число конечное, лежат себе статикой..

Что вижу в Crawl errors:
http://domain.com/dir1/dir2/ 404 (Not found) unavailable
http://domain.com/dir2/dir1/file1.html 404 (Not found) 1 pages
http://domain.com/dir2/dir1/file2.html 404 (Not found) 2 pages
...
Все возможные комбинации.

Если перейти по этим урлам, то в реалии показывается 404 ошибка задизайненая под сайт. В ответах сервера при вызове страницы отдаётся 404, т.е. гугл должен был понять, что это та самаяошибочная страница. Почему он тогда добавляет эти урлы в список Crawl errors и кто на них ссылается??

®

0
 



С нами с 24.10.04
Сообщения: 18881
Рейтинг: 9010


Передовик Master-X (16.03.2006) Передовик Master-X (01.04.2006) Передовик Master-X (16.04.2006) Передовик Master-X (01.05.2006) Передовик Master-X (01.11.2006) Ветеран трепа Master-X ()
Ссылка на сообщениеДобавлено: 22/11/11 в 13:20       Ответить с цитатойцитата 

из личных наблюдений, заметил как гугл-бот ходит по урлам набранным в хроме, тестировал/отлаживал скрипт, утром гляжу полезли ошибки, полез в логи, а там гуглобот их краулит trollface.png
возможно твои 404 урлы кто-то набирал в хроме или другом гугл-тулбаре...

9
 

www.phpdevs.com

С нами с 24.10.02
Сообщения: 16633
Рейтинг: 16105


Передовик Master-X (01.09.2005) Передовик Master-X (16.09.2005) Передовик Master-X (01.10.2005) Передовик Master-X (16.08.2006) Передовик Master-X (16.10.2006) Ветеран трепа Master-X ()
Ссылка на сообщениеДобавлено: 22/11/11 в 13:21       Ответить с цитатойцитата 

это обыкновенные граберы, которые просто обрабатывают твои страницы подставляя увеличивающийся счетчик числа вместо номера.

Пишу на php/mysql/django за вменяемые деньги.
Обращаться в личку.

9
 

нет судьбы

С нами с 27.03.03
Сообщения: 4427
Рейтинг: 4204


Передовик Master-X (16.07.2011) Передовик Master-X (16.10.2011) Передовик Master-X (01.11.2011) Передовик Master-X (16.11.2011) Передовик Master-X (01.01.2012) Ветеран трепа Master-X (16.02.2012)
Ссылка на сообщениеДобавлено: 22/11/11 в 13:25       Ответить с цитатойцитата 

Странно, что гугл фиксирует эти страницы. Сервер же отдаёт ему, что не найдено.
Может стоит убрать код гугл аналитикс из страницы выдаваемой вместо 404 ошибки?

®

0
 

нет судьбы

С нами с 27.03.03
Сообщения: 4427
Рейтинг: 4204


Передовик Master-X (16.07.2011) Передовик Master-X (16.10.2011) Передовик Master-X (01.11.2011) Передовик Master-X (16.11.2011) Передовик Master-X (01.01.2012) Ветеран трепа Master-X (16.02.2012)
Ссылка на сообщениеДобавлено: 23/11/11 в 12:58       Ответить с цитатойцитата 

Это влияет как-то на качество сайта для гугла?
Теперь все эти страницы отправлять на удаление?

®

0
 
Новая тема Новая тема   

Текстовая реклама в форме ответа
Заголовок и до четырех строчек текста
Длина текста до 350 символов
Купить рекламу в этом месте!


Перейти:  



Спонсор раздела Стань спонсором этого раздела!

Реклама на сайте Advertise with us

Опросы

Рецепт новогоднего блюда 2022



Обсудите на форуме обсудить (11)
все опросы »