Реклама на сайте Advertise with us

Гугл игнорирует robots и nofollow?

Расширенный поиск по форуму
 
Новая тема Новая тема   
Автор
Поиск в теме:



С нами с 21.09.02
Сообщения: 2347
Рейтинг: 1383

Ссылка на сообщениеДобавлено: 03/01/08 в 14:12       Ответить с цитатойцитата 

есть сайт.
с него на внутренние страницы стоят ссылки с rel="nofollow"
других ссылок нет
robots.txt такого типа
Код:
User-agent: *
Disallow:  /gallery/
Disallow:  /counter/

и все эти страницы в индексе почему-то. icon_sad.gif

0
 

Модератор
Be afraid! Be very afraid!

С нами с 14.10.02
Сообщения: 5762

Ссылка на сообщениеДобавлено: 03/01/08 в 15:30       Ответить с цитатойцитата 

Сделай (если еще нет) акк в Google Webmaster Tools - там есть чекалка для роботс.txt для конкретных урлов + тулза для удаления проиндексированных результатов.

Чтобы не индексировало, на внутренних страницах надо писать noindex.

Master-X

5
 



С нами с 21.09.02
Сообщения: 2347
Рейтинг: 1383

Ссылка на сообщениеДобавлено: 04/01/08 в 15:58       Ответить с цитатойцитата 


в общем ладно, ясно. плевать ему на robots.txt

0
 

Модератор
Be afraid! Be very afraid!

С нами с 14.10.02
Сообщения: 5762

Ссылка на сообщениеДобавлено: 04/01/08 в 17:24       Ответить с цитатойцитата 

http://www.google.com/support/webmasters/bin/answer.py?answer=35303&hl=en

Цитата:
While we won't crawl or index the content of pages blocked by robots.txt, we may still crawl and index the URLs if we find them on other pages on the web. As a result, the URL of the page and, potentially, other publicly available information such as anchor text in links to the site, or the title from the Open Directory Project (www.dmoz.org)can appear in Google search results. However, no content from your pages will be crawled, indexed, or displayed.

To entirely prevent a page from being added to the Google index even if other sites link to it, use a noindex meta tag, and ensure that the page does not appear in robots.txt. When Googlebot crawls the page, it will recognize the noindex meta tag and drop the URL from the index.



Возможно у тебя эта ситуация. Чтобы узнать точнее, сделай акк в GWT и протесть там.

Master-X

0
 

www.phpdevs.com

С нами с 24.10.02
Сообщения: 16633
Рейтинг: 16105


Передовик Master-X (01.09.2005) Передовик Master-X (16.09.2005) Передовик Master-X (01.10.2005) Передовик Master-X (16.08.2006) Передовик Master-X (16.10.2006) Ветеран трепа Master-X ()
Ссылка на сообщениеДобавлено: 07/01/08 в 13:21       Ответить с цитатойцитата 

гугл уже вообще давно работает по своим внутренним правилам и плюет на общепризнанные.

Пишу на php/mysql/django за вменяемые деньги.
Обращаться в личку.

0
 
Новая тема Новая тема   

Текстовая реклама в форме ответа
Заголовок и до четырех строчек текста
Длина текста до 350 символов
Купить рекламу в этом месте!


Перейти:  



Спонсор раздела Стань спонсором этого раздела!

Реклама на сайте Advertise with us

Опросы

Рецепт новогоднего блюда 2022



Обсудите на форуме обсудить (11)
все опросы »