Реклама на сайте Advertise with us

По robots.txt помощь

Расширенный поиск по форуму
 
Новая тема Новая тема   
Автор
Поиск в теме:

Z

С нами с 15.05.05
Сообщения: 55054
Рейтинг: 7770


Передовик Master-X (16.10.2007) Передовик Master-X (16.12.2010) Передовик Master-X (01.02.2015) Передовик Master-X (16.05.2015) Передовик Master-X (01.06.2015) Ветеран трепа Master-X (16.06.2015)
Ссылка на сообщениеДобавлено: 19/11/06 в 16:48       Ответить с цитатойцитата 

есть блоги
структура линков следуящая

http://domen.com/2006/11/17/name-post/

и есть к ним RSS фид

http://domen.com/2006/11/17/name-post/feed/

как правильно прописать правила в robots.txt, чтобы пауки не индексировали Rss-фиды

http://domen.com/2006/11/17/name-post/feed/

andreich дарит вам акцию до 1 000р
КАТАЛОГ ПАРТНЕРОК | Бурж Гембла – тут! | RU Датинг на подписках

0
 

$$$$$$$$$$

С нами с 05.05.05
Сообщения: 1014
Рейтинг: 479

Ссылка на сообщениеДобавлено: 19/11/06 в 16:53       Ответить с цитатойцитата 

0
 

Z

С нами с 15.05.05
Сообщения: 55054
Рейтинг: 7770


Передовик Master-X (16.10.2007) Передовик Master-X (16.12.2010) Передовик Master-X (01.02.2015) Передовик Master-X (16.05.2015) Передовик Master-X (01.06.2015) Ветеран трепа Master-X (16.06.2015)
Ссылка на сообщениеДобавлено: 19/11/06 в 23:02       Ответить с цитатойцитата 

Код:
User-Agent: *
Disallow: /feed/


вот так будет правильно ?

andreich дарит вам акцию до 1 000р
КАТАЛОГ ПАРТНЕРОК | Бурж Гембла – тут! | RU Датинг на подписках

0
 



С нами с 22.06.06
Сообщения: 155
Рейтинг: 157

Ссылка на сообщениеДобавлено: 21/11/06 в 11:20       Ответить с цитатойцитата 

не, так ты закрыл
http://domain.com/feed/

у тебя фид - это директория?
тогда вот так вроде:

User-Agent: *
Disallow: */feed/

DVD-NETWORK НОВОГО ПОКОЛЕНИЯ
Уникальная система конвертации поискового адалт траффика. ICQ 237295387

0
 



С нами с 28.09.06
Сообщения: 124
Рейтинг: 55

Ссылка на сообщениеДобавлено: 21/11/06 в 14:10       Ответить с цитатойцитата 

Вы уже видели модель вечного двигателя?

0
 
Новая тема Новая тема   

Текстовая реклама в форме ответа
Заголовок и до четырех строчек текста
Длина текста до 350 символов
Купить рекламу в этом месте!


Перейти:  



Спонсор раздела Стань спонсором этого раздела!

Реклама на сайте Advertise with us

Опросы

Рецепт новогоднего блюда 2022



Обсудите на форуме обсудить (11)
все опросы »