good bucks add wings!
С нами с 07.05.05
Сообщения: 2156
Рейтинг: 1409
|
 Добавлено: 24/04/14 в 12:17 |
Добрый день, подскажите как правильно запретить индексацию субдоменов.
Если на осн. домене site.com ссылки ведут на 1sub.site.com 2sub.site.com 3sub.site.com и так далее.
Это в robots.txt если не ошибаюсь надо команду Disallow прописывать?
|
|
|
|
| |
Z
С нами с 15.05.05
Сообщения: 54463
Рейтинг: 7770
 
|
| Добавлено: 24/04/14 в 21:36 |
| vitamin писал: | | Это в robots.txt если не ошибаюсь надо команду Disallow прописывать? |
поидее да, но как показывает практика google ложит большой болт на дериктивы robots.txt, там вроде можно в вебмастерсе както это дело настроить (но тем кто там делал интерфейс оторвалбы руки), для yandex тоже спорный вопрос, вроде как еще соображает, но тут не так много было опытов
|
|
|
|
| |
С нами с 16.03.07
Сообщения: 2696
Рейтинг: 3147
|
| Добавлено: 24/04/14 в 23:16 |
andreich, что сложного в google webmaster tools? в профиле сайта, пункт Сканирование -> Заблокированные URL написано
| Цитата: | Заблокированные URL
Если вы хотите запретить Google или другим поисковым системам доступ к определенному контенту на вашем сайте, укажите в файле robots.txt, как поисковым системам следует сканировать содержание вашего сайта.
Убедитесь, что файл robots.txt работает правильно. (Изменения, внесенные в содержание файла robots.txt ниже, не будут сохранены.) |
и далее содержание роботс.тхт твоего сайта
|
|
|
|
| |
😈😈😈
С нами с 17.08.05
Сообщения: 3966
Рейтинг: 5534
|
| Добавлено: 25/04/14 в 01:24 |
| andreich писал: | | поидее да, но как показывает практика google ложит большой болт на дериктивы robots.txt, там вроде можно в вебмастерсе както это дело настроить (но тем кто там делал интерфейс оторвалбы руки), для yandex тоже спорный вопрос, вроде как еще соображает, но тут не так много было опытов |
все работает .
в результате в серпе примерно следующее:
domain.com/
A description for this result is not available because of this site's robots.txt – learn more.
domain.com/
A description for this result is not available because of this site's robots.txt – learn more.
|
|
|
|
Diablo.Click - T1 ским трафик напрямую с тубов от 0.5$ за кил
|
0
|
|
| |
С нами с 27.03.14
Сообщения: 201
Рейтинг: 169
|
| Добавлено: 25/04/14 в 15:56 |
| Diablo II писал: | все работает .
в результате в серпе примерно следующее:
domain.com/
A description for this result is not available because of this site's robots.txt – learn more.
domain.com/
A description for this result is not available because of this site's robots.txt – learn more. |
Это по запросу domain.com? А вообще да, robots это же рекомендации, а не способ реального управления ботом 
|
|
|
|
Perestroika Affiliates - легендарная гемблинг-партнерка №1.
|
0
|
|
| |
Текстовая реклама в форме ответа
Заголовок и до четырех строчек текста
Длина текста до 350 символов
Купить рекламу в этом месте! |
