MSN не слушается файлов robots.txt? Или?
Ветка на Search Engine Roundtable Forums показывает, как MSN не совсем правильно реагирует на правила файла robots.txt, которые Google установил для api.google.com. Если вы посмотрите Гугловский файл robots.txt на
http://api.google.com/robots.txt , то увидите стандартную команду запрета индексирования . Однако если вы зайдете на MSN Search и зададите поиск по сайту site:api.google.com, то MSN выдаст 14 результатов.
Можно заметить, также, что эти результаты неполные, они содержат только данные по URL. Распространенная ситуация, когда поисковые системы просматривают только URL, но не контент. Думаю, это следствие интерпретации команды disallow. Обратитесь к Google, и вы увидите, что они индексируют URL
site:api.google.com, и
Yahoo! Search ведет себя подобным образом.
Обсуждение на
Search Engine Round Table Forums
Как Google может наказать сайт за продажу ссылок?
Один из самых эффективных способов получить ранкинги в Google – обеспечить себе достаточное количество ссылок со стороны почтенных и релевантных вебсайтов. Чтобы отбить у владельцев сайтов охоту злоупотреблять этим правилом, Google начал намекать, что он будет обесценивать ссылки, которые были куплены, а не честно заработаны. Матт Катс написал в своем
блоге в сентябре 2005 г. довольно внятный (по крайней мере, по сравнению с остальными уклончивыми определениями Google) пост. С тех пор, народ без устали размышляет, каким образом Google собирается обесценивать ссылки, если они явно не помечены в качестве купленных. В большинстве случаев, саркастические замечания выглядели вполне убедительно – весьма сложно определить проплаченные ссылки, особенно текстовые анкор-ссылки со страниц с релевантным контентом.
В постинге на
Google Blogscoped, Philipp Lenssen указал, что
Вы можете купить входящую ссылку со страницы W3C c PR 9, всего за 1000$ в год.
Отразятся ли подобные действия на «весе» сайта с репутацией и авторитетностью W3c.org (PR 10)? Если верить комментариям, следующим за упомянутым постом, - обязательно.
Сам Матт Катс указывает, что
Слишком много сил нужно потратить на поддержку сайта, и если вы планируете использовать его только для размещения PR-ссылок, то результат не всегда будет соответствовать вашим ожиданиям
Катс возвращается к теме позднее, утверждая, что он не пытался шифровать свои ответы (наверное, это просто сила привычки). Он выделяет комментарий другого участника, который более внятно заявил:
Сайты, продающие ссылки, могут потерять свою способность передавать репутацию (то есть, PageRank и анкор-текст)
Весьма интересный топик. Google, посредством полу-официальных заявлений Матта, дал понять, что он может воздействовать на вес ссылок отдельных страниц, расположенных на сайтах с высокой степенью доверия.
Обсуждение на
Search Engine Watch Blog
