Для проверки ссылок

Подскажите прогу или скрипт. Чтоб задать список ссылок и выдало ответы сервера по каждой ссылке. Ну и сохранить чтоб можно это все было.

а какие ответы то?

200
404
и т.п.

http://pages.alexa.com/associates/sitereport.html

Здесь список ссылок не задашь, но проверяет все на домене. Репорт на мыло.

#!/bin/bash
cd pages
print "`pwd`"
wget -s -t 5 -i ../urls.txt -a ../log.txt 2>&1

запускается на серваке через консоль.
сохраняет все файлы в папке /pages/ и лог файл log.txt

Можно отключить сохранение хтмл-ок и анализировать только лог файл.

Eugenum писал:

http://pages.alexa.com/associates/sitereport.html Здесь список ссылок не задашь, но проверяет все на домене. Репорт на мыло.

Это не годится - "ERROR: Your email address must have the same domain as the site."

maul писал:

#!/bin/bash cd pages print "`pwd`" wget -s -t 5 -i ../urls.txt -a ../log.txt 2>&1

не волоку в этом, на ПХП можно что-нибудь ?

_http://www.webtoolbench.com/LinkChecker/

awm_mark:
если шариш в php то можеш посылать head запрос по ссылке

<?php
$head='';
$fp = fsockopen ("www.master-x.com", 80, $errno, $errstr, 30);
if (!$fp)
{
echo "СЕРВЕР НЕ ПАШЕТ";
}
else
{

fputs ($fp, "HEAD /forum HTTP/1.0\r\nHost: master-x.com\r\n\r\n");

while (!feof($fp))
{
$head.=fgets ($fp,128);
}

fclose ($fp);
}
// В ПЕРМЕНОЙ $head содержится ОТВЕТ СЕРВЕРА
?>

Можернезировать его под твои нужды 10 минут...
с $head регулярными выражениеями выдираеш 404,200 итд..

awm_mark писал:

Это не годится - "ERROR: Your email address must have the same domain as the site."

Естественно. Не дадут же тебе любой сайт сканить. Для своих доменов мыло - не проблема.

да вот именно, что не сайт надо сканить, проверять валидность урлов

http://articles.org.ru/cfaq/index.php?qid=91&catid=14