Закачать 5к тумб с сервера на сервер wget, php ..

Подскажите оптимальный вариант для переодического скачивания на сервер около 5к тумб, при наличии списка их урлов на другом сервере..?
Желательно какое-то решение, чтоб с локали скормить файл php скрипту и он без перенагрузки сервера закачал..

можно через shell все это организовать с использованием wget.

Код:

#!bin/sh wget -i file.txt

как то так, в шеле не силен.

Последний раз редактировалось: _s_[sov] (10/12/09 в 18:22), всего редактировалось 3 раз(а)

тумбы - тар - закачка - тар - тумбы

_s_[sov] писал:

можно через shell все это организовать с использованием wget. Код: #!bin/sh wget -i file.txt как то так, в шеле не силен.

Что-то подобное делал.
Что принесёт в данном случае -i параметр?
Продолжится ли работа, если закрыть шелл?

Pentarh писал:

тумбы - тар - закачка - тар - тумбы

дело в том, что доступ к серверу с тумбами не дают.
(споновский хост с тумбами...)
+ хотелось бы управлять этим процессом с апликухи на локали.
тоесть создать несложный php скрипт, которому софтина виндовая будет скармливать урлы тумб...

опция -i это закачка списка урл из файла,
чтобы работа продолжалась после закрытия шелла запускать скрипт нужно в скрине.

да, в скрине достаточно добавить & после file.txt если мало ли не знаешь

А можно полностью увидеть команду в скрине?
сработает это в пхп echo `wget ... ?

rsync

begemot писал:

rsync

ну жеж нету у человека доступа к серваку...
чтобы не париться, легче всего php_curl качать в несколько потоков, тогда и с запуском шелл скриптов из-под пхп не будет проблем...

alex.raven: если уж многопоточность использовать то лучше перлом качать файлики

5к файлов лучше всего будет запаковать в tar без сжатия на сервере где они изначально лежат (если есть такая возможность)
tar cpf thumbs.tar t1.jpg t2.jpg ...
скачать этот tar и распаковать

иначе wget -k -i urls.txt