Как скачать большое количество URL за раз wget`ом?

wget -f file_with_url.list

Запросить конкретный vhost с сервера

wget -O- --no-check-certificate --header="Host: yyyy.xxx.ru" https://xx.xx.xx.xx

Как получить http заголовки (хидеры, headers) от сервера?

Вот так:

wget domain.com --server-response -O/dev/null

Как заставить wget сохранять файл не в текущую, а в заданную папку?

Для этого у wget есть ключ -P:

wget -P /tmp/target/folder http://download.openvz.org/template/precreated/debian-5.0-x86_64.tar.gz

Делаем бесконечный винт для wget :)

Вот так делаем бесконечный винт и скачиваем весь интернет:

wget -O/dev/null http://mirror.yandex.ru/centos/5.3/isos/x86_64/CentOS-5.3-x86_64-bin-DVD.iso

Как ограничить скорость закачки wget`у ?

А вот так:

wget --limit-rate=1M http://mirror.yandex.ru/centos/5.3/isos/x86_64/CentOS-5.3-x86_64-bin-2of7.iso