Есть куча URL которые нужно загрузить при помощи wget, нашел несколько вариантов:
wget url1 url2 url3
Или создать файл со ссылками, где одна строка, одна ссылка и загрузить wget’ом весь список:
wget -i list.txt
Если к примеру необходимо сохранить иерархию папок, как на Web сервере, то можно использовать wget, к примеру так:
wget -E -H -k -K -p -e robots=off -P /download/ -i /download/list.txt
Если к примеру на сервере есть файлы с версиями, то их можно загрузить так:
wget https://server/myfile-3.2.{1..15}.rpm
Или к примеру загрузить файлы с определенным расширением:
wget -r -l1 -A .rpm https://server