wget -H -r -nv --level=1 -k -p -erobots=off -np -N --exclude-domains=del.icio.us,doubleclick.net --exclude-directories=
Команда wget используется для скачивания файлов и веб-страниц с интернета. В данном случае, команда скачивает веб-ссылки с опцией -r, которая выполняет рекурсивное скачивание, т.е. загружает все дочерние страницы и файлы. Опция -H позволяет сохранять структуру директорий на сервере. Опция -nv выводит минимум информации о процессе загрузки. —level=1 задает глубину рекурсии на уровень. Опция -k преобразует ссылки на прямые локальные ссылки, позволяя просматривать сохраненные страницы локально. -p сохраняет все необходимые файлы для корректного отображения страницы вместе с ним. -erobots=off отключает обработку файла robots.txt и позволяет скачивать веб-страницы, запрещенные для индексации. -np не позволяет wget переходить на родительские директории. -N позволяет загружать только обновленные файлы. —exclude-domains=del.icio.us,doubleclick.net исключает указанные домены из загрузки. —exclude-directories= позволяет исключить указанные директории. Альтернативой wget может быть использование других инструментов загрузки, таких как curl или aria2. В этой команде не передаются аргументы.