Профессиональное использование wget

Для хранение зеркала страницы (или папки FTP), то используйте --mirror (-m), что заменяет -r -l inf -N. Вы можете добавить Wget в crontab с запросом на проверку обновлений каждое воскресенье:

            crontab
            0 0 * * 0 wget --mirror http://www.gnu.org/ -o /home/me/weeklog




    Вы также хотите, чтобы ссылки конвертировались в локальные. Но после прочтения этого руководства, вы знаете, что при этом не будет работать сравнение по времени. Укажите Wget оставлять резервные копии HTML файлов перед конвертацией. Команда:

            wget --mirror --convert-links --backup-converted  \
                 http://www.gnu.org/ -o /home/me/weeklog




    А если не работает локальный просмотр файлов HTML с расширением, отличным от .html, например index.cgi, то нужно передать команду на переименование всех таких файлов (content-type = text/html) в имя.html.

            wget --mirror --convert-links --backup-converted \
                 --html-extension -o /home/me/weeklog        \
                 http://www.gnu.org/


    С краткими аналогами команд:

            wget -m -k -K -E http://www.gnu.org/ -o /home/me/weeklog

plants