One of the most important aspects of mirroring information from the Internet is updating your archives. Downloading the whole archive again and again, just to replace a few changed files is expensive, both in terms of wasted bandwidth and money, and the time to do the update. This is why […]
WGET
By default, Wget is very simple to invoke. The basic syntax is: По умолчанию Wget очень просто вызвать. Основной синтаксис: wget [option]… [URL]… Wget will simply download all the URLs specified on the command line. URL is a Uniform Resource Locator, as defined below. Wget просто загрузит все URL-адреса, […]
‘—bind-address=ADDRESS’ When making client TCP/IP connections, bind to ADDRESS on the local machine. ADDRESS may be specified as a hostname or IP address. This option can be useful if your machine is bound to multiple IPs. При создании клиентских соединений TCP / IP привязывайтесь к ADDRESS на локальном компьютере. […]
Синтаксис -T 23 (если файл не сможет скачаться, то WGET подождёт 23 секунды и продолжит дальше) Как пропустить загрузку файла в WGET? —timeout=14 (если файл скачивается, то WGET подождёт 14 секунд и продолжить скачивать другие файлы) Описание команды Установите тайм-аут сети на секунды. Это эквивалентно заданию «-dns-timeout», «-connect-timeout» и «-read-timeout» одновременно. […]
При вызове с этой опцией Wget будет вести себя как веб-паук, а это означает, что он не будет загружать страницы, просто проверит, что они есть. Например, вы можете использовать Wget для проверки своих закладок: wget —spider —force-html -i bookmarks.html Эта функция требует гораздо больше работы для Wget, чтобы приблизиться к […]
Продолжайте получать частично загруженный файл. Это полезно, когда вы хотите завершить загрузку, начатую предыдущим экземпляром Wget, или другой программой. Например: wget -c ftp://sunsite.doc.ic.ac.uk/ls-lR.Z Если в текущем каталоге есть файл с именем ls-lR.Z, Wget предположит, что это первая часть удаленного файла, и попросит сервер продолжить извлечение со смещения, равного длине локального […]
Если файл загружается более одного раза в одном каталоге, поведение Wget зависит от нескольких параметров, включая «-nc». В некоторых случаях локальный файл будет сбрасываться или перезаписываться при повторной загрузке. В других случаях он будет сохранен. При запуске Wget без ‘-N’, ‘-nc’, ‘-r’ или ‘-p’, загрузка одного и того же файла […]
Wget — это открыто распространяемая утилита для загрузки файлов из интернет. Она поддерживает протоколы HTTP, HTTPS, и FTP, загрузку с серверов прокси по протоколу HTTP. Wget – это свободная неинтерактивная консольная программа для загрузки файлов по сети. Это означает, что после её запуска пользователь может повлиять на её работу только […]