Что такое WGET?

Что такое WGET?

Wget — это открыто распространяемая утилита для загрузки файлов из интернет. Она поддерживает протоколы HTTP, HTTPS, и FTP, загрузку с серверов прокси по протоколу HTTP.

Wget – это свободная неинтерактивная консольная программа для загрузки файлов по сети. Это означает, что после её запуска пользователь может повлиять на её работу только с помощью средств управления процессами операционной системы.

Как правило, для этого используются сочетания клавиш Ctrl+C при необходимости прерывания работы программы и Ctrl+Z для помещения текущего задания в фон.

 

Вызов WGET — основные параметры.

Обзор WGET

GNU Wget is a free utility for non-interactive download of files from the Web. It supports HTTP, HTTPS, and FTP protocols, as well as retrieval through HTTP proxies.

GNU Wget — бесплатная утилита для неинтерактивной загрузки файлов из Интернета. Он поддерживает протоколы HTTP, HTTPS и FTP, а также поиск через HTTP-прокси.

 

This chapter is a partial overview of Wget’s features.

Эта глава представляет собой частичный обзор функций Wget.

 

Wget is non-interactive, meaning that it can work in the background, while the user is not logged on. This allows you to start a retrieval and disconnect from the system, letting Wget finish the work. By contrast, most of the Web browsers require constant user’s presence, which can be a great hindrance when transferring a lot of data.

Wget не является интерактивным, что означает, что он может работать в фоновом режиме, в то время как пользователь не входит в систему. Это позволяет начать поиск и отключить систему, позволяя Wget завершить работу. Напротив, большинство веб-браузеров требуют постоянного присутствия пользователя, что может быть большим препятствием при передаче большого количества данных.

 

Wget can follow links in HTML, XHTML, and CSS pages, to create local versions of remote web sites, fully recreating the directory structure of the original site. This is sometimes referred to as “recursive downloading.” While doing that, Wget respects the Robot Exclusion Standard (/robots.txt). Wget can be instructed to convert the links in downloaded files to point at the local files, for offline viewing.

Wget может следить за ссылками на страницах HTML, XHTML и CSS, создавать локальные версии удаленных веб-сайтов, полностью воссоздавая структуру каталогов исходного сайта. Это иногда называют «рекурсивной загрузкой». При этом Wget уважает стандарт исключения роботов (/robots.txt). Wget может быть проинструктирован преобразовать ссылки в загруженных файлах, чтобы указать на локальные файлы, для автономного просмотра.

 

File name wildcard matching and recursive mirroring of directories are available when retrieving via FTP. Wget can read the time-stamp information given by both HTTP and FTP servers, and store it locally. Thus Wget can see if the remote file has changed since last retrieval, and automatically retrieve the new version if it has. This makes Wget suitable for mirroring of FTP sites, as well as home pages.

Подстановочные символы имени файла и рекурсивное зеркалирование каталогов доступны при получении через FTP. Wget может считывать информацию о отметках времени, предоставляемую как HTTP, так и FTP-серверами, и хранить их локально. Таким образом, Wget может видеть, изменился ли удаленный файл с момента последнего извлечения, и автоматически получить новую версию, если она есть. Это делает Wget подходящим для зеркалирования FTP-сайтов, а также домашних страниц.

 

Wget has been designed for robustness over slow or unstable network connections; if a download fails due to a network problem, it will keep retrying until the whole file has been retrieved. If the server supports regetting, it will instruct the server to continue the download from where it left off.

Wget был разработан для обеспечения надежности при медленных или нестабильных сетевых подключениях; если загрузка завершилась неудачно из-за проблемы с сетью, она будет продолжать повторять попытку до тех пор, пока весь файл не будет восстановлен. Если сервер поддерживает ретрансляцию, он поручит серверу продолжить загрузку с того места, где он был остановлен.

 

Wget supports proxy servers, which can lighten the network load, speed up retrieval and provide access behind firewalls. Wget uses the passive FTP downloading by default, active FTP being an option.

Wget поддерживает прокси-серверы, которые могут облегчить загрузку сети, ускорить поиск и обеспечить доступ к брандмауэрам. Wget использует пассивную загрузку FTP по умолчанию, причем активным FTP является опция.

 

Wget supports IP version 6, the next generation of IP. IPv6 is autodetected at compile-time, and can be disabled at either build or run time. Binaries built with IPv6 support work well in both IPv4-only and dual family environments.

Wget поддерживает IP-версию 6, следующее поколение IP-адресов. IPv6 автоматически определяется во время компиляции и может быть отключен либо во время сборки, либо во время выполнения. Бинарники, созданные с поддержкой IPv6, хорошо работают как в среде IPv4, так и в двух семейных средах.

 

Built-in features offer mechanisms to tune which links you wish to follow (see Following Links).

Встроенные функции предлагают механизмы для настройки ссылок, которые вы хотите отслеживать (см. Следующие ссылки).

 

The progress of individual downloads is traced using a progress gauge. Interactive downloads are tracked using a “thermometer”-style gauge, whereas non-interactive ones are traced with dots, each dot representing a fixed amount of data received (1KB by default). Either gauge can be customized to your preferences.

Прогресс отдельных загрузок отслеживается с использованием индикатора прогресса. Интерактивные загрузки отслеживаются с использованием «термометра» -типового калибра, тогда как неинтерактивные прослеживаются с точками, каждая точка представляет фиксированный объем данных (по умолчанию 1 КБ). Любой калибр может быть настроен на ваши предпочтения.

 

Most of the features are fully configurable, either through command line options, or via the initialization file .wgetrc (see Startup File). Wget allows you to define global startup files (/usr/local/etc/wgetrc by default) for site settings. You can also specify the location of a startup file with the –config option.

Большинство функций полностью настраиваются либо через параметры командной строки, либо через файл инициализации .wgetrc (см. Файл автозагрузки). Wget позволяет вам определять глобальные файлы запуска (/ usr / local / etc / wgetrc по умолчанию) для настроек сайта. Вы также можете указать расположение файла запуска с помощью опции -config.

 

Finally, GNU Wget is free software. This means that everyone may use it, redistribute it and/or modify it under the terms of the GNU General Public License, as published by the Free Software Foundation (see the file COPYING that came with GNU Wget, for details).

Наконец, GNU Wget — бесплатное программное обеспечение. Это означает, что каждый может использовать его, распространять и / или изменять его в соответствии с общедоступной лицензией GNU, опубликованной Фондом свободного программного обеспечения (подробнее см. Файл COPYING, поставляемый с GNU Wget).