Wget куда сохраняет по умолчанию

Wget. Качаем файлы и целые сайты из интернета.

Всем доброго времени суток. Невозможно представить себе работу с компьютером или мобильным устройством без возможности скачивания из интернета самого разного контента. Книги и музыка, Фильмы и софт, Картинки и многое-многое другое. Скорее трудно представить, Чего бы не скачивали пользователи на свои устройства. В большинстве случаев скачивание происходит напрямую, Через браузер, При этом достаточно лишь кликнуть на ссылку. Но такой способ не всегда удобен и эффективен. Современные браузеры тяжеловесны, ресурсоёмки и защищены сверх всякой меры. Сомнительная ссылка, Ненадёжная с точки зрения чьего-то, Но совсем не вашего мнения, Может просто не открыться, Или скачивание будет заблокировано системой защиты браузера. Для облегчения возможности скачивания существует немало самых разнообразных программ: Торрентклиенты, Мененджеры загрузок,Интегрирующиеся в браузеры, Качалки видео и музыки из соцсетей, А также минималистичные и в то же время функциональные консольные утилиты. Об одной из таких утилит и пойдёт речь.

wget- Кроссплатформенная консольная утилита для скачивания из интернета как отдельных файлов, Так и сайтов целиком, обладающая немалым функционалом. В большинстве дистрибутивов wget присутствует по умолчанию, Но в случае отсутствия её можно легко установить при помощи стандартной команды. Немалым преимуществом данной утилиты является поддержка http, https и ftp.

скачивание отдельных файлов.

Для скачивания файла при помощи wget скопируем в браузере на него ссылку и выполним в терминале: wget и вставим через пробел скопированную ссылку. После нажатия клавиши enter мы услышим сообщения о соединении с сервером и о ходе загрузки, либо же об ошибке или невозможности скачивания. Наиболее распространённым примером является ошибка 404, Означающая, Что файл не найден.

Если нужна авторизация.

Бывают случаи, Когда для скачивания контента нужна авторизация на сайте. Во wget реализована возможность добавления логина и пароля, Используя параметры —user и —passwort. В этом случае команда принимает вид: wget —user=логин —password=пароль ссылка на скачивание. Например: wget —user=qwerty —password=123456 ссылка на скачивание .

Если проблемы с сертификатом безопасности.

Бывает так, Что загрузка файла блокируется из-за ошибки сертификата безопасности, Допустим таковой просрочен. wget позволяет обходить проверку сертификата путём добавления параметра —no-check-certificate . Команда принимает следующий вид: wget —no-check-certificate ссылка на скачивание.

Куда качать будем?

По умолчанию wget скачивает файлы в корень домашней папки. но функционал утилиты позволяет указать место, куда будет происходить загрузка. используем для этого параметр -P и путь к выбранной папке. Например: wget -P ~/Загрузки ссылка на скачивание.

Если загрузка оборвалась.

Мигнул свет, Оборвалось соединение с сетью, Подвис компьютер- И вот загрузка прервалась, А скачано уже больше половины. Качать сначала? Совсем не обязательно, потому что есть замечательный параметр -c . просто вводим команду: wget -c ссылка на скачивание . Если применялись другие параметры, Их нужно ввести снова.

Примечание.

При пользовании утилитой будьте крайне внимательны при вводе параметров. Некоторые ключи обозначаются одной и той же буквой, Отличаясь лишь регистром.

Скачивание сайтов.

Бывают ситуации, Когда нужно скачать сайт целиком, Либо его часть для сохранениялокальной копии, Переноса, Или просмотра без подключения к интернету. Рассмотрим параметры, для этого применяемые. -r Рекурсивный переход по ссылкам. -k Приведение всех ссылок к относительным для локального просмотра. -p Скачивание всех вспомогательных файлов для корректного просмотра страниц: Картинок, Таблиц css, И т.п. -l Глубина уровней вложенности, До которой нужно скачивать. Допустим, -l 5 . Если нужно скачать абсолютно весь сайт, Пишем значение -l 0 . -E Добавляет к скачанным файлам расширение html. -nc Запрещает перезаписывать уже существующие файлы. -e robots=off Заставляет игнорировать инструкции файла robots.txt. Таким образом простейший сценарий скачивания сайта будет выглядить примерно так: wget -r -k -p -E -l 0 ссылка на сайт . Есть ещё несколько дополнительных параметров, могущих пригодиться в частных случаях: -nd не создавать структуру папок сайта, а скачивать все файлы в одну папку. если встречаются файлы с одинаковыми именами, к каждому имени будет добавляться номер. -np Запрещает подниматься выше уровня начала скачивания прирекурсивном переходе по ссылкам. бывает полезен при скачивании нужного раздела или топика на форуме. —restrict-file-names=nocontrol Нужен для скачивания сайтов с русскими буквами в именах, Допустим находящихся в доменной зоне рф .

Заключение.

Это далеко не полный список возможностей этой маленькой, Но мощной утилиты. Надеюсь что статья вам понравилась, А главное была полезной.

timeweb.com

Этот домен сейчас зарегистрирован, но срок его регистрации истек и он скоро освободится. Вы сможете его купить, если текущий администратор его не продлит. Стоимость регистрации такого домена — 179 ₽.

Разместите свой сайт в Timeweb

Timeweb — компания, которая размещает проекты клиентов в Интернете, регистрирует адреса сайтов и предоставляет аренду виртуальных и физических серверов. Разместите свой сайт в Сети — расскажите миру о себе!

Виртуальный хостинг

Быстрая загрузка вашего сайта, бесплатное доменное имя, SSL-сертификат и почта. Первоклассная круглосуточная поддержка.

от 196 руб руб. / мес

VDS

Производительность и масштабируемые ресурсы для вашего проекта. Персональный сервер по цене виртуального хостинга.

от 177 руб. / мес

Выделенные серверы

Команда wget Linux

Работая в консоли, нам достаточно часто приходится взаимодействовать с сетью, например скачивать файлы или целые интернет страницы. Если интернет страницы мы скачиваем довольно редко, то с файлами дело обстоит совсем по другому. Это могут быть различные скрипты, установочные пакеты, программы, ключи, списки пакетов и многое другое. Скачать файл в консоли Linux можно с помощью утилиты wget. Ее мы и рассмотрим в этой статье.

Это очень мощная утилита, способная работать по протоколам HTTP, HTTPS и FTP. Кроме того поддерживается работа через прокси. Команда wget linux, может выполнять загрузку файлов даже в фоновом режиме — без участия пользователя, в отличии от большинства веб браузеров.

Кроме скачивания файлов, есть возможность сохранять веб страницы или даже целые веб-сайты, благодаря функции открытия ссылок на страницах. Такую возможность еще называют рекурсивной загрузкой. Это все мы и рассмотрим в сегодняшней статье, но начнем, как всегда, с синтаксиса и основных опций утилиты.

Table of Contents

Синтаксис Wget
Опции
Использование wget Linux
- 1. Загрузка файла
- 2. Сохранить файл с другим именем
- 3. Скачать несколько файлов
- 4. Взять URL из файла
- 5. Продолжить загрузку
- 6. Загрузка файлов в фоне
- 7. Ограничение скорости загрузки
- 8. Подключение по логину и паролю
- 9. Загрузить и выполнить
- 10. Сохранить файл в папке
- 11. Передать информацию о браузере
- 12. Количество попыток загрузки
- 13. Квота загрузки
- 14. Скачать сайт
Синтаксис Wget

Команда wget linux имеет очень простой синтаксис:

$ wget опции адрес_ссылки

Можно указать не один URL для загрузки, а сразу несколько. Опции указывать не обязательно, но в большинстве случаев они используются для настройки параметров загрузки.

Опции

Синтаксис опций очень свободный. У каждой опции, как правило есть как длинное, так и короткое имя. Их можно записывать как до URL, так и после. Между опцией и ее значением не обязательно ставить пробел, например вы можете написать -o log или -olog. Эти значения эквивалентны. Также если у опций нет параметров, не обязательно начинать каждую с дефиса, можно записать их все вместе: -drc и -d -r -c. Эти параметры wget тоже эквивалентны.

А теперь давайте перейдем к списку опций. У wget слишком много опций, мы разберем только основные.
- -V(—version) — вывести версию программы
- -h (—help) — вывести справку
- -b(—background) — работать в фоновом режиме
- -oфайл(—out-file) — указать лог файл
- -d(—debug) — включить режим отладки
- -v (—verbose) — выводить максимум информации о работе утилиты
- -q (—quiet) — выводить минимум информации о работе
- -iфайл (—input-file) — прочитать URL из файла
- —force-html — читать файл указанный в предыдущем параметре как html
- -t (—tries) — количество попыток подключения к серверу
- -O файл(—output-document) — файл в который будут сохранены полученные данные
- -с (—continue) — продолжить ранее прерванную загрузку
- -S (—server-response) — вывести ответ сервера
- —spider — проверить работоспособность URL
- -T время (—timeout) — таймаут подключения к серверу
- —limit-rate — ограничить скорость загрузки
- -w (—wait) — интервал между запросами
- -Q(—quota) — максимальный размер загрузки
- -4 (—inet4only) — использовать протокол ipv4
- -6 (—inet6only) — использовать протокол ipv6
- -U (—user-agent)— строка USER AGENT отправляемая серверу
- -r (—recursive)- рекурсивная работа утилиты
- -l (—level) — глубина при рекурсивном сканировании
- -k(—convert-links) — конвертировать ссылки в локальные при загрузке страниц
- -P (—directory-prefix) — каталог, в который будут загружаться файлы
- -m(—mirror) — скачать сайт на локальную машину
- -p(—page-requisites) — во время загрузки сайта скачивать все необходимые ресурсы
Кончено это не все ключи wget, но здесь и так слишком много теории, теперь давайте перейдем к практике. Примеры wget намного интереснее.

Использование wget Linux

Команда wget linux, обычно поставляется по умолчанию в большинстве дистрибутивов, но если нет, ее можно очень просто установить. Например установка с помощью yum будет выглядеть следующим образом:

yum -y install wget

А в дистрибутивах основанных на Debian:

sudo apt install wget

Теперь перейдем непосредственно к примерам:

1. Загрузка файла

Команда wget linux скачает один файл и сохранит его в текущей директории. Во время загрузки мы увидим прогресс, размер файла, дату его последнего изменения, а также скорость загрузки:

2. Сохранить файл с другим именем

Опция -О позволяет задать имя сохраняемому файлу, например, скачать файл wget с именем wget.zip:

wget -O wget.zip http://ftp.gnu.org/gnu/wget/wget-1.5.3.tar.gz

3. Скачать несколько файлов

Вы можете скачать несколько файлов одной командой даже по разным протоколам, просто указав их URL:

wget http://ftp.gnu.org/gnu/wget/wget-1.5.3.tar.gz ftp://ftp.gnu.org/gnu/wget/wget-1.10.1.tar.gz.sig

4. Взять URL из файла

Вы можете сохранить несколько URL в файл, а затем загрузить их все, передав файл опции -i. Например создадим файл tmp.txt, со ссылками для загрузки wget, а затем скачаем его:

wget -i /wget/tmp.txt

5. Продолжить загрузку

Утилита wget linux рассчитана на работу в медленных и нестабильных сетях. Поэтому если вы загружали большой файл, и во время загрузки было потеряно соединение, то вы можете скачать файл wget с помощью опции -c.

wget -c http://ftp.gnu.org/gnu/wget/wget-1.5.3.tar.gz

6. Загрузка файлов в фоне

Опция -b заставляет программу работать в фоновом режиме, весь вывод будет записан в лог файл, для настройки лог файла используются специальные ключи wget:

wget -b -o ~/wget.log http://ftp.gnu.org/gnu/wget/wget-1.5.3.tar.gz

7. Ограничение скорости загрузки

Команда wget linux позволяет не только продолжать загрузку файлов, но и ограничивать скорость загрузки. Для этого есть опция —limit-rate. Например ограничим скорость до 100 килобит:

wget —limit-rate=100k ftp://ftp.iinet.net.au/debian/debian-cd/8.4.0/amd64/iso-dvd/debian-8.4.0-amd64-DVD-1.iso

Здесь доступны, как и в других подобных командах индексы для указания скорости — k — килобит, m — мегабит, g — гигабит, и так далее.

8. Подключение по логину и паролю

Некоторые ресурсы требуют аутентификации, для загрузки их файлов. С помощью опций —http-user=username, –http-password=password и —ftp-user=username, —ftp-password=password вы можете задать имя пользователя и пароль для HTTP или FTP ресурсов.

wget —http-user=narad —http-password=password http://mirrors.hns.net.in/centos/6.3/isos/x86_64/CentOS-6.3-x86_64-LiveDVD.iso

wget —ftp-user=narad —ftp-password=password ftp://ftp.iinet.net.au/debian/debian-cd/6.0.5/i386/iso-dvd/debian-6.0.5-i386-DVD-1.iso

9. Загрузить и выполнить

Вы, наверное, уже видели такие команды. wget позволяет сразу же выполнять скачанные скрипты:

wget -O — http://сайт/скрипт.sh | bash

Если опции -O не передать аргументов, то скачанный файл будет выведен в стандартный вывод, затем мы его можем перенаправить интерпретатору bash, как показано выше.

10. Сохранить файл в папке

По умолчанию wget сохраняет файл в текущую папку, но это поведение очень легко изменить с помощью опции -P:

wget -P ~/Downloads/ http://ftp.gnu.org/gnu/wget/wget-1.5.3.tar.gz

11. Передать информацию о браузере

Некоторые сайты фильтруют ботов, но мы можем передать фальшивую информацию о нашем браузере (user-agent) и страницу с которой мы пришли (http-referer).

wget ‐‐refer=http://google.com ‐‐user-agent=”Mozilla/5.0 Firefox/4.0.1″ //losst.pro

12. Количество попыток загрузки

По умолчанию wget пытается повторить загрузку 20 раз, перед тем как завершить работу с ошибкой. Количество раз можно изменить с помощью опции —tries:

wget —tries=75 http://mirror.nbrc.ac.in/centos/7.0.1406/isos/x86_64/CentOS-7.0-1406-x86_64-DVD.iso

13. Квота загрузки

Если вам доступно только ограниченное количество трафика, вы можете указать утилите, какое количество информации можно скачивать, например разрешим скачать файлов из списка только на десять мегабайт:

wget -Q10m -i download-list.txt

Здесь работают те же индексы для указания размера — k, m, g, и т д.

14. Скачать сайт

Wget позволяет не только скачивать одиночные файлы, но и целые сайты, чтобы вы могли их потом просматривать в офлайне. Использование wget, чтобы скачать сайт в linux выглядит вот так:

wget —mirror -p —convert-links -P ./ адрес_сайта

Выводы

Вот и все, теперь использование wget не будет для вас таким непонятным. Если я упустил что-то важное о команде или у вас остались вопросы, спрашивайте в комментариях!

Куда сохраняет файлы это долбаный wget?? Пол венчика сожрало но где чёрт возьми эти файлы?

Wget по умолчанию сохраняет в той же директории, из которой он запущен. Если вы запустили CMD то это будет
C:\Users\Имя вашей учетной записи на компьютере или
C:\Пользователи\Имя вашей учетной записи на компьютере

Чтоб в следующий раз Вам не мучатся, чтоб Вам легче было, откройте папку » Загрузки » на пустом месте нажмите правой кнопкой мышки и выберете » открыть в терминале » и откроется терминал и качайте как обычно, и будет качаться в папку » Загрузки «. А по умолчанию качается по моему » Домашняя папка » ( если я НЕ ошибаюсь ).

Если вгет запущен от имени админа то виндовс-систем 32-сайт, если просто запущен без прав админа то пользователи-имя-сайт
Похожие публикации: