Как скачать файл с интернета без браузера

Цитата:

Цитата Deepmaster

Пожалуйста, не нужно писать про wget, curl, powershell, а так-же vbs скрипты, vbs не качает на диск С. »

В силу своей наглости, представлю пример как раз для wget.
Сам инструмент: GNU Wget
Для удобства, можете расположить исполняемый файл в папку System32.

Справка:

Код:

GNU Wget 1.18, a non-interactive network retriever.



Usage: wget [OPTION]... [url]...



Mandatory arguments to long options are mandatory for short options too.



Startup:

  -V,  --version                     display the version of Wget and exit

  -h,  --help                        print this help

  -b,  --background                  go to background after startup

  -e,  --execute=COMMAND             execute a `.wgetrc'-style command



Logging and input file:

  -o,  --output-file=FILE            log messages to FILE

  -a,  --append-output=FILE          append messages to FILE

  -d,  --debug                       print lots of debugging information

  -q,  --quiet                       quiet (no output)

  -v,  --verbose                     be verbose (this is the default)

  -nv, --no-verbose                  turn off verboseness, without being quiet

       --report-speed=TYPE           output bandwidth as TYPE.  TYPE can be bits

  -i,  --input-file=FILE             download URLs found in local or external FILE

       --input-metalink=FILE         download files covered in local Metalink FILE

  -F,  --force-html                  treat input file as HTML

  -B,  --base=URL                    resolves HTML input-file links (-i -F) relative to URL

       --config=FILE                 specify config file to use

       --no-config                   do not read any config file

       --rejected-log=FILE           log reasons for URL rejection to FILE



Download:

  -t,  --tries=NUMBER                set number of retries to NUMBER (0 unlimits)

       --retry-connrefused           retry even if connection is refused

  -O,  --output-document=FILE        write documents to FILE

  -nc, --no-clobber                  skip downloads that would download to existing files (overwriting them)

  -c,  --continue                    resume getting a partially-downloaded file

       --start-pos=OFFSET            start downloading from zero-based position OFFSET

       --progress=TYPE               select progress gauge type

       --show-progress               display the progress bar in any verbosity mode

  -N,  --timestamping                don't re-retrieve files unless newer than local

       --no-if-modified-since        don't use conditional if-modified-since get requests in timestamping mode

       --no-use-server-timestamps    don't set the local file's timestamp by the one on the server

  -S,  --server-response             print server response

       --spider                      don't download anything

  -T,  --timeout=SECONDS             set all timeout values to SECONDS

       --dns-timeout=SECS            set the DNS lookup timeout to SECS

       --connect-timeout=SECS        set the connect timeout to SECS

       --read-timeout=SECS           set the read timeout to SECS

  -w,  --wait=SECONDS                wait SECONDS between retrievals

       --waitretry=SECONDS           wait 1..SECONDS between retries of a retrieval

       --random-wait                 wait from 0.5*WAIT...1.5*WAIT secs between retrievals

       --no-proxy                    explicitly turn off proxy

  -Q,  --quota=NUMBER                set retrieval quota to NUMBER

       --bind-address=ADDRESS        bind to ADDRESS (hostname or IP) on local host

       --limit-rate=RATE             limit download rate to RATE

       --no-dns-cache                disable caching DNS lookups

       --restrict-file-names=OS      restrict chars in file names to ones OS allows

       --ignore-case                 ignore case when matching files/directories

  -4,  --inet4-only                  connect only to IPv4 addresses

  -6,  --inet6-only                  connect only to IPv6 addresses

       --prefer-family=FAMILY        connect first to addresses of specified family, one of IPv6, IPv4, or none

       --user=USER                   set both ftp and http user to USER

       --password=PASS               set both ftp and http password to PASS

       --ask-password                prompt for passwords

       --no-iri                      turn off IRI support

       --local-encoding=ENC          use ENC as the local encoding for IRIs

       --remote-encoding=ENC         use ENC as the default remote encoding

       --unlink                      remove file before clobber

       --metalink-over-http          use Metalink metadata from HTTP response headers

       --preferred-location          preferred location for Metalink resources



Directories:

  -nd, --no-directories              don't create directories

  -x,  --force-directories           force creation of directories

  -nH, --no-host-directories         don't create host directories

       --protocol-directories        use protocol name in directories

  -P,  --directory-prefix=PREFIX     save files to PREFIX/..

       --cut-dirs=NUMBER             ignore NUMBER remote directory components



HTTP options:

       --http-user=USER              set http user to USER

       --http-password=PASS          set http password to PASS

       --no-cache                    disallow server-cached data

       --default-page=NAME           change the default page name (normally this is 'index.html'.)

  -E,  --adjust-extension            save HTML/CSS documents with proper extensions

       --ignore-length               ignore 'Content-Length' header field

       --header=STRING               insert STRING among the headers

       --max-redirect                maximum redirections allowed per page

       --proxy-user=USER             set USER as proxy username

       --proxy-password=PASS         set PASS as proxy password

       --referer=URL                 include 'Referer: URL' header in HTTP request

       --save-headers                save the HTTP headers to file

  -U,  --user-agent=AGENT            identify as AGENT instead of Wget/VERSION

       --no-http-keep-alive          disable HTTP keep-alive (persistent connections)

       --no-cookies                  don't use cookies

       --load-cookies=FILE           load cookies from FILE before session

       --save-cookies=FILE           save cookies to FILE after session

       --keep-session-cookies        load and save session (non-permanent) cookies

       --post-data=STRING            use the POST method; send STRING as the data

       --post-file=FILE              use the POST method; send contents of FILE

       --method=HTTPMethod           use method "HTTPMethod" in the request

       --body-data=STRING            send STRING as data. --method MUST be set

       --body-file=FILE              send contents of FILE. --method MUST be set

       --content-disposition         honor the Content-Disposition header when choosing local file names (EXPERIMENTAL)

       --content-on-error            output the received content on server errors

       --auth-no-challenge           send Basic HTTP authentication information without first waiting for the server's challenge



HTTPS (SSL/TLS) options:

       --secure-protocol=PR          choose secure protocol, one of auto, SSLv2, SSLv3, TLSv1 and PFS

       --https-only                  only follow secure HTTPS links

       --no-check-certificate        don't validate the server's certificate

       --certificate=FILE            client certificate file

       --certificate-type=TYPE       client certificate type, PEM or DER

       --private-key=FILE            private key file

       --private-key-type=TYPE       private key type, PEM or DER

       --ca-certificate=FILE         file with the bundle of CAs

       --ca-directory=DIR            directory where hash list of CAs is stored

       --crl-file=FILE               file with bundle of CRLs

       --pinnedpubkey=FILE/HASHES    Public key (PEM/DER) file, or any number of base64 encoded sha256 hashes preceded by 'sha256//' and seperated by ';', to verify peer against

       --random-file=FILE            file with random data for seeding the SSL PRNG

       --egd-file=FILE               file naming the EGD socket with random data



HSTS options:

       --no-hsts                     disable HSTS

       --hsts-file                   path of HSTS database (will override default)



FTP options:

       --ftp-user=USER               set ftp user to USER

       --ftp-password=PASS           set ftp password to PASS

       --no-remove-listing           don't remove '.listing' files

       --no-glob                     turn off FTP file name globbing

       --no-passive-ftp              disable the "passive" transfer mode

       --preserve-permissions        preserve remote file permissions

       --retr-symlinks               when recursing, get linked-to files (not dir)



FTPS options:

       --ftps-implicit               use implicit FTPS (default port is 990)

       --ftps-resume-ssl             resume the SSL/TLS session started in the control connection when opening a data connection

       --ftps-clear-data-connection  cipher the control channel only; all the data will be in plaintext

       --ftps-fallback-to-ftp        fall back to FTP if FTPS is not supported in the target server



WARC options:

       --warc-file=FILENAME          save request/response data to a .warc.gz file

       --warc-header=STRING          insert STRING into the warcinfo record

       --warc-max-size=NUMBER        set maximum size of WARC files to NUMBER

       --warc-cdx                    write CDX index files

       --warc-dedup=FILENAME         do not store records listed in this CDX file

       --no-warc-compression         do not compress WARC files with GZIP

       --no-warc-digests             do not calculate SHA1 digests

       --no-warc-keep-log            do not store the log file in a WARC record

       --warc-tempdir=DIRECTORY      location for temporary files created by the WARC writer



Recursive download:

  -r,  --recursive                   specify recursive download

  -l,  --level=NUMBER                maximum recursion depth (inf or 0 for infinite)

       --delete-after                delete files locally after downloading them

  -k,  --convert-links               make links in downloaded HTML or CSS point to local files

       --convert-file-only           convert the file part of the URLs only (usually known as the basename)

       --backups=N                   before writing file X, rotate up to N backup files

  -K,  --backup-converted            before converting file X, back up as X.orig

  -m,  --mirror                      shortcut for -N -r -l inf --no-remove-listing

  -p,  --page-requisites             get all images, etc. needed to display HTML page

       --strict-comments             turn on strict (SGML) handling of HTML comments



Recursive accept/reject:

  -A,  --accept=LIST                 comma-separated list of accepted extensions

  -R,  --reject=LIST                 comma-separated list of rejected extensions

       --accept-regex=REGEX          regex matching accepted URLs

       --reject-regex=REGEX          regex matching rejected URLs

       --regex-type=TYPE             regex type (posix)

  -D,  --domains=LIST                comma-separated list of accepted domains

       --exclude-domains=LIST        comma-separated list of rejected domains

       --follow-ftp                  follow FTP links from HTML documents

       --follow-tags=LIST            comma-separated list of followed HTML tags

       --ignore-tags=LIST            comma-separated list of ignored HTML tags

  -H,  --span-hosts                  go to foreign hosts when recursive

  -L,  --relative                    follow relative links only

  -I,  --include-directories=LIST    list of allowed directories

       --trust-server-names          use the name specified by the redirection URL's last component

  -X,  --exclude-directories=LIST    list of excluded directories

  -np, --no-parent                   don't ascend to the parent directory



Mail bug reports and suggestions to <bug-wget@gnu.org>

Код:

GNU Wget 1.18, программа для загрузки файлов из сети в автономном режиме.



Использование: wget [ПАРАМЕТР]... [url]...



Обязательные аргументы для длинных параметров являются обязательными и для коротких параметров.



Запуск:

  -V,  --version                     показать версию Wget и завершить работу

  -h,  --help                        показать эту справку

  -b,  --background                  после запуска перейти в фоновый режим

  -e,  --execute=КОМАНДА             выполнить команду в стиле «.wgetrc»



Журналирование и входной файл:

  -o,  --output-file=ФАЙЛ            записывать сообщения в ФАЙЛ

  -a,  --append-output=ФАЙЛ          дописывать сообщения в конец ФАЙЛА

  -d,  --debug                       показать много отладочной информации

  -q,  --quiet                       ничего не выводить

  -v,  --verbose                     показывать подробные сведения (по умолчанию)

  -nv, --no-verbose                  отключить вывод подробных сведений (не полностью)

       --report-speed=ТИП            единицы измерения пропускной способности определить ТИПОМ. ТИП может быть равно bits

  -i,  --input-file=ФАЙЛ             загрузить URL-ы согласно локальному или внешнему ФАЙЛУ

  -F,  --force-html                  считать, что входной файл — HTML

  -B,  --base=URL                    считать, что ссылки из входного файла (-i -F) указаны относительно URL

       --config=ФАЙЛ                 задать файл настроек

       --no-config                   не читать файлы настроек

       --rejected-log=ФАЙЛ           протоколировать причины отброса URL в ФАЙЛ



Загрузка:

  -t,  --tries=ЧИСЛО                 установить ЧИСЛО повторных попыток (0 без ограничения)

       --retry-connrefused           повторять, даже если в подключении отказано

  -O,  --output-document=ФАЙЛ        записывать документы в ФАЙЛ

  -nc, --no-clobber                  пропускать загрузки, которые приведут к загрузке уже существующих файлов (и их перезаписи)

  -c,  --continue                    возобновить загрузку частично загруженного файла

       --start-pos=СМЕЩЕНИЕ          начинать загрузку со СМЕЩЕНИЯ (считается с 0)

       --progress=ТИП                выбрать тип индикатора выполнения

       --show-progress               показывать индикатор выполнения в любом режиме подробности

  -N,  --timestamping                не загружать повторно файлы, только если они не новее, чем локальные

       --no-use-server-timestamps    не использовать проверку if-modified-since для запросов в режиме учёта меток времени

       --no-use-server-timestamps    don't set the local file's timestamp by the one on the server

  -S,  --server-response             вывод ответа сервера

       --spider                      ничего не загружать

  -T,  --timeout=СЕКУНДЫ             установка значений всех тайм-аутов равными числу СЕКУНД

       --dns-timeout=СЕК             установка тайм-аута поиска в DNS в СЕК

       --connect-timeout=СЕК         установка тайм-аута подключения в СЕК

       --read-timeout=СЕК            установка тайм-аута чтения в СЕК

  -w,  --wait=СЕКУНДЫ                пауза в СЕКУНДАХ между загрузками

       --waitretry=СЕКУНДЫ           пауза в 1..СЕКУНДЫ между повторными попытками загрузки

       --random-wait                 пауза в 0.5*WAIT...1.5*WAIT секунд между загрузками

       --no-proxy                    явно выключить прокси

  -Q,  --quota=ЧИСЛО                 установить величину квоты загрузки в ЧИСЛО

       --bind-address=АДРЕС          привязать АДРЕС (имя компьютера или IP) локального компьютера

       --limit-rate=СКОРОСТЬ         ограничить СКОРОСТЬ загрузки

       --no-dns-cache                отключить кэширование DNS-запросов

       --restrict-file-names=ОС      использовать в именах файлов символы, допустимые в ОС

       --ignore-case                 игнорировать регистр при сопоставлении файлов и/или каталогов

  -4,  --inet4-only                  подключаться только к адресам IPv4

  -6,  --inet6-only                  подключаться только к адресам IPv6

       --prefer-family=СЕМЕЙСТВО     подключаться сначала к адресам указанного семейства (может быть IPv6, IPv4 или ничего)

       --user=ПОЛЬЗОВАТЕЛЬ           установить и ftp- и http-пользователя в ПОЛЬЗОВАТЕЛЬ

       --password=ПАРОЛЬ             установить ftp- и http-пароль в ПАРОЛЬ

       --ask-password                запрашивать пароли

       --no-iri                      выключить поддержку IRI

       --local-encoding=КДР          использовать КДР как локальную кодировку для IRI

       --remote-encoding=КДР         использовать КДР как удалённую кодировку по умолчанию

       --unlink                      удалить файл перед затиранием



Каталоги:

  -nd, --no-directories              не создавать каталоги

  -x,  --force-directories           принудительно создавать каталоги

  -nH, --no-host-directories         не создавать каталоги как на узле

       --protocol-directories        использовать имя протокола в каталогах

  -P,  --directory-prefix=ПРЕФИКС    сохранять файлы в ПРЕФИКС/..

       --cut-dirs=ЧИСЛО              игнорировать ЧИСЛО компонентов удалённого

                                     каталога



Параметры HTTP:

       --http-user=ПОЛЬЗОВ.          установить http-пользователя в ПОЛЬЗОВАТЕЛЬ

       --http-password=ПАРОЛЬ        установить http-пароль в ПАРОЛЬ

       --no-cache                    отвергать кэшированные сервером данные

       --default-page=ИМЯ            изменить имя страницы по умолчанию (обычно это «index.html»)

  -E,  --adjust-extension            сохранять документы HTML/CSS с надлежащими расширениями

       --ignore-length               игнорировать поле заголовка «Content-Length»

       --header=СТРОКА               вставить СТРОКУ между заголовками

       --max-redirect                максимально допустимое число перенаправлений на страницу

       --proxy-user=ПОЛЬЗОВ.         установить ПОЛЬЗОВАТЕЛЯ в качестве имени пользователя для прокси

       --proxy-password=ПАРОЛЬ       установить ПАРОЛЬ в качестве пароля для прокси

       --referer=URL                 включить в HTTP-запрос заголовок «Referer: URL»

       --save-headers                сохранять HTTP-заголовки в файл

  -U,  --user-agent=АГЕНТ            идентифицировать себя как АГЕНТ вместо Wget/ВЕРСИЯ

       --no-http-keep-alive          отключить поддержание активности HTTP (постоянные подключения)

       --no-cookies                  не использовать кукисы

       --load-cookies=ФАЙЛ           загрузить кукисы из ФАЙЛА перед сеансом

       --save-cookies=ФАЙЛ           сохранить кукисы в ФАЙЛ после сеанса

       --keep-session-cookies        загрузить и сохранить кукисы сеанса (непостоянные)

       --post-data=СТРОКА            использовать метод POST; отправка СТРОКИ в качестве данных

       --post-file=ФАЙЛ              использовать метод POST; отправка содержимого ФАЙЛА

       --method=HTTPMethod           использовать метод «HTTPMethod» в заголовке

       --body-data=СТРОКА            отправка СТРОКИ в качестве данных; ДОЛЖЕН быть указан параметр --method

       --body-file=ФАЙЛ              отправка содержимого ФАЙЛА; ДОЛЖЕН быть указан параметр --method

       --content-disposition         учитывать заголовок Content-Disposition при выборе имён для локальных файлов (ЭКСПЕРИМЕНТАЛЬНЫЙ)

       --content-on-error            выводить принятые данные при ошибках сервера

       --auth-no-challenge           отправлять информацию об аутентификации Basic HTTP не дожидаясь первого ответа сервера



Параметры HTTPS (SSL/TLS):

       --secure-protocol=ПР          выбор безопасного протокола: auto, SSLv2, SSLv3, TLSv1 и PFS

       --https-only                  переходить только по безопасным ссылкам HTTPS

       --no-check-certificate        не проверять сертификат сервера

       --certificate=FILE            файл сертификата пользователя

       --certificate-type=ТИП        тип сертификата пользователя: PEM или DER

       --private-key=ФАЙЛ            файл секретного ключа

       --private-key-type=ТИП        тип секретного ключа: PEM или DER

       --ca-certificate=ФАЙЛ         файл с набором CA

       --ca-directory=КАТ            каталог, в котором хранится список CA

       --crl-file=ФАЙЛ               файл с набором CRL

       --pinnedpubkey=FILE/HASHES    Public key (PEM/DER) file, or any number of base64 encoded sha256 hashes preceded by 'sha256//' and seperated by ';', to verify peer against

       --random-file=ФАЙЛ            файл со случайными данными для SSL PRNG

       --egd-file=ФАЙЛ               файл, определяющий сокет EGD со случайными данными



Параметры HSTS:

       --no-hsts                     отключить HSTS

       --hsts-file                   путь к базе данных HSTS (заменит значение по умолчанию)



Параметры FTP:

       --ftp-user=ПОЛЬЗОВАТЕЛЬ       установить ftp-пользователя в ПОЛЬЗОВАТЕЛЬ

       --ftp-password=ПАРОЛЬ         установить ftp-пароль в ПАРОЛЬ

       --no-remove-listing           не удалять файлы «.listing»

       --no-glob                     выключить маски для имён файлов FTP

       --no-passive-ftp              отключить «пассивный» режим передачи

       --preserve-permissions        сохранять права доступа удалённых файлов

       --retr-symlinks               при рекурсии загружать файлы по ссылкам (не каталоги)



Параметры FTPS:

       --ftps-implicit               безусловно использовать FTPS (порт по умолчанию — 990)

       --ftps-resume-ssl             возобновлять сеанс SSL/TLS, начатый в канале управления, при открытии канала данных

       --ftps-clear-data-connection  шифровать только канал управления; данные не шифруются

       --ftps-fallback-to-ftp        вернуться к FTP, если FTPS не поддерживается сервером



Параметры WARC:

       --warc-file=ФАЙЛ              записать данные запроса/ответа в файл .warc.gz

       --warc-header=СТРОКА          вставить СТРОКУ в запись warcinfo

       --warc-max-size=ЧИСЛО         максимальный размер файлов WARC равен ЧИСЛУ

       --warc-cdx                    записать индексные файлы CDX

       --warc-dedup=ФАЙЛ             не сохранять записи, перечисленные в файле CDX

       --no-warc-compression         не сжимать файлы WARC с помощью GZIP

       --no-warc-digests             не вычислять дайджесты SHA1

       --no-warc-keep-log            не сохранять файл журнала в записи WARC

       --warc-tempdir=КАТАЛОГ        расположение для временных файлов, создаваемых процедурой записи WARC



Рекурсивная загрузка:

  -r,  --recursive                   включение рекурсивной загрузки

  -l,  --level=ЧИСЛО                 глубина рекурсии (inf и 0 — бесконечность)

       --delete-after                удалять локальные файлы после загрузки

  -k,  --convert-links               делать ссылки локальными в загруженном HTML или CSS

       --convert-file-only           convert the file part of the URLs only (usually known as the basename)

  --backups=N                        перед записью файла X, ротировать до N резервных файлов

  -K,  --backup-converted            перед преобразованием файла X делать резервную копию в виде X.orig

  -m,  --mirror                      короткий параметр, эквивалентный -N -r -l inf --no-remove-listing

  -p,  --page-requisites             загрузить все изображения и проч., необходимые для отображения HTML-страницы

       --strict-comments             включить строгую (SGML) обработку комментариев HTML



Разрешения/запреты при рекурсии:

  -A,  --accept=СПИСОК               список разрешённых расширений через запятую

  -R,  --reject=СПИСОК               список запрещённых расширений, разделённых запятыми.

       --accept-regex=РЕГВЫР         регулярное выражение для разрешённых URL

       --reject-regex=РЕГВЫР         регулярное выражение для запрещённых URL

       --regex-type=ТИП              тип регулярного выражения (posix|pcre)

  -D,  --domains=СПИСОК              список разрешённых доменов, через запятую

       --exclude-domains=СПИСОК      список запрещённых доменов, через запятую

       --follow-ftp                  следовать по ссылкам FTP в HTML-документах

       --follow-tags=СПИСОК          список используемых тегов HTML, через запятую

       --ignore-tags=СПИСОК          список игнорируемых тегов HTML, через запятую

  -H,  --span-hosts                  заходить на чужие узлы при рекурсии

  -L,  --relative                    следовать только по относительным ссылкам

  -I,  --include-directories=СПИСОК  список разрешённых каталогов

  --trust-server-names  использовать имя, указанное в перенаправляющем URL, в качестве последнего компонента.

  -X,  --exclude-directories=СПИСОК  список исключаемых каталогов

  -np, --no-parent                   не подниматься в родительский каталог



Сообщения об ошибках и пожелания отправляйте на <bug-wget@gnu.org>

Не скачивает:
1. Пробуйте использовать ключ: --no-check-certificate
2. Подставьте referer, ключ: --referer=URL

Цитата:

Цитата Iska

У остальных — загружает. »

Это не так. Могут быть ситуации, когда загрузка станет не возможной.
Например с помощью WGet (как есть) Вы не скачаете HWiNFO32. Чтоб загрузить файл, нужно подставить referer.

Т.е:

Код:

wget -c --referer=https://www.hwinfo.com/download.php https://www.hwinfo.com/files/hw32_540.zip -P .\