Любой язык - [решено] wget команда не закачивает файл по ссылке

Sham · Отправлено: **16:22, 02-07-2019** | #21

v79italya, мы меняем в урлах параметр crumb, который берём из страницы с таблицей (u1) с помощью регулярного выражения. Они могут изменить текст, имя параметра, способ проверок и тд., и тогда придётся корректировать. По крайней мере с ноября 2018 ничего не менялось, судя по дате блога. Это не публичный API yahoo, где есть какие-то гарантии. Если у них есть API для загрузки этих котировок, то безусловно нужно использовать его.

UPD: нашёл спец. адрес для получения crumb здесь (_https://query1.finance.yahoo.com/v1/test/getcrumb). Обновил пост со скриптом.

v79italya · Отправлено: **08:18, 07-07-2019** | #22

Sham, спасибо за второй вариант скрипта. увидел где можно менять паузу между обращениями на сайт. еще, по моему, есть изменения в строках, относящихся к crumb, но я не разбираюсь в этом и ладно.
на счет crumb я сильно не переживаю. как перестанет работать, возьму с сайта рабочую ссылку и в Excel по быстрому изменю концовку всех ссылок. так и делал для макроса. не будет работать, тогда, чтож, подыму тему), там видно будет. мне это надо то один раз в месяц для аналитики. а так все работает. спасибо большое
Nordek, извиняюсь, только ваш вариант так и не запустил. да и ладно. уже есть решение от Sham

слушайте, а возможно с помощью таких скриптов скачать таблицу с сайта в csv-файл. вот ссылка- https://finance.yahoo.com/quote/AAL/...ate=1565913600
там нет готового csv. поэтому и хотел узнать
ссылка сохранилась не полностью
https://finance.yahoo.com/quote/AAL/...ate=1568937600

Sham · Отправлено: **03:29, 08-07-2019** | #23

Цитата v79italya:

а возможно с помощью таких скриптов скачать таблицу с сайта в csv-файл »

Там json надо разбирать из страницы. Можно, но ненадёжно. Ищите API этих таблиц.

v79italya · Отправлено: **05:23, 08-07-2019** | #24

Цитата Sham:

json надо разбирать из страницы »

вот это я не фига не понял

Цитата Sham:

Ищите API этих таблиц »

тоже не понял, но готов искать. как искать? дать объявление на авито - ищу API таких таблиц ?)
еще вопрос. как на этом форуме правильнее, открыть новую тему или можно продолжить в этой?

v79italya · Отправлено: **20:37, 13-07-2019** | #25

Sham, скажите, вы сможете это сделать? я про это:
слушайте, а возможно с помощью таких скриптов скачать таблицу с сайта в csv-файл. вот ссылка- https://finance.yahoo.com/quote/AAL/...ate=1565913600
там нет готового csv. поэтому и хотел узнать

Sham · Отправлено: **02:05, 14-07-2019** | #26

v79italya, можно, но изначально это json (в таком виде (взят только нужный массив) https://pastebin.com/G6v74TYW ), который нужно перелопатить в csv. Это спарсено со страницы, поэтому в любой момент может всё поменяться.

v79italya · Отправлено: **13:17, 14-07-2019** | #27

Цитата Sham:

можно »

хорошо что можно. я так понял что Вы это сможете сделать. запишу Ваши контакты из профиля. приспичит - обращусь.
сейчас у меня есть вариант получения этих данных. макросами и формулами в Excel за 30 минут получаю нужные данные с >11500 тикеров. когда сломается, если не смогу исправить, обращусь к Вам. c .csv обработаю в Power Query. по времени, наверное, быстрее получится.
приносило бы еще все это прибыль, а то гоняю демосчет уже больше года.

sov44 · Конфигурация компьютера

Помогите с скриптом для скачивания файла по ссылке https://kjkpub.s3.amazonaws.com/soft...e-11842-64.exe

iglezz · Отправлено: **19:03, 30-12-2019** | #29

sov44, А в чём проблема?

Скрытый текст

Код:

C:\tmp>wget "https://kjkpub.s3.amazonaws.com/software/sumatrapdf/prerel/SumatraPDF-prerelease-11842-64.exe"
--2019-12-30 19:01:18--  https://kjkpub.s3.amazonaws.com/software/sumatrapdf/prerel/SumatraPDF-prerelease-11842-64.exe
Resolving kjkpub.s3.amazonaws.com (kjkpub.s3.amazonaws.com)... 52.216.141.164
Connecting to kjkpub.s3.amazonaws.com (kjkpub.s3.amazonaws.com)|52.216.141.164|:443... connected.
HTTP request sent, awaiting response... 200 OK
Length: 15253672 (15M) [application/x-msdownload]
Saving to: 'SumatraPDF-prerelease-11842-64.exe'

SumatraPDF-prerelease-11842-6  12%[=====>                                            ]   1,78M   298KB/s    eta 48s    ^C
C:\tmp>wget --version
GNU Wget 1.20.3 built on mingw32.

...

sov44 · Конфигурация компьютера

iglezz, хм, сработало. Видимо был какой-то глюк ПК.

Код:

bin\wget.exe --no-check-certificate -P "%~dp0TempZ" "https://kjkpub.s3.amazonaws.com/software/sumatrapdf/prerel/SumatraPDF-prerelease-11842-64.exe"