forum.opennet.ru - "Выпуск GNU Wget 1.20" (72)

"Выпуск GNU Wget 1.20"

Форум Разговоры, обсуждение новостей
Вариант для распечатки		Пред. тема \| След. тема
Изначальное сообщение		[ Отслеживать ]

"Выпуск GNU Wget 1.20"	+/–
Сообщение от opennews (??), 30-Ноя-18, 10:00
Состоялся (https://www.mail-archive.com/info-gnu@gnu.org/msg02523....) релиз GNU Wget 1.20 (http://www.gnu.org/software/wget/), программы для автоматизации загрузки контента с использованием протоколов HTTP и FTP. В новой версии: - Представлена опция "--retry-on-host-error", позволяющая после определённой задержки продолжить попытки загрузки в случае возникновения ошибок из-за проблем на локальной системе. - Добавлена возможность сборки с GnuTLS 3.6.3 и обеспечена поддержка TLS 1.3. - Реализована поддержка использования libpcre2 для обработки регулярных выражений; - Добавлена возможность использования опций --{accept,reject}-regex для фильтрации файлов по регулярному выражению в процессе рекурсивной загрузки по FTP; - Устранены проблемы, приводящие к утечке ресурсов. URL: https://www.mail-archive.com/info-gnu@gnu.org/msg02523.... Новость: https://www.opennet.ru/opennews/art.shtml?num=49686
Ответить \| Правка \| Cообщить модератору

Оглавление

Выпуск GNU Wget 1.20, Аноним (4), 10:47 , 30-Ноя-18, (4) –14

Выпуск GNU Wget 1.20, user (??), 12:50 , 30-Ноя-18, (10) +5

Выпуск GNU Wget 1.20, Аноним (22), 13:32 , 30-Ноя-18, (22) –3

Выпуск GNU Wget 1.20, Аноним (25), 13:36 , 30-Ноя-18, (25) –1
Выпуск GNU Wget 1.20, Andrey Mitrofanov (?), 13:46 , 30-Ноя-18, (31) +1

Выпуск GNU Wget 1.20, user (??), 15:19 , 30-Ноя-18, (44)

Выпуск GNU Wget 1.20, Andrey Mitrofanov (?), 15:23 , 30-Ноя-18, (45)

Выпуск GNU Wget 1.20, Аноним Анонимович Анонимов (?), 20:33 , 30-Ноя-18, (64)

Выпуск GNU Wget 1.20, evkogan (?), 15:34 , 30-Ноя-18, (46) +1
Выпуск GNU Wget 1.20, commiethebeastie (ok), 21:42 , 30-Ноя-18, (71) +1

Выпуск GNU Wget 1.20, Аноним (5), 11:29 , 30-Ноя-18, (5) –3

Выпуск GNU Wget 1.20, АнониМ (ok), 11:49 , 30-Ноя-18, (7) +1

Выпуск GNU Wget 1.20, Аноним (13), 13:12 , 30-Ноя-18, (13) +8

Выпуск GNU Wget 1.20, Изи (?), 13:20 , 30-Ноя-18, (15)

Выпуск GNU Wget 1.20, Аноним (25), 13:37 , 30-Ноя-18, (26)

Выпуск GNU Wget 1.20, Изи (?), 13:52 , 30-Ноя-18, (33) –4

Выпуск GNU Wget 1.20, Аноним (41), 15:01 , 30-Ноя-18, (41)
Выпуск GNU Wget 1.20, Аноним Анонимович Анонимов (?), 20:35 , 30-Ноя-18, (65) –1

Выпуск GNU Wget 1.20, Аноним (41), 15:02 , 30-Ноя-18, (42) –1

Выпуск GNU Wget 1.20, хрю (?), 17:50 , 30-Ноя-18, (52)

Выпуск GNU Wget 1.20, Аноним (59), 20:09 , 30-Ноя-18, (59) –2

Выпуск GNU Wget 1.20, АнониМ (ok), 10:30 , 01-Дек-18, (78)

Выпуск GNU Wget 1.20, Аноним (41), 14:59 , 30-Ноя-18, (39)
Выпуск GNU Wget 1.20, Аноним (76), 06:17 , 01-Дек-18, (76)

Выпуск GNU Wget 1.20, Ilya Indigo (ok), 12:20 , 30-Ноя-18, (8) –1

Выпуск GNU Wget 1.20, Аноним (25), 13:26 , 30-Ноя-18, (16)

Выпуск GNU Wget 1.20, Аноним (59), 20:11 , 30-Ноя-18, (60) –1

Выпуск GNU Wget 1.20, Аноним (-), 21:07 , 30-Ноя-18, (68)

Выпуск GNU Wget 1.20, Анонн (?), 22:21 , 30-Ноя-18, (73)

Выпуск GNU Wget 1.20, Аноним (74), 03:34 , 01-Дек-18, (74)

Выпуск GNU Wget 1.20, Анонн (?), 19:35 , 01-Дек-18, (80)

Выпуск GNU Wget 1.20, Zulu (?), 20:13 , 30-Ноя-18, (62) +1

Выпуск GNU Wget 1.20, Аноним (-), 21:06 , 30-Ноя-18, (67)

Выпуск GNU Wget 1.20, Анонн (?), 21:01 , 30-Ноя-18, (66) –1

Выпуск GNU Wget 1.20, Изи (?), 13:28 , 30-Ноя-18, (18)

Выпуск GNU Wget 1.20, Ilya Indigo (ok), 13:31 , 30-Ноя-18, (21) –1

Выпуск GNU Wget 1.20, Аноним (25), 13:38 , 30-Ноя-18, (27)
Выпуск GNU Wget 1.20, Andrey Mitrofanov (?), 13:52 , 30-Ноя-18, (34) +1

Выпуск GNU Wget 1.20, Изи (?), 13:14 , 30-Ноя-18, (14) –2

Выпуск GNU Wget 1.20, Аноним (25), 13:27 , 30-Ноя-18, (17)

Выпуск GNU Wget 1.20, Изи (?), 13:29 , 30-Ноя-18, (19)

Выпуск GNU Wget 1.20, Аноним (25), 13:34 , 30-Ноя-18, (23)

Выпуск GNU Wget 1.20, нах (?), 14:21 , 30-Ноя-18, (37)

Выпуск GNU Wget 1.20, Аноним (9), 12:27 , 30-Ноя-18, (9) –2

Выпуск GNU Wget 1.20, Andrey Mitrofanov (?), 13:03 , 30-Ноя-18, (12) –1
Выпуск GNU Wget 1.20, Аноним (25), 13:30 , 30-Ноя-18, (20) –1

Выпуск GNU Wget 1.20, Аноним (9), 14:59 , 30-Ноя-18, (40) –1

Выпуск GNU Wget 1.20, Аноним (41), 15:03 , 30-Ноя-18, (43)

Выпуск GNU Wget 1.20, аноним3 (?), 16:48 , 30-Ноя-18, (49) –3

Выпуск GNU Wget 1.20, Аноним (-), 18:10 , 30-Ноя-18, (55) –3

Выпуск GNU Wget 1.20, Акакжев (?), 18:23 , 30-Ноя-18, (56) +1

Выпуск GNU Wget 1.20, Аноним (-), 21:08 , 30-Ноя-18, (69)
Выпуск GNU Wget 1.20, Andrey Mitrofanov (?), 13:09 , 03-Дек-18, (86)

Выпуск GNU Wget 1.20, Акакжев (?), 15:48 , 03-Дек-18, (88)

Выпуск GNU Wget 1.20, гтщс_г34 (?), 12:56 , 30-Ноя-18, (11) +3

Выпуск GNU Wget 1.20, Аноним (22), 13:35 , 30-Ноя-18, (24) –1

Выпуск GNU Wget 1.20, Andrey Mitrofanov (?), 14:03 , 30-Ноя-18, (35)

Выпуск GNU Wget 1.20, Аноним (82), 05:45 , 02-Дек-18, (82) –1

Выпуск GNU Wget 1.20, Аноним (-), 14:23 , 30-Ноя-18, (38) +2

Выпуск GNU Wget 1.20, Аноним (47), 15:41 , 30-Ноя-18, (47) +1
Выпуск GNU Wget 1.20, Аноним (48), 16:15 , 30-Ноя-18, (48) +1

Выпуск GNU Wget 1.20, th3m3 (ok), 17:24 , 30-Ноя-18, (50)

Выпуск GNU Wget 1.20, аноним3 (?), 17:50 , 30-Ноя-18, (51) +2
Выпуск GNU Wget 1.20, Акакжев (?), 18:27 , 30-Ноя-18, (57) –1

Выпуск GNU Wget 1.20, аноним3 (?), 18:33 , 30-Ноя-18, (58) –1

Выпуск GNU Wget 1.20, Аноним (59), 20:15 , 30-Ноя-18, (63) +2

Выпуск GNU Wget 1.20, Аноним3 (?), 22:15 , 30-Ноя-18, (72) +1

Выпуск GNU Wget 1.20, Аноним (70), 21:30 , 30-Ноя-18, (70)
Выпуск GNU Wget 1.20, Gannet (ok), 04:39 , 01-Дек-18, (75) –1
Выпуск GNU Wget 1.20, Аноним (81), 21:04 , 01-Дек-18, (81) –2
Выпуск GNU Wget 1.20, Аноним (84), 15:08 , 02-Дек-18, (84) –1

Выпуск GNU Wget 1.20, Andrey Mitrofanov (?), 13:13 , 03-Дек-18, (87)

Сообщения по теме [Сортировка по времени | RSS]

4. "Выпуск GNU Wget 1.20" –14 +/–

Сообщение от Аноним (4), 30-Ноя-18, 10:47

Так оно ж уже устарело, curl - наше все?

Ответить | Правка | ^ к родителю #0 | Наверх | Cообщить модератору

10. "Выпуск GNU Wget 1.20" +5 +/–

Сообщение от user (??), 30-Ноя-18, 12:50

https://curl.haxx.se/docs/faq.html#What_is_curl_not
Curl is not a wget clone. That is a common misconception. Never, during curl's development, have we intended curl to replace wget or compete on its market. Curl is targeted at single-shot file transfers.

Ответить | Правка | ^ к родителю #4 | Наверх | Cообщить модератору

22. "Выпуск GNU Wget 1.20" –3 +/–

Сообщение от Аноним (22), 30-Ноя-18, 13:32

>  Curl is targeted at single-shot file transfers.
И... чем это отличается от wget?

Ответить | Правка | ^ к родителю #10 | Наверх | Cообщить модератору

25. "Выпуск GNU Wget 1.20" –1 +/–

Сообщение от Аноним (25), 30-Ноя-18, 13:36

> И... чем это отличается от wget?
вот я тут и пишу: https://www.opennet.ru/openforum/vsluhforumID3/115929.html#20 что
> а curl для нубов
> нубов
Еще под анонимом пишут. Заведите уже учетку, вам это нужно, т.к. без неё вы совсем никто.

Ответить | Правка | ^ к родителю #22 | Наверх | Cообщить модератору

31. "Выпуск GNU Wget 1.20" +1 +/–

Сообщение от Andrey Mitrofanov (?), 30-Ноя-18, 13:46

>>  Curl is targeted at single-shot file transfers.
> И... чем это отличается от wget?
Он умеет в докачку[i]!

Ответить | Правка | ^ к родителю #22 | Наверх | Cообщить модератору

44. "Выпуск GNU Wget 1.20" +/–

Сообщение от user (??), 30-Ноя-18, 15:19

facepalm
RTFM
https://www.gnu.org/software/wget/manual/html_node/Download-...
wget -c

Ответить | Правка | ^ к родителю #31 | Наверх | Cообщить модератору

45. "Выпуск GNU Wget 1.20" +/–

Сообщение от Andrey Mitrofanov (?), 30-Ноя-18, 15:23

> facepalm
Извините, я непонтяно с первого раза. Конечно, вгет "отличается" докачкой от одно-шотового курла.
> RTFM
> wget -c

Ответить | Правка | ^ к родителю #44 | Наверх | Cообщить модератору

64. "Выпуск GNU Wget 1.20" +/–

Сообщение от Аноним Анонимович Анонимов (?), 30-Ноя-18, 20:33

cURL тоже умеет в продолжение закачки.
curl -L -O -C url

Ответить | Правка | ^ к родителю #45 | Наверх | Cообщить модератору

46. "Выпуск GNU Wget 1.20" +1 +/–

Сообщение от evkogan (?), 30-Ноя-18, 15:34

Они разные.
curl умеет авторизацию на проксе NTLM. пару лет назад wget не умел точно.
Зато wget умеет докачку и выкачку кучи файлов рекурсивно, по списку и т.п.
Сейчас вон еще регекспы допилили.
Но если надо дергать API, то это лучше делать curl'ом.
Это тот случай когда 2 утилиты дополняют друг друга.

Ответить | Правка | ^ к родителю #22 | Наверх | Cообщить модератору

71. "Выпуск GNU Wget 1.20" +1 +/–

Сообщение от commiethebeastie (ok), 30-Ноя-18, 21:42

Curl в первую очередь - библиотека.

Ответить | Правка | ^ к родителю #22 | Наверх | Cообщить модератору

5. "Выпуск GNU Wget 1.20" –3 +/–

Сообщение от Аноним (5), 30-Ноя-18, 11:29

А зачем нужен wget, если есть curl?
Если можно, кратенько для не очень сообразительных. Спасибо.

Ответить | Правка | ^ к родителю #0 | Наверх | Cообщить модератору

7. "Выпуск GNU Wget 1.20" +1 +/–

Сообщение от АнониМ (ok), 30-Ноя-18, 11:49

wget монолитный, у него минимум зависимостей. это иногда бывает удобно для простого скриптового использования. так же сложилось впечатление, что wget лучше работает на плохих каналах, но это сейчас фиг встретишь.

Ответить | Правка | ^ к родителю #5 | Наверх | Cообщить модератору

13. "Выпуск GNU Wget 1.20" +8 +/–

Сообщение от Аноним (13), 30-Ноя-18, 13:12

>лучше работает на плохих каналах, но это сейчас фиг встретишь
За пределами МКАДа и не такое встретить можно.

Ответить | Правка | ^ к родителю #7 | Наверх | Cообщить модератору

15. "Выпуск GNU Wget 1.20" +/–

Сообщение от Изи (?), 30-Ноя-18, 13:20

На действительно плохих каналах ни curl, ни wget не актуальны.

Ответить | Правка | ^ к родителю #13 | Наверх | Cообщить модератору

26. "Выпуск GNU Wget 1.20" +/–

Сообщение от Аноним (25), 30-Ноя-18, 13:37

> $ man wget
> -t number
> --tries=number
> Set number of retries to number.  Specify 0 or inf for infinite retrying.  The default ...

Ответить | Правка | ^ к родителю #15 | Наверх | Cообщить модератору

33. "Выпуск GNU Wget 1.20" –4 +/–

Сообщение от Изи (?), 30-Ноя-18, 13:52

И что это перекачивать сначала до посинения. links кстати умеет в докачку)

Ответить | Правка | ^ к родителю #26 | Наверх | Cообщить модератору

41. "Выпуск GNU Wget 1.20" +/–

Сообщение от Аноним (41), 30-Ноя-18, 15:01

links-у надо каждый раз запускать скачивание руками.

Ответить | Правка | ^ к родителю #33 | Наверх | Cообщить модератору

65. "Выпуск GNU Wget 1.20" –1 +/–

Сообщение от Аноним Анонимович Анонимов (?), 30-Ноя-18, 20:35

Будет пытаться скачать 999 раз с места разрыва без полного скачивания заново.
curl -L -O --retry 999 --retry-max-time 0 -C - http://url

Ответить | Правка | ^ к родителю #33 | Наверх | Cообщить модератору

42. "Выпуск GNU Wget 1.20" –1 +/–

Сообщение от Аноним (41), 30-Ноя-18, 15:02

> --tries=number
А есть опция автоматически рвать связь при падении скорости ниже заданного порога за заданное время?

Ответить | Правка | ^ к родителю #26 | Наверх | Cообщить модератору

52. "Выпуск GNU Wget 1.20" +/–

Сообщение от хрю (?), 30-Ноя-18, 17:50

>А есть опция автоматически рвать связь при падении скорости ниже заданного порога за заданное время?
Напрямую нет, но для многих ситуаций можно сделать костыль, от read-timeout, до wait-random, если скорость снижают принудительно при "наглой" скачке. До скриптового убийства по timeout и reконнкета.

Ответить | Правка | ^ к родителю #42 | Наверх | Cообщить модератору

59. "Выпуск GNU Wget 1.20" –2 +/–

Сообщение от Аноним (59), 30-Ноя-18, 20:09

Вот кстати libcurl есть, а libwget?

Ответить | Правка | ^ к родителю #52 | Наверх | Cообщить модератору

78. "Выпуск GNU Wget 1.20" +/–

Сообщение от АнониМ (ok), 01-Дек-18, 10:30

>Вот кстати libcurl есть, а libwget?
в первых строках письма было - wget это монолит с минимумом зависимостей.

Ответить | Правка | ^ к родителю #59 | Наверх | Cообщить модератору

39. "Выпуск GNU Wget 1.20" +/–

Сообщение от Аноним (41), 30-Ноя-18, 14:59

> wget монолитный
cygwin-овский тянет библиотеки cygwin. GNU-Win-овский тянет библиотеки libcharset1.dll, libiconv2.dll, libintl3.dll, readline5.dll и zlib1.dll. Плюс SSL, если нужен. Из перечисленного curl требует только SSL.
> wget лучше работает на плохих каналах
На плохих каналах, где связь может стопориться и висеть, не обрываясь, для скачивания больших файлов полезно запускать curl в цикле с ключами -Y, -y и -C - . И даже без -C для сайтов, не поддерживающих докачку, бывает полезно -- когда может висеть дольше, чем скачает гигабайт заново. Wget умеет докачивать, но умеет ли он при падении скорости рвать связь и переподключаться?
Wget полезен именно в качестве комбайна. Где curl-у нужен скрипт-обвязка, wget-у иногда хватает 1 опции в командной строке. Таймстэмпы, локализация линков, "паук"... Правда, далеко не все ситуации авторы предусмотрели, а что предусмотрели -- не всегда продумали до конца. Например, wget не умеет НЕ скачивать html, запрещённый фильтром -X. Если видит -- обязательно скачает, потом сверится и удалит.

Ответить | Правка | ^ к родителю #7 | Наверх | Cообщить модератору

76. "Выпуск GNU Wget 1.20" +/–

Сообщение от Аноним (76), 01-Дек-18, 06:17

У курла тоже нет неотключаемых зависмостей, и сделать статический бинарник просто

Ответить | Правка | ^ к родителю #7 | Наверх | Cообщить модератору

8. "Выпуск GNU Wget 1.20" –1 +/–

Сообщение от Ilya Indigo (ok), 30-Ноя-18, 12:20

wget - качалка
curl - минибраузер

Ответить | Правка | ^ к родителю #5 | Наверх | Cообщить модератору

16. "Выпуск GNU Wget 1.20" +/–

Сообщение от Аноним (25), 30-Ноя-18, 13:26

Опять лохи со своим curl. Я посмотрю как вы отмиррорите сайт с рекурсивной обработкой, ограничением по глубине и фильтрацией по регексам.

Ответить | Правка | ^ к родителю #8 | Наверх | Cообщить модератору

60. "Выпуск GNU Wget 1.20" –1 +/–

Сообщение от Аноним (59), 30-Ноя-18, 20:11

Ну как вооружившись python+pycurl+re+html5(парсер от гугл) чего ты там еще сказал надо сделать? Ты главное деньги подготовь и все тебе напишут будет. Любые извращения за деньги ;) За дополнительную плату можно собрать старый код на старом ядре на старом железе в мокром подвале и т.д.

Ответить | Правка | ^ к родителю #16 | Наверх | Cообщить модератору

68. "Выпуск GNU Wget 1.20" +/–

Сообщение от Аноним (-), 30-Ноя-18, 21:07

я на одном perl сделаю все что надо и не надо, без жирных python и прочей требухи

Ответить | Правка | ^ к родителю #60 | Наверх | Cообщить модератору

73. "Выпуск GNU Wget 1.20" +/–

Сообщение от Анонн (?), 30-Ноя-18, 22:21

> без жирных python и прочей требухи
Что там с youtube-dl (используется для проигрывания в коди/mpv/небраузере не только тытруба, но и пары сотен других ресурсов), уже наконец на сишку или хотя бы на перл переписали?

Ответить | Правка | ^ к родителю #68 | Наверх | Cообщить модератору

74. "Выпуск GNU Wget 1.20" +/–

Сообщение от Аноним (74), 01-Дек-18, 03:34

> youtube-dl..уже наконец на сишку или хотя бы на перл переписали?
зачем?

Ответить | Правка | ^ к родителю #73 | Наверх | Cообщить модератору

80. "Выпуск GNU Wget 1.20" +/–

Сообщение от Анонн (?), 01-Дек-18, 19:35

>> youtube-dl..уже наконец на сишку или хотя бы на перл переписали?
> зачем?
За этим:
> я на одном perl сделаю все что надо и не надо, без жирных python и прочей требухи
>

Ответить | Правка | ^ к родителю #74 | Наверх | Cообщить модератору

62. "Выпуск GNU Wget 1.20" +1 +/–

Сообщение от Zulu (?), 30-Ноя-18, 20:13

человек, у которого бывает задача "отмиррорить сайт wget'ом", называет кого-то лохом. Opennet продолжает доставлять.

Ответить | Правка | ^ к родителю #16 | Наверх | Cообщить модератору

67. "Выпуск GNU Wget 1.20" +/–

Сообщение от Аноним (-), 30-Ноя-18, 21:06

Хорошо что у вас мышление ограничено вашим кругозором.

Ответить | Правка | ^ к родителю #62 | Наверх | Cообщить модератору

66. "Выпуск GNU Wget 1.20" –1 +/–

Сообщение от Анонн (?), 30-Ноя-18, 21:01

> Опять лохи со своим curl. Я посмотрю как вы отмиррорите сайт с
> рекурсивной обработкой, ограничением по глубине и фильтрацией по регексам.
Опять лохи со своими велосипедами и гироскутерами, а не карьерными самосвалами.
Я посмотрю, как вы будете 40 тонн песка за раз на них возить, ха!
https://www.cvedetails.com/vulnerability-list/vendor_id-72/p...
vs.
https://www.cvedetails.com/vulnerability-list/vendor_id-2852...

Ответить | Правка | ^ к родителю #16 | Наверх | Cообщить модератору

18. "Выпуск GNU Wget 1.20" +/–

Сообщение от Изи (?), 30-Ноя-18, 13:28

Мини браузер это links и lynx кстати их тоже можно использовать как качалки.

Ответить | Правка | ^ к родителю #8 | Наверх | Cообщить модератору

21. "Выпуск GNU Wget 1.20" –1 +/–

Сообщение от Ilya Indigo (ok), 30-Ноя-18, 13:31

> Мини браузер это links и lynx кстати их тоже можно использовать как
> качалки.
Под мини браузером я имел ввиду инструмент для обращения к API и для тестирования web-сервера.
Автор просил кратко.

Ответить | Правка | ^ к родителю #18 | Наверх | Cообщить модератору

27. "Выпуск GNU Wget 1.20" +/–

Сообщение от Аноним (25), 30-Ноя-18, 13:38

> инструмент для обращения к API и для тестирования web-сервера
> libwww же

Ответить | Правка | ^ к родителю #21 | Наверх | Cообщить модератору

34. "Выпуск GNU Wget 1.20" +1 +/–

Сообщение от Andrey Mitrofanov (?), 30-Ноя-18, 13:52

>инструмент для обращения к API и
> для тестирования web-сервера.
wget -dO - http://www.opennet.ru/ 2>&1 |less
Или Вам "быстро" PUT-ов/POST-ов/REST-ов?  Месье эстет.

Ответить | Правка | ^ к родителю #21 | Наверх | Cообщить модератору

14. "Выпуск GNU Wget 1.20" –2 +/–

Сообщение от Изи (?), 30-Ноя-18, 13:14

Начнём с того что может он и не нужен, но идёт в убунте из коробки. Поэтому и нужен.

Ответить | Правка | ^ к родителю #5 | Наверх | Cообщить модератору

17. "Выпуск GNU Wget 1.20" +/–

Сообщение от Аноним (25), 30-Ноя-18, 13:27

Ты сам не нужен! Чем backup'ы делат? Вручную по url через curl? - Вот мне делать нефиг.

Ответить | Правка | ^ к родителю #14 | Наверх | Cообщить модератору

19. "Выпуск GNU Wget 1.20" +/–

Сообщение от Изи (?), 30-Ноя-18, 13:29

Ты наверно ветку не читал, но из коробки идёт wget. А бекапы делаются через rsync оленюшко.

Ответить | Правка | ^ к родителю #17 | Наверх | Cообщить модератору

23. "Выпуск GNU Wget 1.20" +/–

Сообщение от Аноним (25), 30-Ноя-18, 13:34

Покажешь как сделать backup контента сайта через rsync с рекурсивной обработкой, ограничением по глубине и фильтрацией по регексам?

Ответить | Правка | ^ к родителю #19 | Наверх | Cообщить модератору

37. "Выпуск GNU Wget 1.20" +/–

Сообщение от нах (?), 30-Ноя-18, 14:21

быстро слить структурку вложенных каталожков (или вообще то-незнаю-что, но есть линк на верхний ресурс) - wget.
подергать очередной уродливый api - curl.

Ответить | Правка | ^ к родителю #5 | Наверх | Cообщить модератору

9. "Выпуск GNU Wget 1.20" –2 +/–

Сообщение от Аноним (9), 30-Ноя-18, 12:27

wget - для старых пердунов, а curl - для продвинутой молодёжи

Ответить | Правка | ^ к родителю #0 | Наверх | Cообщить модератору

12. "Выпуск GNU Wget 1.20" –1 +/–

Сообщение от Andrey Mitrofanov (?), 30-Ноя-18, 13:03

> wget - для старых пердунов, а curl - для продвинутой молодёжи
Молодые и[-ноходц-]ы выбирают [_      ].

Ответить | Правка | ^ к родителю #9 | Наверх | Cообщить модератору

20. "Выпуск GNU Wget 1.20" –1 +/–

Сообщение от Аноним (25), 30-Ноя-18, 13:30

> wget - для старых пердунов, а curl - для продвинутой молодёжи
wget для тех у кого задачи не решаются через curl, а curl для нубов которым его вполне хватает.
// пофиксил, не благодари

Ответить | Правка | ^ к родителю #9 | Наверх | Cообщить модератору

40. "Выпуск GNU Wget 1.20" –1 +/–

Сообщение от Аноним (9), 30-Ноя-18, 14:59

curl легко может заменить wget, а вот проделать обратное не получится

Ответить | Правка | ^ к родителю #20 | Наверх | Cообщить модератору

43. "Выпуск GNU Wget 1.20" +/–

Сообщение от Аноним (41), 30-Ноя-18, 15:03

Только если есть bash и sed. Или perl. Или другой скриптовый язык.

Ответить | Правка | ^ к родителю #40 | Наверх | Cообщить модератору

49. "Выпуск GNU Wget 1.20" –3 +/–

Сообщение от аноним3 (?), 30-Ноя-18, 16:48

давайте все на GO)))) или rubi на худой конец))) и вообще на что угодно только не верблюда))) ахахах

Ответить | Правка | ^ к родителю #43 | Наверх | Cообщить модератору

55. "Выпуск GNU Wget 1.20" –3 +/–

Сообщение от Аноним (-), 30-Ноя-18, 18:10

> curl легко может
s/легко/не легко/
s/может/не может/
пофиксил, не благодари

Ответить | Правка | ^ к родителю #40 | Наверх | Cообщить модератору

56. "Выпуск GNU Wget 1.20" +1 +/–

Сообщение от Акакжев (?), 30-Ноя-18, 18:23

Семантика сохранилась.

Ответить | Правка | ^ к родителю #55 | Наверх | Cообщить модератору

69. "Выпуск GNU Wget 1.20" +/–

Сообщение от Аноним (-), 30-Ноя-18, 21:08

+запятую

Ответить | Правка | ^ к родителю #56 | Наверх | Cообщить модератору

86. "Выпуск GNU Wget 1.20" +/–

Сообщение от Andrey Mitrofanov (?), 03-Дек-18, 13:09

> Семантика сохранилась.
С одной стороны да https://ru.wikipedia.org/wiki/%D0%97%D0%...
, сдругой стороны нет http://progstone.narod.ru/reciprocality/r2/
.
" И тут снова два варианта. " // " С одной стороны гриба... "

Ответить | Правка | ^ к родителю #56 | Наверх | Cообщить модератору

88. "Выпуск GNU Wget 1.20" +/–

Сообщение от Акакжев (?), 03-Дек-18, 15:48

>> Семантика сохранилась.
> С одной стороны да https://ru.wikipedia.org/wiki/п≈п╟п╨п╬п╫_п╢п╡п╬п╧п╫п╬пЁп╬_п╬я┌я─п╦я├п╟п╫п╦я▐
> , сдругой стороны нет http://progstone.narod.ru/reciprocality/r2/
> .
> " И тут снова два варианта. " // " С одной стороны
> гриба... "
Стакан априори наполовину полон.
— Почему бы по этому поводу нам не выпить по 50 капель из бутылки Клейна?
— Почему бы и нет?
— Ну что ж... нет, так нет.

Ответить | Правка | ^ к родителю #86 | Наверх | Cообщить модератору

11. "Выпуск GNU Wget 1.20" +3 +/–

Сообщение от гтщс_г34 (?), 30-Ноя-18, 12:56

--retry-on-host-error << Несколько лет назад, когда канал передачи данных была плохая, я очень нуждался в этой опции. Думаю и щас она понадобится. Спасибо за пост.

Ответить | Правка | ^ к родителю #0 | Наверх | Cообщить модератору

24. "Выпуск GNU Wget 1.20" –1 +/–

Сообщение от Аноним (22), 30-Ноя-18, 13:35

> я очень нуждался в этой опции
ее бы хорошо в git-clone(fetch) встроить. С гитхаба частенько не качается

Ответить | Правка | ^ к родителю #11 | Наверх | Cообщить модератору

35. "Выпуск GNU Wget 1.20" +/–

Сообщение от Andrey Mitrofanov (?), 30-Ноя-18, 14:03

>гитхаба частенько не качается
Копи денежку на платный акк -- скоро от Микрософта!

Ответить | Правка | ^ к родителю #24 | Наверх | Cообщить модератору

82. "Выпуск GNU Wget 1.20" –1 +/–

Сообщение от Аноним (82), 02-Дек-18, 05:45

ты не понял, мне приходится зеркалить нужные либы к себе со всяких неработающих помоек типа github. Чем быстрее мс начнет собирать денежки за воздух, тем быстрее гх сдохнет, аминь

Ответить | Правка | ^ к родителю #35 | Наверх | Cообщить модератору

38. "Выпуск GNU Wget 1.20" +2 +/–

Сообщение от Аноним (-), 30-Ноя-18, 14:23

wget https://ftp.gnu.org/gnu/wget/wget-1.20.tar.gz

Ответить | Правка | ^ к родителю #0 | Наверх | Cообщить модератору

47. "Выпуск GNU Wget 1.20" +1 +/–

Сообщение от Аноним (47), 30-Ноя-18, 15:41

Для загрузки исходников wget скачайте их с нашего сайта с помощью wget.

Ответить | Правка | ^ к родителю #38 | Наверх | Cообщить модератору

48. "Выпуск GNU Wget 1.20" +1 +/–

Сообщение от Аноним (48), 30-Ноя-18, 16:15

Старая дурацкая шутка.
Распакуйте новый unzip старой версией unzip.
Скомпилируйте новый gcc старой версией gcc.
Скачайте браузер другим браузером.
И не забудьте обновить TLS-сертификаты через TLS-соединение.

Ответить | Правка | ^ к родителю #38 | Наверх | Cообщить модератору

50. "Выпуск GNU Wget 1.20" +/–

Сообщение от th3m3 (ok), 30-Ноя-18, 17:24

Или в догонку - чтобы установить драйвера на модем, нужно вставить диск с драйверами в CD-привод, а драйвера для CD-привода в интернете...

Ответить | Правка | ^ к родителю #48 | Наверх | Cообщить модератору

51. "Выпуск GNU Wget 1.20" +2 +/–

Сообщение от аноним3 (?), 30-Ноя-18, 17:50

знаете вот так и переходят на линукс))) дров нет, сети нет, а винда не держит видео и звук. и тут хоп и дист линукса на болванке))))) и там все работает из коробки. как минимум комп)))) да было время)))

Ответить | Правка | ^ к родителю #50 | Наверх | Cообщить модератору

57. "Выпуск GNU Wget 1.20" –1 +/–

Сообщение от Акакжев (?), 30-Ноя-18, 18:27

Помню драйвера для CD-приводов, были они на дискетах и для DOS.

Ответить | Правка | ^ к родителю #50 | Наверх | Cообщить модератору

58. "Выпуск GNU Wget 1.20" –1 +/–

Сообщение от аноним3 (?), 30-Ноя-18, 18:33

вот этого не застал))) но доки для института на таких таскал))) потом уже на флешке)) 256 мб была .... крутота))) а теперь в ноуте одной оперативы больше чем весь жесткий тогда. самое смешное что все зря. ща если на них мандриву 2005 или кнопих пихнуть эт наверно как дос сейчас будет)))

Ответить | Правка | ^ к родителю #57 | Наверх | Cообщить модератору

63. "Выпуск GNU Wget 1.20" +2 +/–

Сообщение от Аноним (59), 30-Ноя-18, 20:15

Ох уж эти молодые совсем ничего не знают. А я помню одна женьщина загружалась 45 минут с сети ...

Ответить | Правка | ^ к родителю #58 | Наверх | Cообщить модератору

72. "Выпуск GNU Wget 1.20" +1 +/–

Сообщение от Аноним3 (?), 30-Ноя-18, 22:15

не было же еще вроде телепорта))) или уже завезли?))) а если по делу то wget стабильнее, по крайней мере на простораз за кольцом мкад)))

Ответить | Правка | ^ к родителю #63 | Наверх | Cообщить модератору

70. "Выпуск GNU Wget 1.20" +/–

Сообщение от Аноним (70), 30-Ноя-18, 21:30

HTTP/3/QUIC не завезли?

Ответить | Правка | ^ к родителю #0 | Наверх | Cообщить модератору

75. "Выпуск GNU Wget 1.20" –1 +/–

Сообщение от Gannet (ok), 01-Дек-18, 04:39

Wget встроен в ОСь. Его используют пакетные менеджеры. От него ни куда не деться. Но для собственных загрузок я использую Aria2 с её фичами.

Ответить | Правка | ^ к родителю #0 | Наверх | Cообщить модератору

81. "Выпуск GNU Wget 1.20" –2 +/–

Сообщение от Аноним (81), 01-Дек-18, 21:04

Эх, если бы кто-то научил wget нормально скачивать файлы... Цены бы ему не было...
А так, ни нормальной ntlm-авторизации, ни socks5 proxy, ничего...
В общем, никому не нужный пережиток 90-х.

Ответить | Правка | ^ к родителю #0 | Наверх | Cообщить модератору

84. "Выпуск GNU Wget 1.20" –1 +/–

Сообщение от Аноним (84), 02-Дек-18, 15:08

В отличие от wget, aria2 умеет в многопоток и качать торренты.

Ответить | Правка | ^ к родителю #0 | Наверх | Cообщить модератору

87. "Выпуск GNU Wget 1.20" +/–

Сообщение от Andrey Mitrofanov (?), 03-Дек-18, 13:13

> В отличие от wget, aria2 умеет в многопоток и качать торренты.
git:// с докачкой научится -- пусть заходит.

Ответить | Правка | ^ к родителю #84 | Наверх | Cообщить модератору

Архив | Удалить

Рекомендовать для помещения в FAQ | Индекс форумов | Темы | Пред. тема | След. тема

Партнёры:

Хостинг:

Закладки на сайте
Проследить за страницей

Created 1996-2024 by Maxim Chirkov
Добавить, Поддержать, Вебмастеру

4. "Выпуск GNU Wget 1.20"	–14 +/–
Сообщение от Аноним (4), 30-Ноя-18, 10:47
Так оно ж уже устарело, curl - наше все?
Ответить \| Правка \| ^ к родителю #0 \| Наверх \| Cообщить модератору


	10. "Выпуск GNU Wget 1.20"	+5 +/–
	Сообщение от user (??), 30-Ноя-18, 12:50
	https://curl.haxx.se/docs/faq.html#What_is_curl_not Curl is not a wget clone. That is a common misconception. Never, during curl's development, have we intended curl to replace wget or compete on its market. Curl is targeted at single-shot file transfers.
	Ответить \| Правка \| ^ к родителю #4 \| Наверх \| Cообщить модератору


	22. "Выпуск GNU Wget 1.20"	–3 +/–
	Сообщение от Аноним (22), 30-Ноя-18, 13:32
	> Curl is targeted at single-shot file transfers. И... чем это отличается от wget?
	Ответить \| Правка \| ^ к родителю #10 \| Наверх \| Cообщить модератору


	25. "Выпуск GNU Wget 1.20"	–1 +/–
	Сообщение от Аноним (25), 30-Ноя-18, 13:36
	> И... чем это отличается от wget? вот я тут и пишу: https://www.opennet.ru/openforum/vsluhforumID3/115929.html#20 что > а curl для нубов > нубов Еще под анонимом пишут. Заведите уже учетку, вам это нужно, т.к. без неё вы совсем никто.
	Ответить \| Правка \| ^ к родителю #22 \| Наверх \| Cообщить модератору


	31. "Выпуск GNU Wget 1.20"	+1 +/–
	Сообщение от Andrey Mitrofanov (?), 30-Ноя-18, 13:46
	>> Curl is targeted at single-shot file transfers. > И... чем это отличается от wget? Он умеет в докачку[i]!
	Ответить \| Правка \| ^ к родителю #22 \| Наверх \| Cообщить модератору


	44. "Выпуск GNU Wget 1.20"	+/–
	Сообщение от user (??), 30-Ноя-18, 15:19
	facepalm RTFM https://www.gnu.org/software/wget/manual/html_node/Download-... wget -c
	Ответить \| Правка \| ^ к родителю #31 \| Наверх \| Cообщить модератору


	45. "Выпуск GNU Wget 1.20"	+/–
	Сообщение от Andrey Mitrofanov (?), 30-Ноя-18, 15:23
	> facepalm Извините, я непонтяно с первого раза. Конечно, вгет "отличается" докачкой от одно-шотового курла. > RTFM > wget -c
	Ответить \| Правка \| ^ к родителю #44 \| Наверх \| Cообщить модератору


	64. "Выпуск GNU Wget 1.20"	+/–
	Сообщение от Аноним Анонимович Анонимов (?), 30-Ноя-18, 20:33
	cURL тоже умеет в продолжение закачки. curl -L -O -C url
	Ответить \| Правка \| ^ к родителю #45 \| Наверх \| Cообщить модератору


	46. "Выпуск GNU Wget 1.20"	+1 +/–
	Сообщение от evkogan (?), 30-Ноя-18, 15:34
	Они разные. curl умеет авторизацию на проксе NTLM. пару лет назад wget не умел точно. Зато wget умеет докачку и выкачку кучи файлов рекурсивно, по списку и т.п. Сейчас вон еще регекспы допилили. Но если надо дергать API, то это лучше делать curl'ом. Это тот случай когда 2 утилиты дополняют друг друга.
	Ответить \| Правка \| ^ к родителю #22 \| Наверх \| Cообщить модератору


	71. "Выпуск GNU Wget 1.20"	+1 +/–
	Сообщение от commiethebeastie (ok), 30-Ноя-18, 21:42
	Curl в первую очередь - библиотека.
	Ответить \| Правка \| ^ к родителю #22 \| Наверх \| Cообщить модератору

5. "Выпуск GNU Wget 1.20"	–3 +/–
Сообщение от Аноним (5), 30-Ноя-18, 11:29
А зачем нужен wget, если есть curl? Если можно, кратенько для не очень сообразительных. Спасибо.
Ответить \| Правка \| ^ к родителю #0 \| Наверх \| Cообщить модератору


	7. "Выпуск GNU Wget 1.20"	+1 +/–
	Сообщение от АнониМ (ok), 30-Ноя-18, 11:49
	wget монолитный, у него минимум зависимостей. это иногда бывает удобно для простого скриптового использования. так же сложилось впечатление, что wget лучше работает на плохих каналах, но это сейчас фиг встретишь.
	Ответить \| Правка \| ^ к родителю #5 \| Наверх \| Cообщить модератору


	13. "Выпуск GNU Wget 1.20"	+8 +/–
	Сообщение от Аноним (13), 30-Ноя-18, 13:12
	>лучше работает на плохих каналах, но это сейчас фиг встретишь За пределами МКАДа и не такое встретить можно.
	Ответить \| Правка \| ^ к родителю #7 \| Наверх \| Cообщить модератору


	15. "Выпуск GNU Wget 1.20"	+/–
	Сообщение от Изи (?), 30-Ноя-18, 13:20
	На действительно плохих каналах ни curl, ни wget не актуальны.
	Ответить \| Правка \| ^ к родителю #13 \| Наверх \| Cообщить модератору


	26. "Выпуск GNU Wget 1.20"	+/–
	Сообщение от Аноним (25), 30-Ноя-18, 13:37
	> $ man wget > -t number > --tries=number > Set number of retries to number. Specify 0 or inf for infinite retrying. The default ...
	Ответить \| Правка \| ^ к родителю #15 \| Наверх \| Cообщить модератору


	33. "Выпуск GNU Wget 1.20"	–4 +/–
	Сообщение от Изи (?), 30-Ноя-18, 13:52
	И что это перекачивать сначала до посинения. links кстати умеет в докачку)
	Ответить \| Правка \| ^ к родителю #26 \| Наверх \| Cообщить модератору


	41. "Выпуск GNU Wget 1.20"	+/–
	Сообщение от Аноним (41), 30-Ноя-18, 15:01
	links-у надо каждый раз запускать скачивание руками.
	Ответить \| Правка \| ^ к родителю #33 \| Наверх \| Cообщить модератору


	65. "Выпуск GNU Wget 1.20"	–1 +/–
	Сообщение от Аноним Анонимович Анонимов (?), 30-Ноя-18, 20:35
	Будет пытаться скачать 999 раз с места разрыва без полного скачивания заново. curl -L -O --retry 999 --retry-max-time 0 -C - http://url
	Ответить \| Правка \| ^ к родителю #33 \| Наверх \| Cообщить модератору


	42. "Выпуск GNU Wget 1.20"	–1 +/–
	Сообщение от Аноним (41), 30-Ноя-18, 15:02
	> --tries=number А есть опция автоматически рвать связь при падении скорости ниже заданного порога за заданное время?
	Ответить \| Правка \| ^ к родителю #26 \| Наверх \| Cообщить модератору


	52. "Выпуск GNU Wget 1.20"	+/–
	Сообщение от хрю (?), 30-Ноя-18, 17:50
	>А есть опция автоматически рвать связь при падении скорости ниже заданного порога за заданное время? Напрямую нет, но для многих ситуаций можно сделать костыль, от read-timeout, до wait-random, если скорость снижают принудительно при "наглой" скачке. До скриптового убийства по timeout и reконнкета.
	Ответить \| Правка \| ^ к родителю #42 \| Наверх \| Cообщить модератору


	59. "Выпуск GNU Wget 1.20"	–2 +/–
	Сообщение от Аноним (59), 30-Ноя-18, 20:09
	Вот кстати libcurl есть, а libwget?
	Ответить \| Правка \| ^ к родителю #52 \| Наверх \| Cообщить модератору


	78. "Выпуск GNU Wget 1.20"	+/–
	Сообщение от АнониМ (ok), 01-Дек-18, 10:30
	>Вот кстати libcurl есть, а libwget? в первых строках письма было - wget это монолит с минимумом зависимостей.
	Ответить \| Правка \| ^ к родителю #59 \| Наверх \| Cообщить модератору


	39. "Выпуск GNU Wget 1.20"	+/–
	Сообщение от Аноним (41), 30-Ноя-18, 14:59
	> wget монолитный cygwin-овский тянет библиотеки cygwin. GNU-Win-овский тянет библиотеки libcharset1.dll, libiconv2.dll, libintl3.dll, readline5.dll и zlib1.dll. Плюс SSL, если нужен. Из перечисленного curl требует только SSL. > wget лучше работает на плохих каналах На плохих каналах, где связь может стопориться и висеть, не обрываясь, для скачивания больших файлов полезно запускать curl в цикле с ключами -Y, -y и -C - . И даже без -C для сайтов, не поддерживающих докачку, бывает полезно -- когда может висеть дольше, чем скачает гигабайт заново. Wget умеет докачивать, но умеет ли он при падении скорости рвать связь и переподключаться? Wget полезен именно в качестве комбайна. Где curl-у нужен скрипт-обвязка, wget-у иногда хватает 1 опции в командной строке. Таймстэмпы, локализация линков, "паук"... Правда, далеко не все ситуации авторы предусмотрели, а что предусмотрели -- не всегда продумали до конца. Например, wget не умеет НЕ скачивать html, запрещённый фильтром -X. Если видит -- обязательно скачает, потом сверится и удалит.
	Ответить \| Правка \| ^ к родителю #7 \| Наверх \| Cообщить модератору


	76. "Выпуск GNU Wget 1.20"	+/–
	Сообщение от Аноним (76), 01-Дек-18, 06:17
	У курла тоже нет неотключаемых зависмостей, и сделать статический бинарник просто
	Ответить \| Правка \| ^ к родителю #7 \| Наверх \| Cообщить модератору


	8. "Выпуск GNU Wget 1.20"	–1 +/–
	Сообщение от Ilya Indigo (ok), 30-Ноя-18, 12:20
	wget - качалка curl - минибраузер
	Ответить \| Правка \| ^ к родителю #5 \| Наверх \| Cообщить модератору


	16. "Выпуск GNU Wget 1.20"	+/–
	Сообщение от Аноним (25), 30-Ноя-18, 13:26
	Опять лохи со своим curl. Я посмотрю как вы отмиррорите сайт с рекурсивной обработкой, ограничением по глубине и фильтрацией по регексам.
	Ответить \| Правка \| ^ к родителю #8 \| Наверх \| Cообщить модератору


	60. "Выпуск GNU Wget 1.20"	–1 +/–
	Сообщение от Аноним (59), 30-Ноя-18, 20:11
	Ну как вооружившись python+pycurl+re+html5(парсер от гугл) чего ты там еще сказал надо сделать? Ты главное деньги подготовь и все тебе напишут будет. Любые извращения за деньги ;) За дополнительную плату можно собрать старый код на старом ядре на старом железе в мокром подвале и т.д.
	Ответить \| Правка \| ^ к родителю #16 \| Наверх \| Cообщить модератору


	68. "Выпуск GNU Wget 1.20"	+/–
	Сообщение от Аноним (-), 30-Ноя-18, 21:07
	я на одном perl сделаю все что надо и не надо, без жирных python и прочей требухи
	Ответить \| Правка \| ^ к родителю #60 \| Наверх \| Cообщить модератору


	73. "Выпуск GNU Wget 1.20"	+/–
	Сообщение от Анонн (?), 30-Ноя-18, 22:21
	> без жирных python и прочей требухи Что там с youtube-dl (используется для проигрывания в коди/mpv/небраузере не только тытруба, но и пары сотен других ресурсов), уже наконец на сишку или хотя бы на перл переписали?
	Ответить \| Правка \| ^ к родителю #68 \| Наверх \| Cообщить модератору


	74. "Выпуск GNU Wget 1.20"	+/–
	Сообщение от Аноним (74), 01-Дек-18, 03:34
	> youtube-dl..уже наконец на сишку или хотя бы на перл переписали? зачем?
	Ответить \| Правка \| ^ к родителю #73 \| Наверх \| Cообщить модератору