Linux curl 命令有哪些常见用法,命令行下载文件和发起网页请求的YYDS工具

系统 Linux
Curl是最流行的web请求工具,三大主流操作系统带有curl,一些手机移动端系统也提供了curl,通过命令行下载文件和发起网页请求,简单好用YYDS!

Linux curl 命令有哪些常见用法?

curl是最流行的web请求工具,3大主流操作系统带有curl,一些手机移动端系统也提供了curl,通过命令行下载文件和发起网页请求,简单好用YYDS!

curl 是一种从服务器传输数据或向服务器传输数据的工具,使用的协议包括 协议(DICT、FILE、FTP、FTPS、GOPHER、HTTP、HTTPS、IMAP、 imaps、ldap、ldaps、pop3、pop3s、rtmp、rtsp、scp、sftp、smtp、smtps、 TELNET 和 TFTP)。该命令无需用户干预。

curl 提供了大量有用的功能,如支持代理、用户授权、访问FTP和TFTP上传下载、HTTP请求、SSL 连接、携带Cookie、文件传输断点续传、Metalink请求等。正如你在下文中看到的,curl支持的功能可谓大而全。

curl还提供了libcurl,以库的形式封装了所有与传输相关的功能。

curl 的用法规则

curl 命令允许您在 Linux 中通过命令行下载和上传数据。其语法如下:

curl [options] [URL...]

可通过curl --help 命令,就像大部分其他命令的--help那样,可以自助查询该命令的常见参数:

 -d, --data <data> HTTP POST 数据
 -f, --fail HTTP错误时安静地失败(完全不打印错误)
 -h, --help <category> 获取命令帮助
 -i, --include 在输出中包含协议响应标头
 -o, --output <file> 输出写入到文件而不是 stdout
 -O, --remote-name 将输出写入名为远程文件的文件中
 -s, --安静模式
 -T,--upload-file <file> 将本地文件传输到目的地
 -u, --user <user:password> 服务器用户和密码
 -A、--user-agent <name> 发送 User-Agent <name> 到服务器
 -v,--verbose 使操的作反馈更加详尽显示
 -V, --version 显示版本号

--help值显示部分参数。curl还支持很多高级功能,Linux下可通过:

man curl

命令查看完整的帮助文档对curl所有参数的解释(例如跟随重定向的-L参数,只在man curl 的完整帮助信息中有显示 )。

通过下面的例子,你可以更直观地了解curl的常见功能是如何工作的。

问题1:curl 命令如何工作?

curl的基本用法相当简单 —— 只需将 URL 作为输入传递给 curl 命令,然后将输出重定向到文件即可。

例如,将下载的文件数据保存为本地的ubuntu2204-64.torrent文件:

curl https://mirrors.aliyun.com/ubuntu-releases/23.04/ubuntu-23.04-desktop-amd64.iso.torrent > ubuntu2204-64.torrent

请注意,您也可以在此处使用 -o 选项(作为对比,linux的另一个著名下载工具wget的参数是-O,大O,而curl的是小o)。

-o, --output <file>
Write output to <file> instead of stdout.

回到我们的示例,当数据下载到系统上的ubuntu2204-64.torrent文件中时,在命令行上生成了以下输出:

在操作过程中,curl 通常会显示进度表,显示传输的数据量、传输速度和预计剩余时间等。

默认情况下,curl 会将这些数据显示到终端。但如果你调用curl进行文件下载或显示下载内容到终端, 就会不显示进度表,以免把进度表和响应数据混在一起,扰乱输出。

如果你想在 HTTP POST 或 PUT 请求中使用进度表,你需要 使用 shell 重定向 (>)、-o [文件]或其他类似方法,就可以将输出和显示分离。例如:

$ curl https://linuxlibs.com > linuxlibs.html
  % Total    % Received % Xferd  Average Speed   Time    Time     Time  Current
                                 Dload  Upload   Total   Spent    Left  Speed
100  2443  100  2443    0     0  16981      0 --:--:-- --:--:-- --:--:-- 17083

FTP 上传的情况则不同,因为该操作不会向终端显示任何响应数据。

问题2:如何使用 curl 下载多个文件?

只需按以下方式传递 URL:

curl -O [URL1] -O [URL2] -O [URL3] ...

下载时显示的进度条会包含多个文件的下载进度:

问题3:如何解决请求地址转移/重定向问题?

当你用curl 请求一些网站的 URL 时,可能会收到“已转移”(301 Moved)或“永久重定向(301 Moved Permanently)”等提示。这通常发生在访问的 URL 被重定向到其他 URL 时。例如,您打开一个网站(如 curl -I https://bing.com),它会显示重定向到你所在国家/地区的 URL(如 https://cn.bing.com)。

$ curl -I  https://bing.com

HTTP/2 301
content-length: 0
location: https://cn.bing.com/
accept-ch: Sec-CH-UA-Arch, …… Sec-CH-UA-Platform-Version
x-msedge-ref: Ref A: ……
date: …… Dec 2023 ……

如果希望 curl 跟随重定向,请改用 -L 命令行选项。

问题4:curl在下载文件中断后,如何继续从中断点恢复下载(断点续传)?

有时,下载会在两者之间中断。为了节省时间和数据,你希望再次尝试时,能从中断的点开始。Curl 允许你使用 -C 命令行选项来执行此操作。例如:

curl -C - -O http://releases.ubuntu.com/18.04/ubuntu-18.04-desktop-amd64.iso

图显示了 curl 命令在中断后恢复下载。

问题5:curl如何模拟浏览器发起下载请求,将请求结果保存到linuxlibs.index.html文件:

curl --user-agent "User-Agent: Mozilla/5.0 (Windows NT 10.0; Win64; x64) AppleWebKit/537.36 (KHTML, like Gecko) Chrome/118.0.0.0 Safari/537.36 Edg/118.0.2088.61"  -o linuxlibs.index.html https://linuxlibs.com
  % Total    % Received % Xferd  Average Speed   Time    Time     Time  Current
                                 Dload  Upload   Total   Spent    Left  Speed
100 36960    0 36960    0     0  13719      0 --:--:--  0:00:02 --:--:-- 13719
责任编辑:赵宁宁 来源: 深入理解Linux
相关推荐

2017-03-03 10:10:15

2021-04-20 11:25:38

Linux命令文件

2015-12-16 16:01:13

2010-02-04 15:17:48

Linux wget

2010-06-07 14:45:37

Linux下载工具

2016-08-04 10:27:40

Linux文件下载网站浏览工具

2024-04-24 14:43:40

Linux命令

2010-07-20 14:27:46

Perl命令行

2017-06-15 10:32:56

OracleDBV命令行工具

2010-07-15 12:45:30

Perl命令行

2018-11-08 14:50:14

2010-07-15 10:47:22

Perl命令行

2021-05-20 12:16:17

Linux命令Axel

2020-12-11 06:44:16

命令行工具开发

2020-12-10 16:16:08

工具代码开发

2022-04-11 06:03:24

FdupesLinux命令行工具

2019-08-27 10:32:01

Linux操作系统Windows

2009-08-11 09:26:06

2010-09-25 09:10:38

JAVA虚拟机

2011-01-18 19:11:26

Postfix命令行
点赞
收藏

51CTO技术栈公众号