Linux curl 命令有哪些常见用法,命令行下载文件和发起网页请求的YYDS工具
Linux curl 命令有哪些常见用法?
curl是最流行的web请求工具,3大主流操作系统带有curl,一些手机移动端系统也提供了curl,通过命令行下载文件和发起网页请求,简单好用YYDS!
curl 是一种从服务器传输数据或向服务器传输数据的工具,使用的协议包括 协议(DICT、FILE、FTP、FTPS、GOPHER、HTTP、HTTPS、IMAP、 imaps、ldap、ldaps、pop3、pop3s、rtmp、rtsp、scp、sftp、smtp、smtps、 TELNET 和 TFTP)。该命令无需用户干预。
curl 提供了大量有用的功能,如支持代理、用户授权、访问FTP和TFTP上传下载、HTTP请求、SSL 连接、携带Cookie、文件传输断点续传、Metalink请求等。正如你在下文中看到的,curl支持的功能可谓大而全。
curl还提供了libcurl,以库的形式封装了所有与传输相关的功能。
curl 的用法规则
curl 命令允许您在 Linux 中通过命令行下载和上传数据。其语法如下:
curl [options] [URL...]
可通过curl --help 命令,就像大部分其他命令的--help那样,可以自助查询该命令的常见参数:
-d, --data <data> HTTP POST 数据 -f, --fail HTTP错误时安静地失败(完全不打印错误) -h, --help <category> 获取命令帮助 -i, --include 在输出中包含协议响应标头 -o, --output <file> 输出写入到文件而不是 stdout -O, --remote-name 将输出写入名为远程文件的文件中 -s, --安静模式 -T,--upload-file <file> 将本地文件传输到目的地 -u, --user <user:password> 服务器用户和密码 -A、--user-agent <name> 发送 User-Agent <name> 到服务器 -v,--verbose 使操的作反馈更加详尽显示 -V, --version 显示版本号
--help值显示部分参数。curl还支持很多高级功能,Linux下可通过:
man curl
命令查看完整的帮助文档对curl所有参数的解释(例如跟随重定向的-L参数,只在man curl 的完整帮助信息中有显示 )。
通过下面的例子,你可以更直观地了解curl的常见功能是如何工作的。
问题1:curl 命令如何工作?
curl的基本用法相当简单 —— 只需将 URL 作为输入传递给 curl 命令,然后将输出重定向到文件即可。
例如,将下载的文件数据保存为本地的ubuntu2204-64.torrent文件:
curl https://mirrors.aliyun.com/ubuntu-releases/23.04/ubuntu-23.04-desktop-amd64.iso.torrent > ubuntu2204-64.torrent
请注意,您也可以在此处使用 -o 选项(作为对比,linux的另一个著名下载工具wget的参数是-O,大O,而curl的是小o)。
-o, --output <file> Write output to <file> instead of stdout.
回到我们的示例,当数据下载到系统上的ubuntu2204-64.torrent文件中时,在命令行上生成了以下输出:
在操作过程中,curl 通常会显示进度表,显示传输的数据量、传输速度和预计剩余时间等。
默认情况下,curl 会将这些数据显示到终端。但如果你调用curl进行文件下载或显示下载内容到终端, 就会不显示进度表,以免把进度表和响应数据混在一起,扰乱输出。
如果你想在 HTTP POST 或 PUT 请求中使用进度表,你需要 使用 shell 重定向 (>)、-o [文件]或其他类似方法,就可以将输出和显示分离。例如:
$ curl https://linuxlibs.com > linuxlibs.html % Total % Received % Xferd Average Speed Time Time Time Current Dload Upload Total Spent Left Speed 100 2443 100 2443 0 0 16981 0 --:--:-- --:--:-- --:--:-- 17083
FTP 上传的情况则不同,因为该操作不会向终端显示任何响应数据。
问题2:如何使用 curl 下载多个文件?
只需按以下方式传递 URL:
curl -O [URL1] -O [URL2] -O [URL3] ...
下载时显示的进度条会包含多个文件的下载进度:
问题3:如何解决请求地址转移/重定向问题?
当你用curl 请求一些网站的 URL 时,可能会收到“已转移”(301 Moved)或“永久重定向(301 Moved Permanently)”等提示。这通常发生在访问的 URL 被重定向到其他 URL 时。例如,您打开一个网站(如 curl -I https://bing.com),它会显示重定向到你所在国家/地区的 URL(如 https://cn.bing.com)。
$ curl -I https://bing.com HTTP/2 301 content-length: 0 location: https://cn.bing.com/ accept-ch: Sec-CH-UA-Arch, …… Sec-CH-UA-Platform-Version x-msedge-ref: Ref A: …… date: …… Dec 2023 ……
如果希望 curl 跟随重定向,请改用 -L 命令行选项。
问题4:curl在下载文件中断后,如何继续从中断点恢复下载(断点续传)?
有时,下载会在两者之间中断。为了节省时间和数据,你希望再次尝试时,能从中断的点开始。Curl 允许你使用 -C 命令行选项来执行此操作。例如:
curl -C - -O http://releases.ubuntu.com/18.04/ubuntu-18.04-desktop-amd64.iso
图显示了 curl 命令在中断后恢复下载。
问题5:curl如何模拟浏览器发起下载请求,将请求结果保存到linuxlibs.index.html文件:
curl --user-agent "User-Agent: Mozilla/5.0 (Windows NT 10.0; Win64; x64) AppleWebKit/537.36 (KHTML, like Gecko) Chrome/118.0.0.0 Safari/537.36 Edg/118.0.2088.61" -o linuxlibs.index.html https://linuxlibs.com % Total % Received % Xferd Average Speed Time Time Time Current Dload Upload Total Spent Left Speed 100 36960 0 36960 0 0 13719 0 --:--:-- 0:00:02 --:--:-- 13719
原文地址:https://mp.weixin.qq.com/s?__biz=MzA3OTE1MDA2Mw==&mid=2450451340&idx=1&sn=16a1614accf30f96c9a2ae18dfc52f84
1.本站遵循行业规范,任何转载的稿件都会明确标注作者和来源;2.本站的原创文章,请转载时务必注明文章作者和来源,不尊重原创的行为我们将追究责任;3.作者投稿可能会经我们编辑修改或补充。