Linux必会100个命令（六十）curl

在Linux中curl是一个利用URL规则在命令行下工作的文件传输工具，可以说是一款很强大的http命令行工具。它支持文件的上传和下载，是综合传输工具。

curl选项比较多，使用man curl或者curl -h获取帮助信息。

-a/--append                                上传文件时，附加到目标文件
--anyauth                                  可以使用“任何”身份验证方法
--basic                                    使用HTTP基本验证
-B/--use-ascii                             使用ASCII文本传输
-d/--data <data>                           HTTP POST方式传送数据
--data-ascii <data>                        以ascii的方式post数据
--data-binary <data>                       以二进制的方式post数据
--negotiate                                使用HTTP身份验证
--digest                                   使用数字身份验证
--disable-eprt                             禁止使用EPRT或LPRT
--disable-epsv                             禁止使用EPSV
--egd-file <file>                          为随机数据(SSL)设置EGD socket路径
--tcp-nodelay                              使用TCP_NODELAY选项
-E/--cert <cert[:passwd]>                  客户端证书文件和密码 (SSL)
--cert-type <type>                         证书文件类型 (DER/PEM/ENG) (SSL)
--key <key>                                私钥文件名 (SSL)
--key-type <type>                          私钥文件类型 (DER/PEM/ENG) (SSL)
--pass  <pass>                             私钥密码 (SSL)
--engine <eng>                             加密引擎使用 (SSL). "--engine list" for list
--cacert <file>                            CA证书 (SSL)
--capath <directory>                       CA目   (made using c_rehash) to verify peer against (SSL)
--ciphers <list>                           SSL密码
--compressed                               要求返回是压缩的形势 (using deflate or gzip)
--connect-timeout <seconds>                设置最大请求时间
--create-dirs                              建立本地目录的目录层次结构
--crlf                                     上传是把LF转变成CRLF
--ftp-create-dirs                          如果远程目录不存在，创建远程目录
--ftp-method [multicwd/nocwd/singlecwd]    控制CWD的使用
--ftp-pasv                                 使用 PASV/EPSV 代替端口
--ftp-skip-pasv-ip                         使用PASV的时候,忽略该IP地址
--ftp-ssl                                  尝试用 SSL/TLS 来进行ftp数据传输
--ftp-ssl-reqd                             要求用 SSL/TLS 来进行ftp数据传输
-F/--form <name=content>                   模拟http表单提交数据
-form-string <name=string>                 模拟http表单提交数据
-g/--globoff                               禁用网址序列和范围使用{}和[]
-G/--get                                   以get的方式来发送数据
-h/--help                                  帮助
-H/--header <line>                         自定义头信息传递给服务器
--ignore-content-length                    忽略的HTTP头信息的长度
-i/--include                               输出时包括protocol头信息
-I/--head                                  只显示文档信息
-j/--junk-session-cookies                  读取文件时忽略session cookie
--interface <interface>                    使用指定网络接口/地址
--krb4 <level>                             使用指定安全级别的krb4
-k/--insecure                              允许不使用证书到SSL站点
-K/--config                                指定的配置文件读取
-l/--list-only                             列出ftp目录下的文件名称
--limit-rate <rate>                        设置传输速度
--local-port<NUM>                          强制使用本地端口号
-m/--max-time <seconds>                    设置最大传输时间
--max-redirs <num>                         设置最大读取的目录数
--max-filesize <bytes>                     设置最大下载的文件总量
-M/--manual                                显示全手动
-n/--netrc                                 从netrc文件中读取用户名和密码
--netrc-optional                           使用 .netrc 或者 URL来覆盖-n
--ntlm                                     使用 HTTP NTLM 身份验证
-N/--no-buffer                             禁用缓冲输出
-p/--proxytunnel                           使用HTTP代理
--proxy-anyauth                            选择任一代理身份验证方法
--proxy-basic                              在代理上使用基本身份验证
--proxy-digest                             在代理上使用数字身份验证
--proxy-ntlm                               在代理上使用ntlm身份验证
-P/--ftp-port <address>                    使用端口地址，而不是使用PASV
-Q/--quote <cmd>                           文件传输前，发送命令到服务器
--range-file                               读取（SSL）的随机文件
-R/--remote-time                           在本地生成文件时，保留远程文件时间
--retry <num>                              传输出现问题时，重试的次数
--retry-delay <seconds>                    传输出现问题时，设置重试间隔时间
--retry-max-time <seconds>                 传输出现问题时，设置最大重试时间
-S/--show-error                            显示错误
--socks4 <host[:port]>                     用socks4代理给定主机和端口
--socks5 <host[:port]>                     用socks5代理给定主机和端口
-t/--telnet-option <OPT=val>               Telnet选项设置
--trace <file>                             对指定文件进行debug
--trace-ascii <file>                       Like --跟踪但没有hex输出
--trace-time                               跟踪/详细输出时，添加时间戳
--url <URL>                                Spet URL to work with
-U/--proxy-user <user[:password]>          设置代理用户名和密码
-V/--version                       显示版本信息
-X/--request <command>             指定什么命令
-y/--speed-time                    放弃限速所要的时间。默认为30
-Y/--speed-limit                   停止传输速度的限制，速度时间'秒
-z/--time-cond                     传送时间设置
-0/--http1.0                       使用HTTP 1.0
-1/--tlsv1                         使用TLSv1（SSL）
-2/--sslv2                         使用SSLv2的（SSL）
-3/--sslv3                         使用的SSLv3（SSL）
--3p-quote                         like -Q for the source URL for 3rd party transfer
--3p-url                           使用url，进行第三方传送
--3p-user                          使用用户名和密码，进行第三方传送
-4/--ipv4                          使用IP4
-6/--ipv6                          使用IP6

 默认情况下，cur使用get方式发送参数

例如：

curl 
https://www.baidu.com/?tn=54093922_hao_pg

使用-d参数让curl使用post方式发送参数

例如：

curl -X POST -d 'tn=54093922_hao_pg' https://www.baidu.com

如果需要发送json格式参数，使用-H，-X，-d参数配合来实现

curl -H "Content-Type: application/json" -X POST -d '{"a1":123,"a2":"456"}' URL

-H代表header头，-X是指定什么类型请求(POST/GET/HEAD/DELETE/PUT/PATCH)，-d代表传输什么数据。

使用-o下载文件。

例如：保存www.xxx.com网页到xxx.html

 curl -o xxx.html http://www.xxx.com  或 curl http://www.xxx.com >> xxx.html

测试网页返回值。例如：

 如图返回值200

保存http的response里面的cookie信息。内置option:-c（小写）
 curl -c cookiec.txt  http://www.xxx.com

保存http的response里面的header信息。内置option: -D

curl -D cookied.txt http://www.xxx.com

使用保存的cookie信息。内置option: -b

 curl -b cookiec.txt http://www.xxx.com

内置option:-A可以让我们指定浏览器去访问网站

 curl -A "Mozilla/4.0 (compatible; MSIE 8.0; Windows NT 5.0)" http://www.xxx.com

curl中内置option：-e可以让我们设定referer

curl -e "www.xxx.com" http://www.yyy.com

这样就会让服务器其以为你是从www.xxx.com点击某个链接过来的

有时候下载图片可以能是前面的部分名称是一样的，就最后的尾椎名不一样

 curl -O http://www.yyy.com/xxx[1-5].JPG

有时候下载的东西会比较大，这个时候我们可以分段下载。使用内置option：-r

 curl -r 0-100 -o xxx_part1.zip http://www.linux.com/xxx.zip
 curl -r 100-200 -o xxx_part2.zip http://www.linux.com/xxx.zip
 curl -r 200- -o xxx_part3.zip http://www.linux.com/xxx.zip
 cat xxx_part* > xxx.zipxxx.zip

curl可以通过ftp下载文件，curl提供两种从ftp中下载的语法

 curl -O -u 用户名:密码 ftp://www.xxx.com/xxx.zip
 curl -O ftp://用户名:密码@www.xxx.com/xxx.zip

curl不仅仅可以下载文件，还可以上传文件。通过内置option:-T来实现

 curl -T dodo1.JPG -u 用户名:密码 ftp://www.xxx.com/upload

显示抓取错误

 curl -f http://www.xxx.com/displayerror