一点点关于HTTP的碎碎念

curl命令

curl命令是一个利用URL规则在命令行下工作的文件传输工具。它支持文件的上传和下载,所以是综合传输工具,但按传统,习惯称curl为下载工具。作为一款强力工具,curl支持包括HTTP、HTTPS、ftp等众多协议,还支持POST、cookies、认证、从指定偏移处下载部分文件、用户代理字符串、限速、文件大小、进度条等特征。

语法

curl [option] [url]

常见的option

-A/--user-agent <string>              设置用户代理发送给服务器
-b/--cookie <name=string/file>    cookie字符串或文件读取位置
-c/--cookie-jar <file>                    操作结束后把cookie写入到这个文件中
-C/--continue-at <offset>            断点续转
-D/--dump-header <file>              把header信息写入到该文件中
-e/--referer                                  来源网址
-f/--fail                                          连接失败时不显示http错误
-o/--output                                  把输出写到该文件中
-O/--remote-name                      把输出写到该文件中,保留远程文件的文件名
-r/--range <range>                      检索来自HTTP/1.1或FTP服务器字节范围
-s/--silent                                    静音模式。不输出任何东西
-T/--upload-file <file>                  上传文件
-u/--user <user[:password]>      设置服务器的用户和密码
-w/--write-out [format]                什么输出完成后
-x/--proxy <host[:port]>              在给定的端口上使用HTTP代理
-#/--progress-bar                        进度条显示当前的传送状态

详细的curl支持的option见此网页

option可以同时选择多项进行使用。

用法

这里简述几种curl的用法。

  • 查看网页源代码
    直接在curl命令后加上网址,就可以查看网站的源代码。
    curl www.baidu.com

    查看网页源代码

  • 保存网页
    curl -o 文件名 www.baidu.com

  • 不显示下载进度信息
    curl -s -o 文件名 www.baidu.com

  • 显示下载进度信息
    curl -# -o 文件名 www.baidu.com

还有很多curl的用法,可以自己去摸索,这里就不一一说明了。

HTTP请求

例如,先用curl命令提交一个请求,curl -s -v -H "Yyzcl: 123" -- "https://www.baidu.com",并得到了响应。

HTTP请求

图中红框之内的内容就是我们请求的内容,其格式和内容如下:

1 动词 路径 协议/版本           GET / HTTP/1.1
2 Host: www.baidu.com         Host: www.baidu.com
2 User-Agent: curl/7.59.0     User-Agent: curl/7.59.0
2 key1: value1                Accept: */*
2 key2: value2                Yyzcl:123
3                             
4 要上传的数据                 (无,此命令无上传数据)

如果用curl -X POST -d "Yyzcl" -s -v -H "YyzclYang: 123" -- "https://www.baidu.com"来请求,会得到以下结果。

另一种请求

会发现底下会提示成功上传了5个字节,这就是"Yyzcl"的内容。

如何利用Chrome开发者工具查看请求

首先摁F12来打开开发者工具,然后选到Network,这时候输入网站,就可以看到浏览器背后的请求。这里输入https://www.baidu.com/作为测试。

利用开发者工具查看请求

按照1234的顺序依次选取,就可以看到浏览器发出的请求了。

HTTP响应

还是利用curl命令提交一个请求,curl -s -v -H "Yyzcl: 123" -- "https://www.baidu.com",并得到了响应。

HTTP响应

我截取红框中的内容来进行说明。

1 协议/版本号 状态码 状态解释
2 Key1: value1
2 Key2: value2
2 Content-Length: 2443
2 Content-Type: text/html
3
4 要下载的内容(网页的具体内容)

状态码

是在请求之后,服务器对浏览器的消息,具体每一个状态码的意思见HTTP状态码

如何利用Chrome开发者工具查看响应

和查看请求一样,同样摁F12调出开发者工具,在Network里查看,只不过响应是点击Response Headers->view source之后查看的。

利用开发者工具查看响应

图中红框内就是响应的内容。

最后编辑于
©著作权归作者所有,转载或内容合作请联系作者
  • 序言:七十年代末,一起剥皮案震惊了整个滨河市,随后出现的几起案子,更是在滨河造成了极大的恐慌,老刑警刘岩,带你破解...
    沈念sama阅读 194,242评论 5 459
  • 序言:滨河连续发生了三起死亡事件,死亡现场离奇诡异,居然都是意外死亡,警方通过查阅死者的电脑和手机,发现死者居然都...
    沈念sama阅读 81,769评论 2 371
  • 文/潘晓璐 我一进店门,熙熙楼的掌柜王于贵愁眉苦脸地迎上来,“玉大人,你说我怎么就摊上这事。” “怎么了?”我有些...
    开封第一讲书人阅读 141,484评论 0 319
  • 文/不坏的土叔 我叫张陵,是天一观的道长。 经常有香客问我,道长,这世上最难降的妖魔是什么? 我笑而不...
    开封第一讲书人阅读 52,133评论 1 263
  • 正文 为了忘掉前任,我火速办了婚礼,结果婚礼上,老公的妹妹穿的比我还像新娘。我一直安慰自己,他们只是感情好,可当我...
    茶点故事阅读 61,007评论 4 355
  • 文/花漫 我一把揭开白布。 她就那样静静地躺着,像睡着了一般。 火红的嫁衣衬着肌肤如雪。 梳的纹丝不乱的头发上,一...
    开封第一讲书人阅读 46,080评论 1 272
  • 那天,我揣着相机与录音,去河边找鬼。 笑死,一个胖子当着我的面吹牛,可吹牛的内容都是我干的。 我是一名探鬼主播,决...
    沈念sama阅读 36,496评论 3 381
  • 文/苍兰香墨 我猛地睁开眼,长吁一口气:“原来是场噩梦啊……” “哼!你这毒妇竟也来了?” 一声冷哼从身侧响起,我...
    开封第一讲书人阅读 35,190评论 0 253
  • 序言:老挝万荣一对情侣失踪,失踪者是张志新(化名)和其女友刘颖,没想到半个月后,有当地人在树林里发现了一具尸体,经...
    沈念sama阅读 39,464评论 1 290
  • 正文 独居荒郊野岭守林人离奇死亡,尸身上长有42处带血的脓包…… 初始之章·张勋 以下内容为张勋视角 年9月15日...
    茶点故事阅读 34,549评论 2 309
  • 正文 我和宋清朗相恋三年,在试婚纱的时候发现自己被绿了。 大学时的朋友给我发了我未婚夫和他白月光在一起吃饭的照片。...
    茶点故事阅读 36,330评论 1 326
  • 序言:一个原本活蹦乱跳的男人离奇死亡,死状恐怖,灵堂内的尸体忽然破棺而出,到底是诈尸还是另有隐情,我是刑警宁泽,带...
    沈念sama阅读 32,205评论 3 312
  • 正文 年R本政府宣布,位于F岛的核电站,受9级特大地震影响,放射性物质发生泄漏。R本人自食恶果不足惜,却给世界环境...
    茶点故事阅读 37,567评论 3 298
  • 文/蒙蒙 一、第九天 我趴在偏房一处隐蔽的房顶上张望。 院中可真热闹,春花似锦、人声如沸。这庄子的主人今日做“春日...
    开封第一讲书人阅读 28,889评论 0 17
  • 文/苍兰香墨 我抬头看了看天上的太阳。三九已至,却和暖如春,着一层夹袄步出监牢的瞬间,已是汗流浃背。 一阵脚步声响...
    开封第一讲书人阅读 30,160评论 1 250
  • 我被黑心中介骗来泰国打工, 没想到刚下飞机就差点儿被人妖公主榨干…… 1. 我叫王不留,地道东北人。 一个月前我还...
    沈念sama阅读 41,475评论 2 341
  • 正文 我出身青楼,却偏偏与公主长得像,于是被迫代替她去往敌国和亲。 传闻我的和亲对象是个残疾皇子,可洞房花烛夜当晚...
    茶点故事阅读 40,650评论 2 335

推荐阅读更多精彩内容