day18 - http/TCP/IP(总结)

1.recode

1.1.正则符号
a.匹配字符
. \w \s \d \W \S \D [字符集][^字符集]
b.边界检测
\b ^ $
c.匹配次数
\+ \* ? {} 贪婪?
d.分之、分组
|
() - 分组,捕获,重复
e.转义符号
特殊符号前加\
2.2.re模块
fullmatch() - 检测一个字符串是否是ip/检测账号密码是否符合要求/检测输入的内容是否是手机号,邮箱
match() - 检测字符串开头是否满足要求 - 匹配对象
search() - 判断字符串中是否存在满足要求的子串 - 匹配对象
split() - 字符串切割
sub() - 字符串替换
findall() - 获取子串
finditer() - 获取所有的匹配结果,返回值是迭代器

2.socket编程

socket又叫套接字,指的就是实现通信过程的两个端。等待请求的一端叫服务器套接字,发送请求的一端叫客户端套接字
python中提供了socket模块来支持socker编程。
2.1.服务器套接字
a.创建套接字对象
socket(family,type)
family - 设置IP类型 AF_INET(默认值) - IPv4, AF_INET6 - IPv6
type - 设置传输类型 SOCK_STREAM - TCP SOCK_DGRAM - UDP

创建一个基于IPV4和TCP的套接字对象
server = socket.socket()

b.绑定IP地址和端口
bind((IP,端口号))
IP地址 - 服务器对应的计算机的IP地址,字符串
端口号 - 用来区分计算机上不同的服务;是一个数字,范围是0-65535.但是其中1024及以下的是著名端口,
用来表示一些特殊的服务,一般不要用
同一个时间一个端口只能对应一个服务

server.bind(('10.7.187.105', 8100))

c.开始监听
listen(最大监听数)
最大监听数 - 用来设置当前服务器一次可以处理多少个请求

server.listen(100)
print('开始监听')

d.让服务器一直处于启动状态

while True:
    # 接收客户端发送的请求,返回请求地址和会话对象;注意:程序代码会阻塞线程(程序运行到这儿会停下来
    # ,直到有客户端给当前服务器发送请求为止)
    conversation, addr = server.accept()
    print('接受到请求:', addr)
    # 接收消息(客户端发送给服务器的消息)
    """
    recv(缓存大小) - 获取客户端个服务器发送的数据,返回值是二进制
    缓存大小 - 决定一次可以接收的数据最大字节数
    这儿也会阻塞线程
    """
    re_data = conversation.recv(1024)
    print(re_data.decode('utf-8'))
    # 发送数据(服务器给客户端发送数据)
    """
    send(数据) - 将指定的数据发送给客户端
    数据 - 要求是二进制
    字符串转二进制
    a.bytes(字符串,'utf-8')
    b.字符串.encode('utf-8')
    二进制转字符串
    a.str(二进制数据,'utf-8')
    b.二进制.decode('utf-8')
    """
    message = 'HTTP/1.1 200 OK 你好!'
    conversation.send(message.encode('utf-8'))
    # 关闭连接
    conversation.close()

2.2客户端套接字
a.创建套接字对象

client = socket.socket()

b.连接服务器
connect((IP,端口))

client.connect(('10.7.187.105', 8100))

c.发送消息

message= input('输入:')
client.send(message.encode('utf-8')

d.接收消息

re_data = client.recv(1024)
print(re_data.decode('utf-8'))

3.请求网络数据

python中去做http请求,需要使用一个第三方库,requests
3.1.向服务器发送get请求
a.手动拼接url

url = 'https://www.apiopen.top/satinApi?type=1&page=1'
response = requests.get(url)
print(response)

b.自动拼接url

url = 'https://www.apiopen.top/satinApi'
response = requests.get(url, {'type': 1, 'page': 1})
print(response)

3.2.获取结果
a.获取响应头

header = response.headers
print(header)

b.获取响应体
1)获取二进制格式的响应体

content = response.content
print(content)

2)获取json格式响应体 - 自动将json数据转换成python

content = response.json()
print(content)

3)获取字符串格式的响应体

content = response.text
print(content)
# 应用;下载一个网络图片
url = 'https://timgsa.baidu.com/timg?image&quality=80&size=b10000_' \
      '10000&sec=1543395098&di=2a5bbaa5600097b050ba69a688672de9&src=http' \
      '://p0.qhimgs4.com/t0112e7ebfdef7f923d.jpg'
response = requests.get(url)
image_data = response.content
with open('王也.jpg', 'wb') as f:
    f.write(image_data)

4.附加知识(网络基础/HTTP)

一、HTTP

1.1.什么是URL
URL又叫统一资源定位符
URL的基本格式 = 协议://主机地址/路径
协议:不同的协议,代表着不同的资源查找方式、资源传输方式(http,file,ftp,mailto)
主机地址:存放资源的主机(服务器)的IP地址(域名)
路径:资源在主机(服务器)中的具体位置
1.2.URL中常见的协议
http:超文本传输协议,访问的是远程的网络资源,格式是http://
file:访问的是本地计算机上的资源,格式是file://(不用加主机地址)
mailto:访问的是电子邮件地址,格式是mailto:
ftp:访问的是共享主机的文件资源,格式是ftp://
1.3.http的通信过程
完整的http通信可以分为2大步骤:
1)请求:客户端向服务器索要数据
HTTP协议规定:1个完整的由客户端发给服务器的HTTP请求中包含以下内容:
a.请求头:包含了对客户端的环境描述、客户端请求信息等
GET /minion.png HTTP/1.1 // 包含了请求方法、请求资源路径、HTTP协议版本
Host: 120.25.226.186:32812 // 客户端想访问的服务器主机地址
User-Agent: Mozilla/5.0 // 客户端的类型,客户端的软件环境
Accept: text/html, / // 客户端所能接收的数据类型
Accept-Language: zh-cn // 客户端的语言环境
Accept-Encoding: gzip // 客户端支持的数据压缩格式
b.请求体:客户端发给服务器的具体数据,比如文件数据(POST请求才会有)
2)响应:服务器返回客户端相应的数据
客户端向服务器发送请求,服务器应当做出响应,即返回数据给客户端
HTTP协议规定:1个完整的HTTP响应中包含以下内容:
a.响应头:包含了对服务器的描述、对返回数据的描述
HTTP/1.1 200 OK // 包含了HTTP协议版本、状态码、状态英文名称
Server: Apache-Coyote/1.1 // 服务器的类型
Content-Type: image/jpeg // 返回数据的类型
Content-Length: 56811 // 返回数据的长度
Date: Mon, 23 Jun 2014 12:54:52 GMT // 响应的时间
b.响应体:服务器返回给客户端的具体数据,比如文件数据
1.4.常见的状态码

HTTP常见状态码

1.5.发送HTTP请求的方法
在HTTP/1.1协议中,定义了8种发送http请求的方法
GET、POST、OPTIONS、HEAD、PUT、DELETE、TRACE、CONNECT、PATCH
根据HTTP协议的设计初衷,不同的方法对资源有不同的操作方式
PUT :增
DELETE :删
POST:改
GET:查
最常用的是GET和POST(实际上GET和POST都能办到增删改查)
要想使用GET和POST请求跟服务器进行交互,得先了解一个概念
参数
就是传递给服务器的具体数据,比如登录时的帐号、密码
1.6.GET和POST对比
GET和POST的主要区别表现在数据传递上
GET
在请求URL后面以?的形式跟上发给服务器的参数,多个参数之间用&隔开,比如
http://www.test.com/login?username=123&pwd=234&type=JSON
由于浏览器和服务器对URL长度有限制,因此在URL后面附带的参数是有限制的,通常不能超过1KB
POST
发给服务器的参数全部放在请求体中
理论上,POST传递的数据量没有限制(具体还得看服务器的处理能力)

二、网络基础

2.1.OSI参考模型
OSI模型是国际标准化组织分析计算机通信,把计算机通信进行的规范
和标准化分成了7层:
应用层:所有能产生网络流量的程序(QQ,浏览器、有道)
表示层:数据传输前的压缩、加密、确定编码方式等操作
会话层:查看木马(netstat -nb)(只要需要网络请求,就必定会建立会话)
传输层:可靠传输、不可靠传输、流量控制
网络层:负责选择最佳路径、规划IP地址

数据链路层:帧的开始和结尾、透明传输、查错校验
物理层:接口标准、电器标准

OSI参考模型

数据封装过程

数据解封过程

TCP/IP协议通信过程

2.2.传输层的两个协议
在TCP/IP协议栈,传输层有两个协议:TCP和UDP
TCP协议(Transmission Control Protocol,传输控制协议)

  1. 需要传输的文件分段传输
  2. 建立会话
  3. 可靠传输
  4. 流量控制
    UDP协议(User Data Protocol,用户数据报协议)
  5. 一个数据包就能完成数据通信
  6. 不需要建立会话
  7. 不可靠传输
  8. 不需要流量控制

TCP的可靠传输:


TCP的可靠传输
©著作权归作者所有,转载或内容合作请联系作者
  • 序言:七十年代末,一起剥皮案震惊了整个滨河市,随后出现的几起案子,更是在滨河造成了极大的恐慌,老刑警刘岩,带你破解...
    沈念sama阅读 206,214评论 6 481
  • 序言:滨河连续发生了三起死亡事件,死亡现场离奇诡异,居然都是意外死亡,警方通过查阅死者的电脑和手机,发现死者居然都...
    沈念sama阅读 88,307评论 2 382
  • 文/潘晓璐 我一进店门,熙熙楼的掌柜王于贵愁眉苦脸地迎上来,“玉大人,你说我怎么就摊上这事。” “怎么了?”我有些...
    开封第一讲书人阅读 152,543评论 0 341
  • 文/不坏的土叔 我叫张陵,是天一观的道长。 经常有香客问我,道长,这世上最难降的妖魔是什么? 我笑而不...
    开封第一讲书人阅读 55,221评论 1 279
  • 正文 为了忘掉前任,我火速办了婚礼,结果婚礼上,老公的妹妹穿的比我还像新娘。我一直安慰自己,他们只是感情好,可当我...
    茶点故事阅读 64,224评论 5 371
  • 文/花漫 我一把揭开白布。 她就那样静静地躺着,像睡着了一般。 火红的嫁衣衬着肌肤如雪。 梳的纹丝不乱的头发上,一...
    开封第一讲书人阅读 49,007评论 1 284
  • 那天,我揣着相机与录音,去河边找鬼。 笑死,一个胖子当着我的面吹牛,可吹牛的内容都是我干的。 我是一名探鬼主播,决...
    沈念sama阅读 38,313评论 3 399
  • 文/苍兰香墨 我猛地睁开眼,长吁一口气:“原来是场噩梦啊……” “哼!你这毒妇竟也来了?” 一声冷哼从身侧响起,我...
    开封第一讲书人阅读 36,956评论 0 259
  • 序言:老挝万荣一对情侣失踪,失踪者是张志新(化名)和其女友刘颖,没想到半个月后,有当地人在树林里发现了一具尸体,经...
    沈念sama阅读 43,441评论 1 300
  • 正文 独居荒郊野岭守林人离奇死亡,尸身上长有42处带血的脓包…… 初始之章·张勋 以下内容为张勋视角 年9月15日...
    茶点故事阅读 35,925评论 2 323
  • 正文 我和宋清朗相恋三年,在试婚纱的时候发现自己被绿了。 大学时的朋友给我发了我未婚夫和他白月光在一起吃饭的照片。...
    茶点故事阅读 38,018评论 1 333
  • 序言:一个原本活蹦乱跳的男人离奇死亡,死状恐怖,灵堂内的尸体忽然破棺而出,到底是诈尸还是另有隐情,我是刑警宁泽,带...
    沈念sama阅读 33,685评论 4 322
  • 正文 年R本政府宣布,位于F岛的核电站,受9级特大地震影响,放射性物质发生泄漏。R本人自食恶果不足惜,却给世界环境...
    茶点故事阅读 39,234评论 3 307
  • 文/蒙蒙 一、第九天 我趴在偏房一处隐蔽的房顶上张望。 院中可真热闹,春花似锦、人声如沸。这庄子的主人今日做“春日...
    开封第一讲书人阅读 30,240评论 0 19
  • 文/苍兰香墨 我抬头看了看天上的太阳。三九已至,却和暖如春,着一层夹袄步出监牢的瞬间,已是汗流浃背。 一阵脚步声响...
    开封第一讲书人阅读 31,464评论 1 261
  • 我被黑心中介骗来泰国打工, 没想到刚下飞机就差点儿被人妖公主榨干…… 1. 我叫王不留,地道东北人。 一个月前我还...
    沈念sama阅读 45,467评论 2 352
  • 正文 我出身青楼,却偏偏与公主长得像,于是被迫代替她去往敌国和亲。 传闻我的和亲对象是个残疾皇子,可洞房花烛夜当晚...
    茶点故事阅读 42,762评论 2 345

推荐阅读更多精彩内容