py3笔记31:cookies

"""
@author:百草
@file:getEmail_note.py
@time:2021/09/06
"""
import requests
"""
A Requests session.

    Provides cookie persistence, connection-pooling, and configuration.

    Basic Usage::

      >>> import requests
      >>> s = requests.Session()
      >>> s.get('https://httpbin.org/get')
      <Response [200]>

    Or as a context manager::

      >>> with requests.Session() as s:
      ...     s.get('https://httpbin.org/get')
      <Response [200]>
"""
url = "https://www.jianshu.com/"
url = "https://www.baidu.com/"
s = requests.session()
s.get(url)
# print(s)  # <requests.sessions.Session object at 0x00000182996ED1C0>
# print(s.__dict__)  # s的属性和方法
# {
# 'headers': {'User-Agent': 'python-requests/2.24.0',
#             'Accept-Encoding': 'gzip, deflate',
#              'Accept': '*/*',
#              'Connection': 'keep-alive'},
# 'auth': None,
# 'proxies': {},
# 'hooks': {'response': []},
# 'params': {},
#  'stream': False,
# 'verify': True,
# 'cert': None,
# 'max_redirects': 30,
# 'trust_env': True,
# 'cookies': <RequestsCookieJar[] >,
# 'adapters': OrderedDict([('https://', < requests.adapters.HTTPAdapter object at 0x000001D13476DD30 >),
#                          ('http://', < requests.adapters.HTTPAdapter object at 0x000001D13476DD60 >)])
# }
"""

有时候我们需要爬取登录后才能访问的页面,这时我们就需要借助cookie来实现模拟登陆和会话维持了。那么服务器是如何知道我们已经登录了呢? 当用户首次发送请求时,服务器端一般会生成并存储一小段信息,包含在response数据里。
如果这一小段信息存储在客户端(浏览器或磁盘), 我们称之为cookie
如果这一小段信息存储在服务器端,我们称之为session(会话)
这样当用户下次发送请求到不同页面时,请求自动会带上cookie,这样服务器就知道用户之前已经登录访问过了。

然而并不是访问所有的页面时服务器都会生成自动cookiesession。那么问题来了? 我们如何知道发送首次请求后服务器是否生成了cookie呢? 这时我们可以直接通过打印response.cookies来获取查看cookie内容。

下例中当我们发送请求到简书时,我们可以看到返回的reponse里的cookies是个空的RequestsCookieJar[],里面没有任何cookie
然而当我们发送请求到百度时,你可以看到百度已经生成了一个名为BDORZcookie,放在RequestsCookieJar[]里了。你还可以通过打印
response.cookies['BAIDUID']来打印BAIDUID的内容。

'cookies': <RequestsCookieJar[Cookie(version=0, name='BDORZ', value='27315', port=None, 
            port_specified=False, domain='.baidu.com', domain_specified=True, domain_initial_dot=True, 
            path='/', path_specified=True, secure=False, expires=1631026778, discard=False, comment=None, 
            comment_url=None, rest={}, rfc2109=False)]>

参考:https://blog.csdn.net/weixin_42134789/article/details/82904741


# 方法1:直接设置cookies参数
# https://blog.csdn.net/weixin_42134789/article/details/82904741
cookies = dict(version=0, name='BDORZ', value='27315')
headers = {
    'User-Agent': 'Mozilla/5.0 (Windows NT 10.0; Win64; x64) AppleWebKit/537.36 (KHTML, like Gecko) Chrome/85.0.4183.102 Safari/537.36'
}

# s.get(url, headers=headers, cookies=cookies)

# 方法2:先实例化一个RequestCookieJar的类,然后把值set进去,最后在get,post方法里面指定cookies参数
from requests.cookies import RequestsCookieJar

cookies = RequestsCookieJar()
"""Compatibility class; is a cookielib.CookieJar, but exposes a dict
 interface.

 This is the CookieJar we create by default for requests and sessions that
 don't specify one, since some clients may expect response.cookies and
 session.cookies to support dict operations.

 Requests does not use the dict interface internally; it's just for
 compatibility with external client code. All requests code should work
 out of the box with externally provided instances of ``CookieJar``, e.g.
 ``LWPCookieJar`` and ``FileCookieJar``.

 Unlike a regular CookieJar, this class is pickleable.

 .. warning:: dictionary operations that are normally O(1) may be O(n).
 """
print(cookies.__dict__)
# {'_policy': <http.cookiejar.DefaultCookiePolicy object at 0x0000022AF605BA30>, 
# '_cookies_lock': <unlocked _thread.RLock object owner=0 count=0 at 0x0000022AF605B6C0>, 
# '_cookies': {}}
最后编辑于
©著作权归作者所有,转载或内容合作请联系作者
  • 序言:七十年代末,一起剥皮案震惊了整个滨河市,随后出现的几起案子,更是在滨河造成了极大的恐慌,老刑警刘岩,带你破解...
    沈念sama阅读 205,132评论 6 478
  • 序言:滨河连续发生了三起死亡事件,死亡现场离奇诡异,居然都是意外死亡,警方通过查阅死者的电脑和手机,发现死者居然都...
    沈念sama阅读 87,802评论 2 381
  • 文/潘晓璐 我一进店门,熙熙楼的掌柜王于贵愁眉苦脸地迎上来,“玉大人,你说我怎么就摊上这事。” “怎么了?”我有些...
    开封第一讲书人阅读 151,566评论 0 338
  • 文/不坏的土叔 我叫张陵,是天一观的道长。 经常有香客问我,道长,这世上最难降的妖魔是什么? 我笑而不...
    开封第一讲书人阅读 54,858评论 1 277
  • 正文 为了忘掉前任,我火速办了婚礼,结果婚礼上,老公的妹妹穿的比我还像新娘。我一直安慰自己,他们只是感情好,可当我...
    茶点故事阅读 63,867评论 5 368
  • 文/花漫 我一把揭开白布。 她就那样静静地躺着,像睡着了一般。 火红的嫁衣衬着肌肤如雪。 梳的纹丝不乱的头发上,一...
    开封第一讲书人阅读 48,695评论 1 282
  • 那天,我揣着相机与录音,去河边找鬼。 笑死,一个胖子当着我的面吹牛,可吹牛的内容都是我干的。 我是一名探鬼主播,决...
    沈念sama阅读 38,064评论 3 399
  • 文/苍兰香墨 我猛地睁开眼,长吁一口气:“原来是场噩梦啊……” “哼!你这毒妇竟也来了?” 一声冷哼从身侧响起,我...
    开封第一讲书人阅读 36,705评论 0 258
  • 序言:老挝万荣一对情侣失踪,失踪者是张志新(化名)和其女友刘颖,没想到半个月后,有当地人在树林里发现了一具尸体,经...
    沈念sama阅读 42,915评论 1 300
  • 正文 独居荒郊野岭守林人离奇死亡,尸身上长有42处带血的脓包…… 初始之章·张勋 以下内容为张勋视角 年9月15日...
    茶点故事阅读 35,677评论 2 323
  • 正文 我和宋清朗相恋三年,在试婚纱的时候发现自己被绿了。 大学时的朋友给我发了我未婚夫和他白月光在一起吃饭的照片。...
    茶点故事阅读 37,796评论 1 333
  • 序言:一个原本活蹦乱跳的男人离奇死亡,死状恐怖,灵堂内的尸体忽然破棺而出,到底是诈尸还是另有隐情,我是刑警宁泽,带...
    沈念sama阅读 33,432评论 4 322
  • 正文 年R本政府宣布,位于F岛的核电站,受9级特大地震影响,放射性物质发生泄漏。R本人自食恶果不足惜,却给世界环境...
    茶点故事阅读 39,041评论 3 307
  • 文/蒙蒙 一、第九天 我趴在偏房一处隐蔽的房顶上张望。 院中可真热闹,春花似锦、人声如沸。这庄子的主人今日做“春日...
    开封第一讲书人阅读 29,992评论 0 19
  • 文/苍兰香墨 我抬头看了看天上的太阳。三九已至,却和暖如春,着一层夹袄步出监牢的瞬间,已是汗流浃背。 一阵脚步声响...
    开封第一讲书人阅读 31,223评论 1 260
  • 我被黑心中介骗来泰国打工, 没想到刚下飞机就差点儿被人妖公主榨干…… 1. 我叫王不留,地道东北人。 一个月前我还...
    沈念sama阅读 45,185评论 2 352
  • 正文 我出身青楼,却偏偏与公主长得像,于是被迫代替她去往敌国和亲。 传闻我的和亲对象是个残疾皇子,可洞房花烛夜当晚...
    茶点故事阅读 42,535评论 2 343

推荐阅读更多精彩内容