2021-08-14

pandas时间系列

1.时间序列前言

时间序列数据在很多领域都是重要的结构化数据形式,比如:金融,神经科学,生态学,物理学。在多个时间点观测的数据形成了时间序列。时间序列可以是固定频率的,也可以是不规则的。

常见使用
  • 时间戳
  • 固定的时间区间
  • 时间间隔

2.时间序列基础

  • 时间序列介绍
    Pandas中的基础时间序列种类是由时间戳索引的Series,在Pandas外部通常表示为Python字符串或datetime对象。

2.1. Python内置时间模块

import time

2.1.1 时间戳

  • 给机器看懂
  • 1970年1月1日0时0分0秒到现在时间偏移量
  • time.time()


    image.png

2.1.2 结构化时间

  • t = time.localtime(time.time()) # 本地时间
  • t
  • time.gmtime(time.time()) # 0 时区


    image.png
  • 操作时间 localtime和gmtime基本相同,只是一个是北京时间,一个是国际时间(个人理解)

2.1.3 属性

  • t.tm_year


    image.png

2.1.4 格式化时间字符串

  • 给人类看懂
    time.strftime("%Y/%m/%d %H:%M:%S",t)
  • 给机器看懂
    time.strptime('2021/08/12 23:18:33',"%Y/%m/%d %H:%M:%S")
    image.png

2.1.5 时间戳格式化为固定的格式

其实就是把秒转换成固定的格式

  • time.ctime(time.time())
  • time.ctime(1628781513.0)


    image.png

2.1.6 结构化时间转回时间戳

  • time.mktime(t)


    image.png

2.2. 日期模块 日期和实际数据类型

  • from datetime import datetime

2.2.1 获取当前日期时间

  • now = datetime.now()
  • now


    image.png

2.2.2 获取属性方法

  • now.year,now.month,now.day


    image.png

2.2.3 时间间隔

  • 时间差timedelta(1, 68400)默认是天和秒
    d = datetime(2021,12,12,20,0,0) - datetime(2021,12,11,1,0,0)
    d


    image.png
  • from datetime import timedelta


    image.png

2.3. datetime和字符串相互转换

  • stamp = datetime(2021,8,12)
  • stamp


    image.png

2.3.1 datetime强制转换为字符串

  • str(stamp)


    image.png

2.3.2 datetime格式化转换为字符串

  • stamp.strftime("%Y-%m-%d %H:%M:%S")
  • stamp.strftime('%y/%m/%d')


    image.png

2.3.3 字符串转换为datetime

  • 注意:%Y一定为大写才行
  • 一个转换
    datetime.strptime('2021-8-13','%Y-%m-%d')
  • 列表转换
    d = ['12/12/2021','1/1/2021']
    [datetime.strptime(i,"%m/%d/%Y") for i in d]


    image.png

2.3.4 补充 把不同的时间形式都转换成datetime形式

  • 导入这个模块即可
    from dateutil.parser import parse
  • 列子:2021年8月13日不同形式的字符串,导入这个模块后都可以转换成datetime形式
    parse('8/13/2021')
    parse('2021.8.13')
    parse('2021 8 13')
    parse('2021-8-13')


    image.png

2.3.5 补充 转换成时间索引

  • pd.to_datetime(d)


    image.png

3. 时间系列操作

image.png

3.1 索引操作

image.png

image.png

image.png

image.png

image.png

image.png

image.png

image.png

3.2 带有重复索引时间序列

image.png

3.3 日期范围 频率 移动

3.3.1 生成日期范围

  • index = pd.date_range('2021-01-01','2021-03-01') # 日期起 止 默认频是天
  • index


    image.png
  • pd.date_range('2021-01-01',periods=100) #日期起 条数


    image.png
  • pd.date_range(end='2021-01-11',periods=100) #日期点之前100条


    image.png

3.3.2 频率

  • pd.date_range('2021-08-01','2021-08-12',freq='3s')


    image.png

3.3.3 移动数据

  • ts.shift(2)# 下移两位
  • ts.shift(-2)# 上移两位


    image.png

3.3.4 重采样

  • 重采样:指得是时间序列从一个频率转换为另一个频率进行处理的过程
    从高频转换到低频 --> 降采样
    从低频转换到高频 --> 升采样
image.png
  • t.resample('M').sum()# 求各月的和

  • t.resample('10D').sum()# 求10天的和


    image.png
  • 升采样


    image.png

    image.png
©著作权归作者所有,转载或内容合作请联系作者
  • 序言:七十年代末,一起剥皮案震惊了整个滨河市,随后出现的几起案子,更是在滨河造成了极大的恐慌,老刑警刘岩,带你破解...
    沈念sama阅读 203,362评论 5 477
  • 序言:滨河连续发生了三起死亡事件,死亡现场离奇诡异,居然都是意外死亡,警方通过查阅死者的电脑和手机,发现死者居然都...
    沈念sama阅读 85,330评论 2 381
  • 文/潘晓璐 我一进店门,熙熙楼的掌柜王于贵愁眉苦脸地迎上来,“玉大人,你说我怎么就摊上这事。” “怎么了?”我有些...
    开封第一讲书人阅读 150,247评论 0 337
  • 文/不坏的土叔 我叫张陵,是天一观的道长。 经常有香客问我,道长,这世上最难降的妖魔是什么? 我笑而不...
    开封第一讲书人阅读 54,560评论 1 273
  • 正文 为了忘掉前任,我火速办了婚礼,结果婚礼上,老公的妹妹穿的比我还像新娘。我一直安慰自己,他们只是感情好,可当我...
    茶点故事阅读 63,580评论 5 365
  • 文/花漫 我一把揭开白布。 她就那样静静地躺着,像睡着了一般。 火红的嫁衣衬着肌肤如雪。 梳的纹丝不乱的头发上,一...
    开封第一讲书人阅读 48,569评论 1 281
  • 那天,我揣着相机与录音,去河边找鬼。 笑死,一个胖子当着我的面吹牛,可吹牛的内容都是我干的。 我是一名探鬼主播,决...
    沈念sama阅读 37,929评论 3 395
  • 文/苍兰香墨 我猛地睁开眼,长吁一口气:“原来是场噩梦啊……” “哼!你这毒妇竟也来了?” 一声冷哼从身侧响起,我...
    开封第一讲书人阅读 36,587评论 0 258
  • 序言:老挝万荣一对情侣失踪,失踪者是张志新(化名)和其女友刘颖,没想到半个月后,有当地人在树林里发现了一具尸体,经...
    沈念sama阅读 40,840评论 1 297
  • 正文 独居荒郊野岭守林人离奇死亡,尸身上长有42处带血的脓包…… 初始之章·张勋 以下内容为张勋视角 年9月15日...
    茶点故事阅读 35,596评论 2 321
  • 正文 我和宋清朗相恋三年,在试婚纱的时候发现自己被绿了。 大学时的朋友给我发了我未婚夫和他白月光在一起吃饭的照片。...
    茶点故事阅读 37,678评论 1 329
  • 序言:一个原本活蹦乱跳的男人离奇死亡,死状恐怖,灵堂内的尸体忽然破棺而出,到底是诈尸还是另有隐情,我是刑警宁泽,带...
    沈念sama阅读 33,366评论 4 318
  • 正文 年R本政府宣布,位于F岛的核电站,受9级特大地震影响,放射性物质发生泄漏。R本人自食恶果不足惜,却给世界环境...
    茶点故事阅读 38,945评论 3 307
  • 文/蒙蒙 一、第九天 我趴在偏房一处隐蔽的房顶上张望。 院中可真热闹,春花似锦、人声如沸。这庄子的主人今日做“春日...
    开封第一讲书人阅读 29,929评论 0 19
  • 文/苍兰香墨 我抬头看了看天上的太阳。三九已至,却和暖如春,着一层夹袄步出监牢的瞬间,已是汗流浃背。 一阵脚步声响...
    开封第一讲书人阅读 31,165评论 1 259
  • 我被黑心中介骗来泰国打工, 没想到刚下飞机就差点儿被人妖公主榨干…… 1. 我叫王不留,地道东北人。 一个月前我还...
    沈念sama阅读 43,271评论 2 349
  • 正文 我出身青楼,却偏偏与公主长得像,于是被迫代替她去往敌国和亲。 传闻我的和亲对象是个残疾皇子,可洞房花烛夜当晚...
    茶点故事阅读 42,403评论 2 342

推荐阅读更多精彩内容