• pandas教程:Date and Time Data Types and Tools 日期和时间数据类型及其工具


    Chapter 11 Time Series(时间序列)

    时间序列指能在任何能在时间上观测到的数据。很多时间序列是有固定频率(fixed frequency)的,意思是数据点会遵照某种规律定期出现,比如每15秒,每5分钟,或每个月。时间序列也可能是不规律的(irregular),没有一个固定的时间规律。如何参照时间序列数据取决于我们要做什么样的应用,我们可能会遇到下面这些:

    • Timestamps(时间戳),具体的某一个时刻
    • Fixed periods(固定的时期),比如2007年的一月,或者2010年整整一年
    • Intervals of time(时间间隔),通常有一个开始和结束的时间戳。Periods(时期)可能被看做是Intervals(间隔)的一种特殊形式。
    • Experiment or elapsed time(实验或经过的时间);每一个时间戳都是看做是一个特定的开始时间(例如,在放入烤箱后,曲奇饼的直径在每一秒的变化程度)

    这一章主要涉及前三个类型。

    pandas也支持基于timedeltasindex,本书不会对timedelta index做介绍,感兴趣的可以查看pandas的文档。

    11.1 Date and Time Data Types and Tools(日期和时间数据类型及其工具)

    python有标准包用来表示时间和日期数据。datetime, time, calendar,这些模块经常被使用。datetime.datetime类型,或简单写为datetime,被广泛使用:

    import pandas as pd
    
    • 1
    from datetime import datetime
    
    • 1
    now = datetime.now()
    
    • 1
    now
    
    • 1
    datetime.datetime(2017, 12, 1, 12, 12, 0, 375896)
    
    • 1
    now.year, now.month, now.day
    
    • 1
    (2017, 12, 1)
    
    • 1

    datetime能保存日期和时间到微妙级别。timedelta表示两个不同的datetime对象之间的时间上的不同:

    delta = datetime(2011, 1, 7) - datetime(2008, 6, 24, 8, 15)
    delta
    
    • 1
    • 2
    datetime.timedelta(926, 56700)
    
    • 1
    delta.days
    
    • 1
    926
    
    • 1
    delta.seconds
    
    • 1
    56700
    
    • 1

    我们可以在一个datetime对象上,添加或减少一个或多个timedelta,这样可以产生新的变化后的对象:

    from datetime import timedelta
    
    • 1
    start = datetime(2011, 1, 7)
    
    • 1
    start + timedelta(12)
    
    • 1
    datetime.datetime(2011, 1, 19, 0, 0)
    
    • 1
    start - 2 * timedelta(12)
    
    • 1
    datetime.datetime(2010, 12, 14, 0, 0)
    
    • 1

    1 Converting Between String and Datetime(字符串与时间的转换)

    我们可以对datetime对象,以及pandasTimestamp对象进行格式化,这部分之后会介绍,使用strstrftime方法,传入一个特定的时间格式就能进行转换:

    stamp = datetime(2011, 1, 3)
    
    • 1
    str(stamp)
    
    • 1
    '2011-01-03 00:00:00'
    
    • 1
    stamp.strftime('%Y-%m-%d')
    
    • 1
    '2011-01-03'
    
    • 1

    我们可以利用上面的format codes(格式码;时间日期格式)把字符串转换为日期,这要用到datetime.strptime:

    value = '2011-01-03'
    
    • 1
    datetime.strptime(value, '%Y-%m-%d')
    
    • 1
    datetime.datetime(2011, 1, 3, 0, 0)
    
    • 1
    datestrs = ['7/6/2011', '8/6/2011']
    
    • 1
    [datetime.strptime(x, '%m/%d/%Y') for x in datestrs]
    
    • 1
    [datetime.datetime(2011, 7, 6, 0, 0), datetime.datetime(2011, 8, 6, 0, 0)]
    
    • 1

    对于一个一直的时间格式,使用datetime.strptime来解析日期是很好的方法。但是,如果每次都要写格式的话很烦人,尤其是对于一些比较常见的格式。在这种情况下,我们可以使用第三方库dateutil中的parser.parse方法(这个库会在安装pandas的时候自动安装):

    from dateutil.parser import parse
    
    • 1
    parse('2011-01-03')
    
    • 1
    datetime.datetime(2011, 1, 3, 0, 0)
    
    • 1

    dateutil能够解析很多常见的时间表示格式:

    parse('Jan 31, 1997 10:45 PM')
    
    • 1
    datetime.datetime(1997, 1, 31, 22, 45)
    
    • 1

    在国际上,日在月之前是很常见的(译者:美国是把月放在日前面的),所以我们可以设置dayfirst=True来指明最前面的是否是日:

    parse('6/12/2011', dayfirst=True)
    
    • 1
    datetime.datetime(2011, 12, 6, 0, 0)
    
    • 1

    pandas通常可以用于处理由日期组成的数组,不论是否是DataFrame中的行索引或列。to_datetime方法能解析很多不同种类的日期表示。标准的日期格式,比如ISO 8601,能被快速解析:

    datestrs = ['2011-07-06 12:00:00', '2011-08-06 00:00:00']
    
    • 1
    pd.to_datetime(datestrs)
    
    • 1
    DatetimeIndex(['2011-07-06 12:00:00', '2011-08-06 00:00:00'], dtype='datetime64[ns]', freq=None)
    
    • 1

    还能处理一些应该被判断为缺失的值(比如None, 空字符串之类的):

    idx = pd.to_datetime(datestrs + [None])
    idx
    
    • 1
    • 2
    DatetimeIndex(['2011-07-06 12:00:00', '2011-08-06 00:00:00', 'NaT'], dtype='datetime64[ns]', freq=None)
    
    • 1
    idx[2]
    
    • 1
    NaT
    
    • 1
    pd.isnull(idx)
    
    • 1
    array([False, False,  True], dtype=bool)
    
    • 1

    Nat(Not a Time)pandas中,用于表示时间戳为空值(null value)。

    dateutil.parse是一个很有用但不完美的工具。它可能会把一些字符串识别为日期,例如,'42’就会被解析为2042年加上今天的日期。

    datetime对象还有一些关于地区格式(locale-specific formatting)的选项,用于处理不同国家或不同语言的问题。例如,月份的缩写在德国和法国,与英语是不同的。

  • 相关阅读:
    驱动开发day4
    Eclipse IDEA VSCode HBuilderX 统一快捷键
    利用OpenShift的ImageStream部署临时版本
    05_2D3D转换
    为什么Java中“1000==1000”为false,而”100==100“为true?
    《Linux图形驱动与桌面》之DMA-FENCE
    蓝桥杯成绩已出
    【计算机网络】习题(三)—— 数据链路层
    K-Means
    【深度学习】图像分割概述
  • 原文地址:https://blog.csdn.net/weixin_46530492/article/details/134487449