python+pandas生成指定日期和重采样的方法-6ren

python+pandas生成指定日期和重采样的方法

转载作者：qq735679552 更新时间：2022-09-28 22:32:09

CFSDN坚持开源创造价值，我们致力于搭建一个资源共享平台，让每一个IT人在这里找到属于你的精彩世界.

这篇CFSDN的博客文章python+pandas生成指定日期和重采样的方法由作者收集整理，如果你对这篇文章有兴趣，记得点赞哟.

python 日期的范围、频率、重采样以及频率转换。

pandas有一整套的标准时间序列频率以及用于重采样、频率推断、生成固定频率日期范围的工具.

生成指定日期范围的范围。

pandas.date_range()用于生成指定长度的DatatimeIndex:

1）默认情况下，date_range会按着时间间隔为天的方式生成从给定开始到结束时间的时间戳数组；。

2）如果只指定开始或结束时间，还需要periods标定时间长度.

 
    ? 
   
         import pandas as pd 
        
         pd.date_range('2017-6-20','2017-6-27')

 
    ? 
   
         DatetimeIndex(['2017-06-20', '2017-06-21', '2017-06-22', '2017-06-23', 
        
         '2017-06-24', '2017-06-25', '2017-06-26', '2017-06-27'], 
        
         dtype='datetime64[ns]', freq='D')

 
    ? 
   
         pd.date_range('2017-6-20 12:59:30','2017-6-27')

 
    ? 
   
         DatetimeIndex(['2017-06-20 12:59:30', '2017-06-21 12:59:30', 
        
         '2017-06-22 12:59:30', '2017-06-23 12:59:30', 
        
         '2017-06-24 12:59:30', '2017-06-25 12:59:30', 
        
         '2017-06-26 12:59:30'], 
        
         dtype='datetime64[ns]', freq='D')

 
    ? 
   
         pd.date_range('2017-6-20 12:59:30',periods = 8)

 
    ? 
   
         DatetimeIndex(['2017-06-20 12:59:30', '2017-06-21 12:59:30', 
        
         '2017-06-22 12:59:30', '2017-06-23 12:59:30', 
        
         '2017-06-24 12:59:30', '2017-06-25 12:59:30', 
        
         '2017-06-26 12:59:30', '2017-06-27 12:59:30'], 
        
         dtype='datetime64[ns]', freq='D')

 
    ? 
   
         pd.date_range('2017-6-20 12:59:30',periods = 8, normalize = True)

 
    ? 
   
         DatetimeIndex(['2017-06-20', '2017-06-21', '2017-06-22', '2017-06-23', 
        
         '2017-06-24', '2017-06-25', '2017-06-26', '2017-06-27'], 
        
         dtype='datetime64[ns]', freq='D')

频率和日期偏移量。

pandas中的频率是由一个基础频率（M、H）也可以是（Hour、Minute、h、min等）。

 
    ? 
   
         pd.date_range('2017-6-27',periods = 7,freq = '1h30min')

 
    ? 
   
         DatetimeIndex(['2017-06-27 00:00:00', '2017-06-27 01:30:00', 
        
         '2017-06-27 03:00:00', '2017-06-27 04:30:00', 
        
         '2017-06-27 06:00:00', '2017-06-27 07:30:00', 
        
         '2017-06-27 09:00:00'], 
        
         dtype='datetime64[ns]', freq='90T')

 
    ? 
   
         pd.date_range('2017-6-27',periods = 7,freq = 'M')

 
    ? 
   
         DatetimeIndex(['2017-06-30', '2017-07-31', '2017-08-31', '2017-09-30', 
        
         '2017-10-31', '2017-11-30', '2017-12-31'], 
        
         dtype='datetime64[ns]', freq='M')

 
    ? 
   
         pd.date_range('2017-6-27',periods = 7,freq = 'd')

 
    ? 
   
         DatetimeIndex(['2017-06-27', '2017-06-28', '2017-06-29', '2017-06-30', 
        
         '2017-07-01', '2017-07-02', '2017-07-03'], 
        
         dtype='datetime64[ns]', freq='D')

 
    ? 
   
         pd.date_range('2017-6-27',periods = 7,freq = 'H')

 
    ? 
   
         DatetimeIndex(['2017-06-27 00:00:00', '2017-06-27 01:00:00', 
        
         '2017-06-27 02:00:00', '2017-06-27 03:00:00', 
        
         '2017-06-27 04:00:00', '2017-06-27 05:00:00', 
        
         '2017-06-27 06:00:00'], 
        
         dtype='datetime64[ns]', freq='H')

常用的基础频率。

。

别名	偏移量	说明
D/d	Day	每日历日
B	BusinessDay	每工作日
H/h	Hour	每小时
T或min	Minute	每分
S	Secend	每秒
L或ms	Milli	每毫秒（每千分之一秒）
U	Micro	每微秒（即百万分之一秒）
M	MonthEnd	每月最后一个日历日
BM	BusinessDayEnd	每月最后一个工作

。

上表只展示了部分！。

WOM日期（可获得例如“每月第3个星期五”）。

 
    ? 
   
         pd.date_range('2017-06-01','2017-07-31',freq='WOM-3FRI')

 
    ? 
   
         DatetimeIndex(['2017-06-16', '2017-07-21'], dtype='datetime64[ns]', freq='WOM-3FRI')

重采样及频率转换。

降采样：高频数据到低频数据。

升采样：低频数据到高频数据。

主要函数：resample()（pandas对象都会有这个方法）。

resample方法的参数。

。

参数	说明
freq	表示重采样频率，例如‘M'、‘5min'，Second(15)
how='mean'	用于产生聚合值的函数名或数组函数，例如‘mean'、‘ohlc'、np.max等，默认是‘mean'，其他常用的值由：‘first'、‘last'、‘median'、‘max'、‘min'
axis=0	默认是纵轴，横轴设置axis=1
fill_method = None	升采样时如何插值，比如‘ffill'、‘bfill'等
closed = ‘right'	在降采样时，各时间段的哪一段是闭合的，‘right'或‘left'，默认‘right'
label= ‘right'	在降采样时，如何设置聚合值的标签，例如，9：30-9：35会被标记成9：30还是9：35,默认9：35
loffset = None	面元标签的时间校正值，比如‘-1s'或Second(-1)用于将聚合标签调早1秒
limit=None	在向前或向后填充时，允许填充的最大时期数
kind = None	聚合到时期（‘period'）或时间戳（‘timestamp'），默认聚合到时间序列的索引类型
convention = None	当重采样时期时，将低频率转换到高频率所采用的约定（start或end）。默认‘end'

。

降采样。

需考虑:

1）各区间哪边是闭合的（参数：closed）。

2）如何标记各聚合面元，用区间的开头还是末尾（参数：label）。

 
    ? 
   
         ts_index = pd.date_range('2017-06-20',periods =12,freq = '1min')#一分钟采样数据 
        
         ts = pd.Series(np.arange(12),index = ts_index)

?

 
    ? 
   
         2017-06-20 00:00:00 0 
        
         2017-06-20 00:01:00 1 
        
         2017-06-20 00:02:00 2 
        
         2017-06-20 00:03:00 3 
        
         2017-06-20 00:04:00 4 
        
         2017-06-20 00:05:00 5 
        
         2017-06-20 00:06:00 6 
        
         2017-06-20 00:07:00 7 
        
         2017-06-20 00:08:00 8 
        
         2017-06-20 00:09:00 9 
        
         2017-06-20 00:10:00 10 
        
         2017-06-20 00:11:00 11 
        
         Freq: T, dtype: int32

聚合到5分钟。

 
    ? 
   
         ts.resample('5min',how='sum')

 
    ? 
   
         C:\Program Files\anaconda\lib\site-packages\ipykernel\__main__.py:1: FutureWarning: how in .resample() is deprecated 
        
         the new syntax is .resample(...).sum() 
        
         if __name__ == '__main__': 
        
         2017-06-20 00:00:00 10 
        
         2017-06-20 00:05:00 35 
        
         2017-06-20 00:10:00 21 
        
         Freq: 5T, dtype: int32

 
    ? 
   
         ts.resample('5min',how='sum',closed='left')

 
    ? 
   
         C:\Program Files\anaconda\lib\site-packages\ipykernel\__main__.py:1: FutureWarning: how in .resample() is deprecated 
        
         the new syntax is .resample(...).sum() 
        
         if __name__ == '__main__': 
        
         2017-06-20 00:00:00 10 
        
         2017-06-20 00:05:00 35 
        
         2017-06-20 00:10:00 21 
        
         Freq: 5T, dtype: int32

 
    ? 
   
         ts.resample('5min',how='sum',closed='left',label ='left')

 
    ? 
   
         C:\Program Files\anaconda\lib\site-packages\ipykernel\__main__.py:1: FutureWarning: how in .resample() is deprecated 
        
         the new syntax is .resample(...).sum() 
        
         if __name__ == '__main__': 
        
         2017-06-20 00:00:00 10 
        
         2017-06-20 00:05:00 35 
        
         2017-06-20 00:10:00 21 
        
         Freq: 5T, dtype: int32

通过groupby进行重插样。

另外一种降采样方法。

 
    ? 
   
         ts1_index = pd.date_range('2017-6-01',periods = 100,freq = 'd') 
        
         ts1 = pd.Series(np.arange(100),index = ts1_index) 
        
         ts1.head()

 
    ? 
   
         2017-06-01 0 
        
         2017-06-02 1 
        
         2017-06-03 2 
        
         2017-06-04 3 
        
         2017-06-05 4 
        
         Freq: D, dtype: int32

 
    ? 
   
         ts1.groupby(lambda x:x.month).mean()

 
    ? 
   
         6 14.5 
        
         7 45.0 
        
         8 76.0 
        
         9 95.5 
        
         dtype: float64

 
    ? 
   
         ts1.groupby(lambda x:x.weekday).mean()

 
    ? 
   
         0 49.5 
        
         1 50.5 
        
         2 51.5 
        
         3 49.0 
        
         4 50.0 
        
         5 47.5 
        
         6 48.5 
        
         dtype: float64

 
    ? 
   
         df1 = pd.DataFrame(np.arange(200).reshape(100,2),index = ts1_index)

 
    ? 
   
         df1.groupby(lambda x:x.weekday).mean()

。

	0	1
0	99	100
1	101	102
2	103	104
3	98	99
4	100	101
5	95	96
6	97	98

。

对于具有时间序列索引的pandas数据结构，当groupby传入一个函数时，可以对时间索引对应列进行聚合。

升采样。

升采样没有聚合，但是需要填充。

 
    ? 
   
         df2 = pd.DataFrame(np.arange(200).reshape(100,2),index = ts1_index,columns=['add1','add2']) 
        
         df2.head()

。

	add1	add2
2017-06-01	0	1
2017-06-02	2	3
2017-06-03	4	5
2017-06-04	6	7
2017-06-05	8	9

。

 
    ? 
   
         df2.resample('W-THU',fill_method = 'ffill')

 
    ? 
   
         C:\Program Files\anaconda\lib\site-packages\ipykernel\__main__.py:1: FutureWarning: fill_method is deprecated to .resample() 
        
         the new syntax is .resample(...).ffill() 
        
         if __name__ == '__main__':

。

	add1	add2
2017-06-01	0	1
2017-06-08	14	15
2017-06-15	28	29
2017-06-22	42	43
2017-06-29	56	57
2017-07-06	70	71
2017-07-13	84	85
2017-07-20	98	99
2017-07-27	112	113
2017-08-03	126	127
2017-08-10	140	141
2017-08-17	154	155
2017-08-24	168	169
2017-08-31	182	183
2017-09-07	196	197
2017-09-14	198	199

。

总结。

本篇博客主要内容:

1）生成指定时间段，指定频率的日期。

2）对含有时间索引的pandas数据进行重采样，包括降采样和升采样等.

原文链接：https://blog.csdn.net/LY_ysys629/article/details/73823803 。

最后此篇关于python+pandas生成指定日期和重采样的方法的文章就讲到这里了,如果你想了解更多关于python+pandas生成指定日期和重采样的方法的内容请搜索CFSDN的文章或继续浏览相关文章，希望大家以后支持我的博客！。

文章推荐： pandas 获取季度,月度,年度首尾日期的方法

文章推荐：正则表达式中的反向预搜索(上)

文章推荐： ASP 正则表达式常用的几种方法(execute、test、replace)

文章推荐： python dataframe astype 字段类型转换方法

tomcat - 无法使用 JDK6 生成 keystore ，但可以使用 JDK5 生成
我正在尝试使用以下 keytool 命令为我的应用程序生成 keystore : keytool -genkey -alias tomcat -keystore tomcat.keystore -ke
javascript - D3.js:生成 X 轴会删除我的一些点的标签，生成 Y 轴会将它们全部删除
编辑:在西里尔正确解决问题后，我注意到只需将生成轴的函数放在用于生成标签的函数下面就可以解决问题。我几乎读完了 O'Reilly 书中关于 D3.js 的教程，并在倒数第二页上制作了散点图，但是当添
graphql - 从 Schema 生成 GraphQL GUI 和从 GUI 生成 Schema
虽然使用 GraphiQL 效果很好，但我的老板要求我实现一个用户界面，用户可以在其中通过 UI 元素(例如复选框、映射关系)检查呈现给他们的元素并获取数据，这样做将为该人生成 graphql 输入，
java - 如何删除 Netbean 6.8 中的生成源(jax-ws)？我应该根据网站地址从 WSDL 生成 WS 客户端还是从 api 生成 WS 客户端？
我尝试在 Netbean 6.8 中使用 ws-import 生成 Java 类。我想重新生成 jax-ws，因为在 ebay.api.paypalapi 包中发现了一个错误(我认为该错误是由于 Pa
生成 Perl 日期时间？
我有一个 perl 脚本，它获取系统日期并将该日期写入文件名。系统日期被分配给 TRH1 变量，然后它被设置为一个文件名。 $TRH1 =`date + %Y%m%d%H%M`; print "TR
Haskell UUID 生成
我是 Haskell 的新手，需要帮助。我正在尝试构建一种必须具有某种唯一性的新数据类型，因此我决定使用 UUID 作为唯一标识符: data MyType = MyType { uuid ::
php - 生成 XML
我制作了一个脚本，它可以根据 Mysql 数据库中的一些表生成 XML。该脚本在 PHP 中运行。 public function getRawMaterials($apiKey, $format
openssl - 生成、签署和验证数字签名
所以这是我的项目中的一个问题。 In this task, we will use OpenSSL to generate digital signatures. Please prepare a f
r - 生成/绘制对数正态生存函数
我在 SAS LIFEREG 中有一个加速故障时间模型，我想绘制它。因为 SAS 在绘图方面非常糟糕，我想实际重新生成 R 中曲线的数据并将它们绘制在那里。 SAS 提出了一个尺度(在指数分布固定为
Django key 生成
我正在为 Django 后端制作一个样板，并且我需要能够使它到达下一个下载它的人显然无法访问我的 secret key 的地方，或者拥有不同的 key 。我一直在研究一些选项，并在这个过程中进行了实验
iPhone Excel 生成
我正在创建一个生成采购订单的应用程序。我可以根据用户输入的详细信息创建文本文件。我想生成一个看起来比普通文本文件好得多的 Excel。有没有可以在我的应用程序中使用的开源库？最佳答案目前还没有任何
ScalaCheck 生成 BST
我正在尝试使用 ScalaCheck 为 BST 创建一个 Gen，但是当我调用 .sample 方法时，它给了我 java.lang.NullPointerException。我哪里错了？ seal
Javascript 测验结果计算/生成
已关闭。此问题需要 debugging details 。目前不接受答案。编辑问题以包含 desired behavior, a specific problem or error, and the
verilog 生成 if/else
我尝试编写一些代码，例如(在verilog中): parameter N = 128; if (encoder_in[0] == 1) begin 23 binary_out = 1;
hibernate - Grails 生成
我正忙于在 Grails 项目中进行从 MySQL 到 Postgres 的相当复杂的数据迁移。我正在使用 GORM 在 PostGres 中生成模式，然后执行 MySQL -> mysqldump
XSLT 生成 UUID
如何使用纯 XSLT 生成 UUID？基本上是寻找一种使用 XSLT 创建独特序列的方法。该序列可以是任意长度。我正在使用 XSLT 2.0。最佳答案这是一个good example 。基本上，
ios - 生成.app文件并安装在设备上
我尝试安装.app文件，但是当我安装并单击“同步”(在iTunes中)时，我开始在设备上开始安装，然后停止，这是一个问题，我不知道在哪里，但我看到了我无法解决的奇怪的事情: 最佳答案似乎您没有在Xc
java - 生成 JavaDocs？
自从我生成 JavaDocs 以来已经有一段时间了，我确信这些选项在过去 10 年左右的时间里已经得到了改进。我能否得到一些有关生成器的建议，该生成器将输出类似于 .Net 文档结构的 JavaDo
.net - 生成 PDF
我想学习如何生成 PDF，我不想使用任何第三方工具，我想自己用代码创建它。到目前为止，我所看到的唯一示例是我通过在第 3 方 dll 上打开反射器查看的代码，以查看发生了什么。不幸的是，到目前为止我看
C# Excel 生成
我正在从 Epplus 库生成 excel 条形图。这是我成功生成的。我的 table 是这样的 Mumbai Delhi Financial D

qq735679552

个人简介

我是一名优秀的程序员,十分优秀！

作者热门文章

滴滴打车优惠券免费领取

全站热门文章

首页

博学

6Ren·AI

商城

python+pandas生成指定日期和重采样的方法