- c - 在位数组中找到第一个零
- linux - Unix 显示有关匹配两种模式之一的文件的信息
- 正则表达式替换多个文件
- linux - 隐藏来自 xtrace 的命令
我在 pandas 中有两个时间序列,它们在看似随机的时间进行观察。下面的代码将创建一些示例时间序列:
import numpy as np
import pandas as pd
s1 = pd.Series(data=np.arange(5), index=['2014-05-06 09:15:34', '2014-05-06 09:34:00',
'2014-05-06 11:20:43', '2014-05-07 12:13:00',
'2014-05-07 17:29:19'])
s1.index = pd.DatetimeIndex(s1.index)
s2 = pd.Series(data=np.arange(6)*10, index=['2014-05-03 10:20:09', '2014-05-06 09:13:26',
'2014-05-06 09:23:38', '2014-05-06 11:09:52',
'2014-05-07 12:14:08', '2014-05-07 17:35:19'])
s2.index = pd.DatetimeIndex(s2.index)
给出s1
:
2014-05-06 09:15:34 0
2014-05-06 09:34:00 1
2014-05-06 11:20:43 2
2014-05-07 12:13:00 3
2014-05-07 17:29:19 4
dtype: int64
和s2
:
2014-05-03 10:20:09 0
2014-05-06 09:13:26 10
2014-05-06 09:23:38 20
2014-05-06 11:09:52 30
2014-05-07 12:14:08 40
2014-05-07 17:35:19 50
dtype: int64
我想合并这些时间序列并提取每个时间序列中存在观测值的行彼此相隔 10 分钟以内。因此,使用上面的数据:
s2
的第一个元素与 s1
中的任何内容都不匹配。s2
的第二个元素与 s1
的第一个元素相差大约 2 分钟,因此它们会匹配。理想情况下,我最终会得到一个包含 s1_time
、s1_value
、s2_time
列的 DataFrame
, s2_value
,但我并不关心输出的确切格式。
我已经尝试了很多不同的方法来解决这个问题,使用 pd.merge
,尝试使用 asof
等等 - 但我最终把自己完全搞糊涂了.我敢肯定这是一个以前已经解决的问题,但我似乎无法在网上找到很多与随机间隔时间序列相关的内容(很多都是基于每小时或每天的事情)。
在 pandas 中执行此操作的最佳方法是什么?
最佳答案
可以先用reindex
使用 method='nearest'
然后如果 s2
中的值是 unique
,merge
通过这个值:
print (s2.reindex(s1.index, method='nearest'))
2014-05-06 09:15:34 10
2014-05-06 09:34:00 20
2014-05-06 11:20:43 30
2014-05-07 12:13:00 40
2014-05-07 17:29:19 50
dtype: int32
print (pd.DataFrame({'s1':s1, 's2':s2.reindex(s1.index, method='nearest'), 'index_s1': s1.index}))
index_s1 s1 s2
2014-05-06 09:15:34 2014-05-06 09:15:34 0 10
2014-05-06 09:34:00 2014-05-06 09:34:00 1 20
2014-05-06 11:20:43 2014-05-06 11:20:43 2 30
2014-05-07 12:13:00 2014-05-07 12:13:00 3 40
2014-05-07 17:29:19 2014-05-07 17:29:19 4 50
print (pd.merge(s2.reset_index().rename(columns={0:'s2'}),
pd.DataFrame({'s1':s1, 's2':s2.reindex(s1.index, method='nearest'), 'index_s1': s1.index}),
on='s2').rename(columns={'index':'index_s2'}))
index_s2 s2 index_s1 s1
0 2014-05-06 09:13:26 10 2014-05-06 09:15:34 0
1 2014-05-06 09:23:38 20 2014-05-06 09:34:00 1
2 2014-05-06 11:09:52 30 2014-05-06 11:20:43 2
3 2014-05-07 12:14:08 40 2014-05-07 12:13:00 3
4 2014-05-07 17:35:19 50 2014-05-07 17:29:19 4
编辑:
我在 reindex
中找到了新参数 tolerance
:
print (s2.reindex(s1.index, method='nearest',tolerance='10Min'))
2014-05-06 09:15:34 10.0
2014-05-06 09:34:00 NaN
2014-05-06 11:20:43 NaN
2014-05-07 12:13:00 40.0
2014-05-07 17:29:19 50.0
dtype: float64
关于python - 合并 Pandas 中的两个时间序列并在阈值时间差内提取观察值,我们在Stack Overflow上找到一个类似的问题: https://stackoverflow.com/questions/38401166/
我想知道是否有一种方法可以重复记录而不进行排序?有时候,我想保持原始顺序,只想删除重复的记录。 是否可以? 顺便说一句,以下是我所知道的有关重复记录的信息,这些记录最终会进行排序。 1。 proc s
我想更新我的 Activity 中依赖于另一个列表的数据的列表。这两个数据列表都是从我的 View 模型的 Activity 中观察到的。从第一个列表获取数据后,我需要在此列表上运行 for 循环以获
我无法理解这个问题。我怎样才能等待 i==2 完成然后再继续其他 i 的操作? class Observable { constructor() { this.observer
我正在观察这样的 Ember Data RecordArray: myArray: function() { return MyRecord.find(); }.property(), isDir
我想在动画开始时观察 strokeEnd 键路径。但是它不起作用,我哪里出错了? - (void)addAnimation { // do animation CABasicAnima
是否可以在 Algorand 中观看某个交易,就像在以太坊中观看某个事件一样? 最佳答案 官方 algod 和 indexer API 目前不支持在 Algorand 上观看交易/事件。 您可以通过使
我有一个可以拖放到其他 View 之上的 View (可以说是类别)。为了检测我在哪个类别 View 之上,我将它们的帧存储在一个帧数组中,这发生在它们不可见叠加层的 onAppear 中。 (这基于
是否可以将观察者添加到可见性更改(即调用 show() 和 hide())时触发的 DOM 元素?谢谢! 最佳答案 如果您想观察任何对 .show() 或 .hide() 的调用,并且可以访问 jQu
我对保存在 NSUserdefaults 中的特定键的值变化感兴趣。然而,我所拥有的并不适合我。 observeValueForKeyPath 不会被触发。 更新:我想我已经发现了这个问题。如果我使用
我正在寻找在 UITableView 顶部实现捏入/捏出,我已经研究了几种方法,包括这个: Similar question 但是,虽然我可以创建一个 UIViewTouch 对象并将其覆盖到我的 U
我有一个在界面中公开的可变数组。我还公开了数组访问器来修改数组。如果数组内发生任何修改,我将不得不使用 KVO 重置并重新计算一些数据。为了支持 KVO,我使用 array accessors如下图:
当 NSPopupButton 发生变化时如何获得方法调用?谢谢! 最佳答案 您只需添加一个操作方法,就像使用 NSButton 或任何其他控件一样。 关于iphone - 观察 NSPopupBut
我正在尝试让键值观察适用于 NSMutableArray。下面是被观察类 MyObservee 的 .h 文件: @interface MyObservee : NSObject { @pri
我很难理解让 Node.js 进程(异步)运行但仍然触发“退出”状态,以便在 CPU 处理完成后我可以做更多事情。 例如,我有一个 Google 地方信息抓取工具,可以在所有可用的 CPU 上高效地分
我正在尝试编写行为类似于kubectl get pods --watch . 这样,每次 pod 的状态发生变化时,我都会被触发。 我创建了一个 go项目(在集群中运行)并添加以下代码: podsWa
我有这个代码: 当时我需要触发Javascript方法或具有给定 id 的 div 隐藏或显示,这将在屏幕调整大小期间发生(因此 u k-hidden-small ),这可以
我想使用 Couchbase,但我想在一些类似于 RethinkDB 的方式实现更改跟踪。 似乎有很多方法可以将更改从 Couchbase 服务器推送给我。 DCP 点击 XDCR 哪一个是正确的选择
虽然 MutationObserver 允许监视 HTMLElement 属性的显式大小更改,但它似乎没有一种方法/配置允许我监视其大小的隐式更改,这些更改是由浏览器。 这是一个例子: const o
我有一个 auto-carousel 指令,它循环访问链接元素的子元素。 但是,子级尚未加载到 DOM 中,因为它们的 ng-if 表达式尚未解析。 如何确保父指令知道其 DOM 树已发生更改?
有没有办法观察 AngularJS 指令中函数表达式的值变化?我有以下 HTML 和 JavaScript,模板中 {{editable()}} 的插值显示该值计算为 true,而检查 Chrome
我是一名优秀的程序员,十分优秀!