个人中心
文章发布
退出
作者热门文章
- android - 多次调用 OnPrimaryClipChangedListener
- android - 无法更新 RecyclerView 中的 TextView 字段
- android.database.CursorIndexOutOfBoundsException : Index 0 requested, 光标大小为 0
- android - 使用 AppCompat 时，我们是否需要明确指定其 UI 组件(Spinner、EditText)颜色
24
4
我想根据不同标签的时间(1 天，2 天)回填每一列。这是代码:
from datetime import datetime, timedelta
import pandas as pd
import numpy as np
import random
np.random.seed(11)
date_today = datetime.now()
ndays = 15
df = pd.DataFrame({'date': [date_today + timedelta(days=x) for x in range(ndays)],
'test': pd.Series(np.random.randn(ndays)), 'test2':pd.Series(np.random.randn(ndays))})
df = df.set_index('date')
df = df.mask(np.random.random(df.shape) < .7)
print(df) # this will be the dataset that I generate for this question
# my orginal data set have labels that is why I convert it to str
df['test']=df['test'].astype(str)
df['test2']=df['test2'].astype(str)
df.replace('nan', np.nan, inplace = True)
for I in df.dropna().index.values:
end=I
start=end-np.timedelta64(24,'h')
start2=end-np.timedelta64(48,'h')
df[(df.index >= start) & (df.index <= end)]=df[(df.index >= start) & (df.index <= end)].bfill()
我的初始数据集将如下所示:
test test2
date
2018-03-07 11:28:23.028856 NaN NaN
2018-03-08 11:28:23.028856 NaN NaN
2018-03-09 11:28:23.028856 -0.484565 1.574634
2018-03-10 11:28:23.028856 -2.653319 NaN
2018-03-11 11:28:23.028856 NaN NaN
2018-03-12 11:28:23.028856 NaN NaN
2018-03-13 11:28:23.028856 -0.536629 NaN
2018-03-14 11:28:23.028856 NaN 0.725752
2018-03-15 11:28:23.028856 NaN 1.549072
2018-03-16 11:28:23.028856 -1.065603 0.630080
2018-03-17 11:28:23.028856 NaN NaN
2018-03-18 11:28:23.028856 -0.475733 0.732271
2018-03-19 11:28:23.028856 NaN -0.642575
2018-03-20 11:28:23.028856 NaN -0.178093
2018-03-21 11:28:23.028856 NaN -0.573955
我想要得到的是这样的:我尝试了不同的方法，但我找不到使用 bfill 的方法，bfill 不获取任何值参数，而 fillna 仅获取方法或值。
test test2
date
2018-03-07 11:28:23.028856 -0.484565_2D 1.574634_2D
2018-03-08 11:28:23.028856 -0.484565_D 1.574634_D
2018-03-09 11:28:23.028856 -0.484565 1.574634
2018-03-10 11:28:23.028856 -2.653319 NaN
2018-03-11 11:28:23.028856 -0.536629_2D NaN
2018-03-12 11:28:23.028856 -0.536629_D 0.725752_2D
2018-03-13 11:28:23.028856 -0.536629 0.725752_D
2018-03-14 11:28:23.028856 -1.065603_2D 0.725752
2018-03-15 11:28:23.028856 -1.065603_D 1.549072
2018-03-16 11:28:23.028856 -1.065603 0.630080
2018-03-17 11:28:23.028856 -0.475733_D 0.732271_D
2018-03-18 11:28:23.028856 -0.475733 0.732271
2018-03-19 11:28:23.028856 NaN -0.642575
2018-03-20 11:28:23.028856 NaN -0.178093
2018-03-21 11:28:23.028856 NaN -0.573955
更新:我的原始数据集的时间戳是不统一的，因此这段代码创建了类似的时间戳:
date_today = datetime.now()
ndays = 15
df = pd.DataFrame({'date': [date_today + timedelta(days=(abs(np.random.randn(1))*2)[0]*x) for x in range(ndays)],
'test': pd.Series(np.random.randn(ndays)), 'test2':pd.Series(np.random.randn(ndays))})
df1=pd.DataFrame({'date': [date_today + timedelta(hours=x) for x in range(ndays)],
'test': pd.Series(np.random.randn(ndays)), 'test2':pd.Series(np.random.randn(ndays))})
df2=pd.DataFrame({'date': [date_today + timedelta(days=x)-timedelta(seconds=100*x) for x in range(ndays)],
'test': pd.Series(np.random.randn(ndays)), 'test2':pd.Series(np.random.randn(ndays))})
df=df.append(df1)
df=df.append(df2)
df = df.set_index('date')
df = df.mask(np.random.random(df.shape) < .7)
print(df) # this will be the dataset that I generate for this question
# my orginal data set have labels that is why I convert it to str
df['test']=df['test'].astype(str)
df['test2']=df['test2'].astype(str)
df.replace('nan', np.nan, inplace = True)
如果有人能帮助我，我真的很感激
提前致谢。
最佳答案
使用 fillna 和方法 backfill & limit 2 创建一个填充数据框
filled = df.fillna(method='bfill', limit=2)
# filled outputs:
test test2
date
2018-03-07 16:12:25.944362 -0.484565132221 1.5746340731
2018-03-08 16:12:25.944362 -0.484565132221 1.5746340731
2018-03-09 16:12:25.944362 -0.484565132221 1.5746340731
2018-03-10 16:12:25.944362 -2.65331855926 NaN
2018-03-11 16:12:25.944362 -0.536629362235 NaN
2018-03-12 16:12:25.944362 -0.536629362235 0.725752224799
2018-03-13 16:12:25.944362 -0.536629362235 0.725752224799
2018-03-14 16:12:25.944362 -1.06560298045 0.725752224799
2018-03-15 16:12:25.944362 -1.06560298045 1.54907163337
2018-03-16 16:12:25.944362 -1.06560298045 0.630079822493
2018-03-17 16:12:25.944362 -0.475733492683 0.732271353885
2018-03-18 16:12:25.944362 -0.475733492683 0.732271353885
2018-03-19 16:12:25.944362 NaN -0.642575392433
2018-03-20 16:12:25.944362 NaN -0.178093175312
2018-03-21 16:12:25.944362 NaN -0.57395455941
创建一个 bool 数据框来指示单元格是否已填充
is_filled = df.isnull() & filled.notnull()
# is_filled outputs:
test test2
date
2018-03-07 16:12:25.944362 True True
2018-03-08 16:12:25.944362 True True
2018-03-09 16:12:25.944362 False False
2018-03-10 16:12:25.944362 False False
2018-03-11 16:12:25.944362 True False
2018-03-12 16:12:25.944362 True True
2018-03-13 16:12:25.944362 False True
2018-03-14 16:12:25.944362 True False
2018-03-15 16:12:25.944362 True False
2018-03-16 16:12:25.944362 False False
2018-03-17 16:12:25.944362 True True
2018-03-18 16:12:25.944362 False False
2018-03-19 16:12:25.944362 False False
2018-03-20 16:12:25.944362 False False
2018-03-21 16:12:25.944362 False False
创建掩码以指示需要后缀 _1D 或 _2D 的填充值
one_d = (is_filled & ~is_filled.shift(-1).fillna(False)).applymap(lambda x: '_1D' if x else '')
two_d = (is_filled & is_filled.shift(-1).fillna(False)).applymap(lambda x: '_2D' if x else '')
suffix = pd.concat([one_d, two_d]).groupby('date').agg('max')
# suffix outputs:
test test2
date
2018-03-07 16:12:25.944362 _2D _2D
2018-03-08 16:12:25.944362 _1D _1D
2018-03-09 16:12:25.944362
2018-03-10 16:12:25.944362
2018-03-11 16:12:25.944362 _2D
2018-03-12 16:12:25.944362 _1D _2D
2018-03-13 16:12:25.944362 _1D
2018-03-14 16:12:25.944362 _2D
2018-03-15 16:12:25.944362 _1D
2018-03-16 16:12:25.944362
2018-03-17 16:12:25.944362 _1D _1D
2018-03-18 16:12:25.944362
2018-03-19 16:12:25.944362
2018-03-20 16:12:25.944362
2018-03-21 16:12:25.944362
将后缀数据框连接到填充的数据框将 float 转换为字符串并附加适当的后缀
final = filled.join(suffix, rsuffix='_x')
final.apply(lambda x: '{}{}'.format(x.test, x.test_x), axis=1)
# outputs:
date
2018-03-07 16:12:25.944362 -0.484565132221_2D
2018-03-08 16:12:25.944362 -0.484565132221_1D
2018-03-09 16:12:25.944362 -0.484565132221
2018-03-10 16:12:25.944362 -2.65331855926
2018-03-11 16:12:25.944362 -0.536629362235_2D
2018-03-12 16:12:25.944362 -0.536629362235_1D
2018-03-13 16:12:25.944362 -0.536629362235
2018-03-14 16:12:25.944362 -1.06560298045_2D
2018-03-15 16:12:25.944362 -1.06560298045_1D
2018-03-16 16:12:25.944362 -1.06560298045
2018-03-17 16:12:25.944362 -0.475733492683_1D
2018-03-18 16:12:25.944362 -0.475733492683
2018-03-19 16:12:25.944362 nan
2018-03-20 16:12:25.944362 nan
2018-03-21 16:12:25.944362 nan
类似地，您可以为 test2 生成填充和后缀系列。但是，我建议您将 test 和 test2 保留为数字类型，并将填充和滞后信息存储在单独的列中(此处为列 suffix将该信息存储在数据框 final 中。
关于python - 使用时间窗口的标签回填缺失数据，我们在Stack Overflow上找到一个类似的问题： https://stackoverflow.com/questions/49158268/
24
4
0
所以我使用一个带有整个 block 的标签作为链接，它是一个产品展示，所以你点击它会转到产品页面。现在我创建了一个标签作为链接到购物车页面的按钮。所以我让它工作，但是当我点击购物车按钮时，两个页面都会
根据 Web 标准，创建带有标题 1 的链接的正确代码是什么？ 是吗 stackoverflow 或 stackoverflow 谢谢 最佳答案 根据网络标准，您不能将 block 元素放入内
在Java中它是这样写的..当我移植这段代码时...意识到没有这样的东西 break 和continue . 我知道这些命令没有包含在内，因为在使用带有命令的 goto 时必须有一种更简洁的方法来执
我们有一个相当标准的发布过程，使用 Visual Source Safe 在发布之前标记构建。这允许我们在出现任何问题时从该标签中获取，并在需要更改时使用它进行分支。 我们有几个不同的项目，并且总是使
我必须创建一个搜索内容，其中包含搜索框、标题和段落描述。默认情况下，描述被禁用，当我输入一些与描述文本匹配的文本时，描述段落标签应该打开。一些匹配的演示是这样的: [ fiddle ][1] 但默认情
我一直在阅读有关 的文档标签，我似乎无法理解它与简单地使用 有何不同那是 display: none; 文档:template tag 例子 对比 例子
我需要一个脚本来复制当开关按钮打开时标记，当开关按钮关闭时删除标记。我需要一个简单的方法。这是开关按钮: 我试过这个: var change
JSF 是一个 MVC 框架，但我很困惑为什么我们已经有了这么多 HTML 标签还需要 JSF 标签。毫无疑问，JSF 简化了很多事情。我想进一步了解 JSF 中的模型 View 和 Controll
我在这个 website 上看到了那些 html 代码: Homepa
我添加了 photoswipe 插件，可以使用 搜索我的所有照片。标签，如果点击，照片就会变成全屏。我让它工作了，但现在我的导航栏(有 标签)在点击时会触发 photoswipe 插件。 在 ph
标签
我正在尝试截断显示自 的文本标签，但它不工作。我将样式应用于其他标签样式并且它确实有效(我看到的示例中没有一个使用 标签)。我想知道是否有人可以向我解释为什么会这样(我不是最擅长 HTML/CSS
HTML 是这样的: Menu 1 Menu 2 Sub menu 2
我可以更改 TextInputLayout 的位置 float 标签(底部 float 标签)吗？我需要为波纹管 float 标签设置正确的位置。 最佳答案 我解决了我的问题，这是我的 xml:
我的代码是 printMsg : function(data) { $("#message").html(data.bodyText); ... } 这里 data.body
我是 Scrapy 和 Xpath 的初学者，我正在寻找解析具有以下结构的网站 cat1 value1 value2
关闭。这个问题不符合Stack Overflow guidelines .它目前不接受答案。 要求提供代码的问题必须表现出对所解决问题的最低限度理解。包括尝试过的解决方案、为什么它们不起作用，以及
我必须从 xml 中解析数据。这是我的 xml- 或者它的 url 是:http://mobileecommerce.site247365.com/admin/catdata.xml News f
如何创建应该允许多行数据的标记。不要说使用textarea标签。我知道，但我只想 标记因为标签具有 value 属性。所以当我从 xml 文件获取值时，我应该使用 jquery 语法动态获取.. 最佳
我有一个页面使用我定义的某些样式。 在同一页面上，我刚刚导入了一个使用自己样式的外部 jQuery 插件，例如，包括 。被我自己覆盖的标签样式。 如何确保我的样式表中的样式不会覆盖 jQuery 插件
关闭。这个问题是opinion-based .它目前不接受答案。 想要改进这个问题？ 更新问题，以便 editing this post 可以用事实和引用来回答它. 关闭 8 年前。 Improve
我是一名优秀的程序员,十分优秀！