gpt4 book ai didi

python - 确定数据框列中相同类型邻居范围的最快方法

转载 作者:塔克拉玛干 更新时间:2023-11-03 05:01:18 24 4
gpt4 key购买 nike

PANDAS 数据帧中获取相同类型邻居范围的最快方法是什么?
问题是我有一个在 input 列中排序的数据框,我需要知道这些值的范围,即 output 列的值在彼此附近是相同的。

我做了什么?
我写了一个程序来满足我的需要:

data = pd.read_csv('data.txt')
print("Original Data:")
print(data)
tmpdata = data.copy()
slicedorg = data.copy()
jump = 0
to = 0
while jump < len(data):
tmpdata['output'] = (slicedorg['output'] == slicedorg['output'].loc[0])
jump += to
try:
to = tmpdata['output'].tolist().index(False)
if jump == 0:
data['input'] = data['input'].replace([data['input'].loc[range(jump, to + jump)]]
, "(begin," + str(data['input'].loc[jump + to]) + ")" )
else:
data['input'] = data['input'].replace([data['input'].loc[range(jump, to + jump)]]
, "[" + str(data['input'].loc[jump]) + ","
+ str(data['input'].loc[jump + to]) + ")")
tmpdata = tmpdata.tail(len(tmpdata) - to)
slicedorg = slicedorg.tail(len(slicedorg) - to)
tmpdata = tmpdata.reset_index(drop=True)
slicedorg = slicedorg.reset_index(drop=True)
except:
data['input'] = data['input'].replace([slicedorg['input'].loc[range(0, len(data))]]
, "[" + str(tmpdata['input'].loc[0]) + ",end)")
break
print("\nAfter Altering:")
print(data)

这段代码的结果是这样的:

Original Data:
input output
0 3 gear
1 7 gear
2 11 gear
3 24 gear
4 55 back
5 56 back
6 82 back
7 100 gear
8 101 gear
9 200 peak
10 208 peak
11 233 peak

After Altering:
input output
0 (begin,55) gear
1 (begin,55) gear
2 (begin,55) gear
3 (begin,55) gear
4 [55,100) back
5 [55,100) back
6 [55,100) back
7 [100,200) gear
8 [100,200) gear
9 [200,end) peak
10 [200,end) peak
11 [200,end) peak

即使这段代码对我有用,但我的数据表非常非常大,制作两个数据副本并循环遍历列非常耗时,有没有更好的方法来做我想做的事?请注意,也许我没有写出很好的代码(我是 python 的新手),但我主要是在寻找更快的建议算法。

我正在使用 python 3.5 和最新版本的 pandas。
谢谢

最佳答案

我太懒了,无法完全按照您想要的方式进行格式化,但您可以使用 compare-cumsum-groupby 模式来完成困难的部分:

group_ids = (df["output"] != df["output"].shift()).cumsum()
grouped = df["input"].groupby(group_ids)
bounds = grouped.min().shift(-1)

left = bounds.shift(1).fillna(0).astype(int).astype(str)
right = bounds.fillna(0).astype(int).astype(str)

left.iloc[0] = "begin"
right.iloc[-1] = "end"
bounds = left + "," + right

df["bounds"] = bounds.loc[group_ids].values

给我

>>> df
input output bounds
0 3 gear begin,55
1 7 gear begin,55
2 11 gear begin,55
3 24 gear begin,55
4 55 back 55,100
5 56 back 55,100
6 82 back 55,100
7 100 gear 100,200
8 101 gear 100,200
9 200 peak 200,end
10 208 peak 200,end
11 233 peak 200,end

关于python - 确定数据框列中相同类型邻居范围的最快方法,我们在Stack Overflow上找到一个类似的问题: https://stackoverflow.com/questions/34639149/

24 4 0
Copyright 2021 - 2024 cfsdn All Rights Reserved 蜀ICP备2022000587号
广告合作:1813099741@qq.com 6ren.com