python - Pandas 多重索引 : iterate rows and add specific values to create a new variable

Question

我有一个包含 Multiindex(id 和 datetime)的 pandas 数据框和一个名为 X1 的列。

                                X1
id          datetime          
a1ssjdldf   2019 Jul 10          2  
            2019 Jul 11         22  
            2019 Jul 12         21
r2dffs      2019 Jul 10         14  
            2019 Jul 11         13  
            2019 Jul 12         11

我想创建一个新变量X2，其中对应的值是同一行的X1值与上一行的X1值之间的差。但每次它看到一个新的 id 时，相应的值都必须从零重新开始。

例如:

                                X1          X2
id          datetime          
a1ssjdldf   2019 Jul 10          2           0
            2019 Jul 11         22          20  
            2019 Jul 12         21          -1
r2dffs      2019 Jul 10         14           0
            2019 Jul 11         13          -1
            2019 Jul 12         11          -2

Answer 1

使用DataFrameGroupBy.diff按第一级并将缺失值替换为 Series.fillna :

df['X2'] = df.groupby(level=0)['X1'].diff().fillna(0, downcast='int')
print (df)
                       X1  X2
id        datetime           
a1ssjdldf 2019 Jul 10   2   0
          2019 Jul 11  22  20
          2019 Jul 12  21  -1
r2dffs    2019 Jul 10  14   0
          2019 Jul 11  13  -1
          2019 Jul 12  11  -2