python - 从 Pandas 中的分组数据框中获取单个值

Question

我是一个新的 Python convert(来自 Matlab)。我正在使用 pandas groupby 函数，但我被一个看似简单的问题绊倒了。我编写了一个自定义函数，我将其应用于 返回 4 个不同值的分组 df。其中三个值运行良好，但另一个值给我一个错误。这是原始的 df:

Index,SN,Date,City,State,ID,County,Age,A,B,C
0,32,9/1/16,X,AL,360,BB County,29.0,negative,positive,positive
1,32,9/1/16,X,AL,360,BB County,1.0,negative,negative,negative
2,32,9/1/16,X,AL,360,BB County,10.0,negative,negative,negative
3,32,9/1/16,X,AL,360,BB County,11.0,negative,negative,negative
4,35,9/1/16,X,AR,718,LL County,67.0,negative,negative,negative
5,38,9/1/16,X,AR,728-13,JJ County,3.0,negative,negative,negative
6,38,9/1/16,X,AR,728-13,JJ County,8.0,negative,negative,negative
7,30,9/1/16,X,AR,728-13,JJ County,8.0,negative,negative,negative
8,30,9/1/16,X,AR,728-13,JJ County,14.0,negative,negative,negative
9,30,9/1/16,X,AR,728-13,JJ County,5.0,negative,negative,negative
...

这是转换数据的函数。基本上，它计算组中“正”值的数量和观察总数。我也希望它返回 ID 值，这就是问题所在:

def _ct_id_pos(grp):
    return grp['ID'][0], grp[grp.A == 'positive'].shape[0], grp[grp.B == 'positive'].shape[0], grp.shape[0]

我应用 _ct_id_pos 函数到按Date 和SN 分组的数据:

FullMx_prime = FullMx.groupby(['Date', 'SN']).apply(_ct_id_pos).reset_index()

所以，该方法应该返回如下内容:

     Date  SN   ID       0
0  9/1/16  32  360  (360,2,1,4)
1  9/1/16  35  718  (718,0,0,1)
2  9/2/16  38  728  (728,1,0,2)
3  9/3/16  30  728  (728,2,0,3)

但是，我不断收到以下错误:

...
KeyError: 0

显然，它不喜欢这部分函数:grp['ID'][0]。我只想取 grp['ID'] 的第一个值，因为——如果有多个值——它们应该都是相同的(即，我可以取最后一个，但它不会事情)。我尝试了其他索引方法，但无济于事。

Answer 1

将 grp['ID'][0] 更改为 grp.iloc[0]['ID']

您遇到的问题是由于 grp['ID'] 选择了一个列并返回了一个 pandas.Series。这很直接，您可以合理地期望 [0] 会选择第一个元素。但是 [0] 实际上是根据系列的索引进行选择的，在这种情况下，索引来自分组的数据帧。因此，0 并不总是有效的索引。

代码:

def _ct_id_pos(grp):
    id = grp.iloc[0]['ID']
    a = grp[grp.A == 'positive'].shape[0]
    b = grp[grp.B == 'positive'].shape[0]
    sz = grp.shape[0]

    return id, a, b, sz

测试代码:

df = pd.read_csv(StringIO(u"""
    Index,SN,Date,City,State,ID,County,Age,A,B,C
    0,32,9/1/16,X,AL,360,BB County,29.0,negative,positive,positive
    1,32,9/1/16,X,AL,360,BB County,1.0,negative,negative,negative
    2,32,9/1/16,X,AL,360,BB County,10.0,negative,negative,negative
    3,32,9/1/16,X,AL,360,BB County,11.0,negative,negative,negative
    4,35,9/1/16,X,AR,718,LL County,67.0,negative,negative,negative
    5,38,9/1/16,X,AR,728-13,JJ County,3.0,negative,negative,negative
    6,38,9/1/16,X,AR,728-13,JJ County,8.0,negative,negative,negative
    7,30,9/1/16,X,AR,728-13,JJ County,8.0,negative,negative,negative
    8,30,9/1/16,X,AR,728-13,JJ County,14.0,negative,negative,negative
    9,30,9/1/16,X,AR,728-13,JJ County,5.0,negative,negative,negative
    """), header=0, index_col=0)

print(df.groupby(['Date', 'SN']).apply(_ct_id_pos).reset_index())

结果:

     Date  SN                  0
0  9/1/16  30  (728-13, 0, 0, 3)
1  9/1/16  32     (360, 0, 1, 4)
2  9/1/16  35     (718, 0, 0, 1)
3  9/1/16  38  (728-13, 0, 0, 2)