使用Pandas在每个过滤器中确定列中的最接近值
问题内容:
我有一个包含类别和值的数据框。我需要在每个类别中找到最接近值的值。我想我已经接近了,但是当将argsort的结果应用于原始数据帧时,我并不能真正获得正确的输出。
例如,如果输入是在代码中定义下面的输出应该只(a, 1, True)
,(b, 2, True)
,(c, 2, True)
和所有其他isClosestValues
应该是假。
如果多个值最接近,则它应该是列出的第一个标记的值。
这是我可以使用的代码,但是我无法正确将其重新应用于数据框。我喜欢一些指针。
df = pd.DataFrame()
df['category'] = ['a', 'b', 'b', 'b', 'c', 'a', 'b', 'c', 'c', 'a']
df['values'] = [1, 2, 3, 4, 5, 4, 3, 2, 1, 0]
df['isClosest'] = False
uniqueCategories = df['category'].unique()
for c in uniqueCategories:
filteredCategories = df[df['category']==c]
sortargs = (filteredCategories['value']-2.0).abs().argsort()
#how to use sortargs so that we set column in df isClosest=True if its the closest value in each category to 2.0?
问题答案:
您可以创建一列绝对差异:
df['dif'] = (df['values'] - 2).abs()
df
Out:
category values dif
0 a 1 1
1 b 2 0
2 b 3 1
3 b 4 2
4 c 5 3
5 a 4 2
6 b 3 1
7 c 2 0
8 c 1 1
9 a 0 2
然后使用groupby.transform
检查每个组的最小值是否等于您计算出的差:
df['is_closest'] = df.groupby('category')['dif'].transform('min') == df['dif']
df
Out:
category values dif is_closest
0 a 1 1 True
1 b 2 0 True
2 b 3 1 False
3 b 4 2 False
4 c 5 3 False
5 a 4 2 False
6 b 3 1 False
7 c 2 0 True
8 c 1 1 False
9 a 0 2 False
df.groupby('category')['dif'].idxmin()
还会为您提供每个类别的最接近值的索引。您也可以将其用于映射。
供选择:
df.loc[df.groupby('category')['dif'].idxmin()]
Out:
category values dif
0 a 1 1
1 b 2 0
7 c 2 0
分配:
df['is_closest'] = False
df.loc[df.groupby('category')['dif'].idxmin(), 'is_closest'] = True
df
Out:
category values dif is_closest
0 a 1 1 True
1 b 2 0 True
2 b 3 1 False
3 b 4 2 False
4 c 5 3 False
5 a 4 2 False
6 b 3 1 False
7 c 2 0 True
8 c 1 1 False
9 a 0 2 False
这些方法之间的差异在于,如果对照差异检查相等性,则在有联系的情况下,所有行都将为True。但是,idxmin
第一次出现时,它将返回True(每个组仅返回一个)。