分桶
或
离散化
,可用于将连续数据的间隔分组到“箱”或“桶”中。在本文中将介绍如何使用 Python的Pandas库中的4种方法对数值进行分箱。
首先,创建示例数据框
import pandas as pd
import numpy as npdef create_df():df = pd.DataFrame({'score': np.random.randint(0,101,1000)})return dfdf = create_df()
df.head()
上面数据表示1000名学生的0到100分的考试分数。而我们的任务是将数字分数分为值“A”、“B”和“C”的等级,其中“A”是最好的,“C”是最差的。
Pandas.between方法返回一个包含True的布尔向量,用来对应的Series元素位于边界值left和right之间。其中有三个参数“
我们根据以下间隔规则将学生的分数分为等级:
其中方括号[和圆括号)分别表示边界值是包含的和不包含的。我们需要确定哪个分数在感兴趣的区间之间,并为其分配相应的等级值。注意看下面的不同的参数表示是否包含边界
df.loc[df['score'].between(0, 50, 'both'), 'grade'] = 'C'
df.loc[df['score'].between(50, 80, 'right'), 'grade'] = 'B'
df.loc[df['score'].between(80, 100, 'right'), 'grade'] = 'A'
df.head()
以下是每个分数区间的人数统计:
注意:此方法需要为每个bin编写处理的代码,因此它仅适用于bin很少的情况。
使用cut也可以将值分类为离散的间隔。此函数对于从连续变量到分类变量很有用。cut的参数如下:
代码如下:
bins = [0, 50, 80, 100]
labels = ['C', 'B', 'A']
df['grade'] = pd.cut(x = df['score'], bins = bins, labels = labels, include_lowest = True)
df.head()
这样就创建一个包含bin边界值的bins列表和一个包含相应bin标签的标签列表。
查看每个区段的人数:
qcut可以根据排名或基于样本分位数将变量离散为大小相等的桶。qcut的参数如下:
在前两个示例中,为每个级别定义了分数间隔,这里使得每个级别的学生数量不均匀。在下面的示例中,将尝试将学生分类为3个具有相等(大约)数量的分数等级。示例中有1000名学生,因此每个分箱应该有大约333名学生。
df['grade'],cut_bin = pd.qcut(df['score'], q=3, labels=['C', 'B', 'A'], retbins=True)
df.head()
如果retbins设置为 True, 则会返回 bin 边界:
可以看到分数间隔如下:
再次使用.value_counts()
检查每个等级有多少学生。理想情况下,每个箱应该有大约 333 名学生。
虽然 pandas的.value_counts
通常用于计算系列中唯一值的数量,但它也可用于使用bins参数将值分组到半开箱中。
需要强调的是:
还可以通过传入边界列表来定义bin边界:
这里的输出结果与方法1和2的结果相同。