SelectByInformationValue#

class feature_engine.selection.SelectByInformationValue(variables=None, bins=5, strategy='equal_width', threshold=0.2, confirm_variables=False)[源代码][源代码]#

SelectByInformationValue() 根据特征的信息值(IV)选择特征。信息值计算如下:

\[IV = ∑ (正样本比例 - 负样本比例) * WoE\]

哪里:

  • 阳性病例的比例是类别1的观测值的比例。

    从总的1级观测中。

  • 负样本的比例是类别0的观测值的比例,

    从总的类别 0 观察中。

  • WoE 是证据的权重。

SelectByInformationValue() 仅适用于选择二分类的特征。

SelectByInformationValue() 可以确定数值和分类变量的 IV。对于数值变量,它首先将变量排序到区间中,然后确定 IV。

你可以传递一个变量列表来检查。或者,转换器将检查所有变量。

IV 允许你评估每个变量对目标变量的独立贡献。转换器选择那些 IV 值高于阈值的变量。

更多详情请参阅 用户指南

参数
变量: 列表, 默认=无

要评估的变量列表。如果为 None,转换器将评估数据集中所有变量(日期时间除外)。

bins: int, default = 5

如果数据集包含数值变量,数值将被分类的区间数量。

strategy: str, default = ‘equal_width’

箱子应该是等宽的(’equal_width’)还是等频的(’equal_frequency’)。

阈值: float, int, 默认 = 0.2.

丢弃特征的阈值。如果一个特征的IV值小于阈值,该特征将被丢弃。

confirm_variables: bool, default=False

如果设置为 True,输入数据框中不存在的变量将从变量列表中移除。仅在向参数 variables 传递变量列表时使用。有关更多详细信息,请参见参数 variables。

属性
变量_

将被转换的变量组。

信息值_

包含每个特征信息值的字典。

features_to_drop_:

列出将被移除的功能。

feature_names_in_:

列出在 fit 期间看到的特征名称。

n_features_in_:

在拟合过程中使用的训练集中的特征数量。

参考文献

1

证据权重和信息价值解释 https://www.listendata.com/2015/03/weight-of-evidence-woe-and-information.html

2

连续变量的 WoE 和 IV https://www.listendata.com/2019/08/WOE-IV-Continuous-Dependent.html

示例

>>> import pandas as pd
>>> from feature_engine.selection import SelectByInformationValue
>>> X = pd.DataFrame(dict(x1 = [1,1,1,1,1,1],
>>>                     x2 = [3,2,2,3,3,2],
>>>                     x3 = ["a","b","c","a","c","b"]))
>>> y = pd.Series([1,1,1,0,0,0])
>>> iv = SelectByInformationValue()
>>> iv.fit_transform(X, y)
    x2
0   3
1   2
2   2
3   3
4   3
5   2

方法

拟合:

寻找具有高信息价值的功能。

fit_transform:

拟合数据,然后进行转换。

get_feature_names_out:

获取转换后的输出特征名称。

get_params:

获取此估计器的参数。

设置参数:

设置此估计器的参数。

获取支持:

获取所选特征的掩码或整数索引。

转换:

移除信息价值低的功能。

fit(X, y)[源代码][源代码]#

学习信息价值。找到信息价值高于阈值的特征。

参数
X: pandas 数据框,形状为 = [样本数, 特征数]

训练输入样本。

y: pandas series of shape = [n_samples, ]

目标,必须是二进制文件。

fit_transform(X, y=None, **fit_params)[源代码]#

拟合数据,然后进行转换。

使用可选参数 fit_params 将转换器拟合到 Xy,并返回 X 的转换版本。

参数
X类似数组的形状 (n_samples, n_features)

输入样本。

y形状为 (n_samples,) 或 (n_samples, n_outputs) 的类数组对象,默认=None

目标值(无监督变换为 None)。

**fit_参数dict

额外的拟合参数。

返回
X_newndarray 数组,形状为 (n_samples, n_features_new)

变换后的数组。

get_feature_names_out(input_features=None)[源代码]#

获取转换后的输出特征名称。换句话说,返回转换后的数据框的变量名称。

参数
input_features数组或列表,默认=None

此参数仅为了与Scikit-learn管道兼容而存在。

  • 如果 None,则使用 feature_names_in_ 作为特征名称。

  • 如果是一个数组或列表,那么 input_features 必须与 feature_names_in_ 匹配。

返回
feature_names_out: 列表

转换后的特征名称。

rtype

List[Union[str, int]] ..

get_metadata_routing()[源代码]#

获取此对象的元数据路由。

请查看 用户指南 以了解路由机制的工作原理。

返回
路由MetadataRequest

一个封装了路由信息的 MetadataRequest

get_params(deep=True)[源代码]#

获取此估计器的参数。

参数
深度bool, 默认=True

如果为真,将返回此估计器及其包含的作为估计器的子对象的参数。

返回
参数dict

参数名称映射到它们的值。

get_support(indices=False)[源代码]#

获取所选特征的掩码或整数索引。

参数
索引bool, 默认=False

如果为真,返回值将是一个整数数组,而不是布尔掩码。

返回
支持数组

一个从特征向量中选择保留特征的索引。如果 indices 为 False,这是一个形状为 [# 输入特征] 的布尔数组,其中元素为 True 表示其对应的特征被选择保留。如果 indices 为 True,这是一个形状为 [# 输出特征] 的整数数组,其值为输入特征向量中的索引。

set_params(**params)[源代码]#

设置此估计器的参数。

该方法适用于简单的估计器以及嵌套对象(如 Pipeline)。后者具有形式为 <component>__<parameter> 的参数,因此可以更新嵌套对象的每个组件。

参数
**参数dict

估计器参数。

返回
self估计器实例

估计器实例。

transform(X)[源代码]#

返回包含所选特征的数据框。

参数
X: pandas 数据框,形状为 [样本数, 特征数]。

输入的数据框。

返回
X_new: 形状为 [n_samples, n_selected_features] 的 pandas dataframe

包含所选特征的 Pandas 数据框。

rtype

DataFrame ..