step_nzv()
创建配方步骤的规范,该步骤可能会删除高度稀疏和不平衡的变量。
用法
step_nzv(
recipe,
...,
role = NA,
trained = FALSE,
freq_cut = 95/5,
unique_cut = 10,
options = list(freq_cut = 95/5, unique_cut = 10),
removals = NULL,
skip = FALSE,
id = rand_id("nzv")
)
参数
- recipe
-
一个菜谱对象。该步骤将添加到此配方的操作序列中。
- ...
-
一个或多个选择器函数用于为此步骤选择变量。有关更多详细信息,请参阅
selections()
。 - role
-
由于没有创建新变量,因此此步骤未使用。
- trained
-
指示预处理数量是否已估计的逻辑。
- freq_cut, unique_cut
-
过滤过程的数字参数。请参阅下面的详细信息部分。
- options
-
过滤器的选项列表(请参阅下面的详细信息)。
- removals
-
包含应删除的列名称的字符串。这些值直到调用
prep()
后才确定。 - skip
-
一个合乎逻辑的。当
bake()
烘焙食谱时是否应该跳过此步骤?虽然所有操作都是在prep()
运行时烘焙的,但某些操作可能无法对新数据进行(例如处理结果变量)。使用skip = TRUE
时应小心,因为它可能会影响后续操作的计算。 - id
-
该步骤特有的字符串,用于标识它。
细节
此步骤可能会从数据集中删除列。如果通过名称专门引用缺失的列,这可能会导致配方中的后续步骤出现问题。为了避免这种情况,请参阅 selections 的“保存配方和过滤列的提示”部分中的建议。
此步骤诊断具有一个唯一值的预测变量(即零方差预测变量)或具有以下两个特征的预测变量:
-
相对于样本数量,它们具有很少的唯一值,并且
-
最常见值的频率与第二常见值的频率之比很大。
例如,近零方差预测器的一个示例是,对于 1000 个样本,具有两个不同的值,其中 999 个是单个值。
要进行标记,首先,最常见值相对于第二最常见值(称为 "frequency ratio")的频率必须高于 freq_cut
。其次,“唯一值的百分比”,即唯一值的数量除以样本总数(乘以 100),也必须低于 unique_cut
。
在上面的示例中,频率比为 999,唯一值百分比为 0.2%。
整理
当您tidy()
此步骤时,将返回带有列terms
(将被删除的列)的tibble。
箱重
此步骤执行可以利用案例权重的无监督操作。因此,个案权重仅与频率权重一起使用。有关更多信息,请参阅 case_weights 中的文档和 tidymodels.org
中的示例。
也可以看看
其他变量过滤步骤:step_corr()
、step_filter_missing()
、step_lincomb()
、step_rm()
、step_select()
、step_zv()
例子
data(biomass, package = "modeldata")
biomass$sparse <- c(1, rep(0, nrow(biomass) - 1))
biomass_tr <- biomass[biomass$dataset == "Training", ]
biomass_te <- biomass[biomass$dataset == "Testing", ]
rec <- recipe(HHV ~ carbon + hydrogen + oxygen +
nitrogen + sulfur + sparse,
data = biomass_tr
)
nzv_filter <- rec %>%
step_nzv(all_predictors())
filter_obj <- prep(nzv_filter, training = biomass_tr)
filtered_te <- bake(filter_obj, biomass_te)
any(names(filtered_te) == "sparse")
#> [1] FALSE
tidy(nzv_filter, number = 1)
#> # A tibble: 1 × 2
#> terms id
#> <chr> <chr>
#> 1 all_predictors() nzv_evI1V
tidy(filter_obj, number = 1)
#> # A tibble: 1 × 2
#> terms id
#> <chr> <chr>
#> 1 sparse nzv_evI1V
相关用法
- R recipes step_nnmf 非负矩阵分解信号提取
- R recipes step_normalize 中心和比例数值数据
- R recipes step_novel 新因子水平的简单赋值
- R recipes step_num2factor 将数字转换为因数
- R recipes step_ns 自然样条基函数
- R recipes step_nnmf_sparse 带套索惩罚的非负矩阵分解信号提取
- R recipes step_naomit 删除缺失值的观测值
- R recipes step_unknown 将缺失的类别分配给“未知”
- R recipes step_relu 应用(平滑)修正线性变换
- R recipes step_poly_bernstein 广义伯恩斯坦多项式基
- R recipes step_impute_knn 通过 k 最近邻进行插补
- R recipes step_impute_mean 使用平均值估算数值数据
- R recipes step_inverse 逆变换
- R recipes step_pls 偏最小二乘特征提取
- R recipes step_ratio 比率变量创建
- R recipes step_geodist 两个地点之间的距离
- R recipes step_depth 数据深度
- R recipes step_other 折叠一些分类级别
- R recipes step_harmonic 添加正弦和余弦项以进行谐波分析
- R recipes step_corr 高相关滤波器
- R recipes step_select 使用 dplyr 选择变量
- R recipes step_regex 检测正则表达式
- R recipes step_spline_b 基础样条
- R recipes step_window 移动窗口函数
- R recipes step_ica ICA 信号提取
注:本文由纯净天空筛选整理自Max Kuhn等大神的英文原创作品 Near-Zero Variance Filter。非经特殊声明,原始代码版权归原作者所有,本译文未经允许或授权,请勿转载或复制。