当前位置: 首页>>代码示例 >>用法及示例精选 >>正文


R yardstick spec 特异性


这些函数计算与参考结果("truth" 或黄金标准)相比的测量系统的spec()(特异性)。高度相关的函数是 sens()ppv()npv()

用法

spec(data, ...)

# S3 method for data.frame
spec(
  data,
  truth,
  estimate,
  estimator = NULL,
  na_rm = TRUE,
  case_weights = NULL,
  event_level = yardstick_event_level(),
  ...
)

spec_vec(
  truth,
  estimate,
  estimator = NULL,
  na_rm = TRUE,
  case_weights = NULL,
  event_level = yardstick_event_level(),
  ...
)

specificity(data, ...)

# S3 method for data.frame
specificity(
  data,
  truth,
  estimate,
  estimator = NULL,
  na_rm = TRUE,
  case_weights = NULL,
  event_level = yardstick_event_level(),
  ...
)

specificity_vec(
  truth,
  estimate,
  estimator = NULL,
  na_rm = TRUE,
  case_weights = NULL,
  event_level = yardstick_event_level(),
  ...
)

参数

data

包含 truthestimate 参数指定的列的 data.frame,或者 table /matrix,其中真正的类结果应位于表的列中。

...

目前未使用。

truth

真实类结果的列标识符(即 factor )。这应该是一个不带引号的列名,尽管此参数是通过表达式传递的并且支持quasiquotation(您可以不带引号的列名)。对于 _vec() 函数,一个 factor 向量。

estimate

预测类结果的列标识符(也是 factor )。与 truth 一样,可以通过不同的方式指定,但主要方法是使用不带引号的变量名称。对于 _vec() 函数,一个 factor 向量。

estimator

其中之一: "binary""macro""macro_weighted""micro" 指定要完成的平均类型。 "binary" 仅与两类情况相关。其他三种是计算多类指标的通用方法。默认会根据 estimate 自动选择 "binary""macro"

na_rm

logical 值,指示在计算继续之前是否应剥离 NA 值。

case_weights

案例权重的可选列标识符。这应该是一个不带引号的列名称,其计算结果为 data 中的数字列。对于 _vec() 函数,一个数值向量。

event_level

单个字符串。 "first""second" 指定将truth 的哪个级别视为"event"。此参数仅适用于 estimator = "binary" 。默认使用内部帮助程序,通常默认为 "first" ,但是,如果设置了已弃用的全局选项 yardstick.event_first ,则将使用该帮助程序并发出警告。

tibble 包含列 .metric.estimator.estimate 以及 1 行值。

对于分组 DataFrame ,返回的行数将与组数相同。

对于 spec_vec() ,单个 numeric 值(或 NA )。

细节

特异性衡量被正确识别为阴性的阴性的比例。

当计算的分母为 0 时,特异性未定义。当 # true_negative = 0# false_positive = 0 都为 true 时会发生这种情况,这意味着不存在真正的负数。计算二进制特异性时,将返回 NA 值并带有警告。计算多类特异性时,单个 NA 值将被删除,计算将继续进行,并出现警告。

相关级别

在计算二元分类指标时,对于哪个因子级别应自动被视为 "event" 或 "positive" 结果,没有通用约定。在 yardstick 中,默认使用第一级。要更改此设置,请将参数 event_level 更改为 "second" 以将因子的最后一个级别视为感兴趣级别。对于涉及 one-vs-all 比较(例如宏平均)的多类扩展,此选项将被忽略,并且 "one" 级别始终是相关结果。

多级

此指标可使用宏观、微观和宏观加权平均。如果提供了超过 2 个级别的 truth 因子,则默认选择宏平均。否则,将进行标准二进制计算。有关详细信息,请参阅vignette("multiclass", "yardstick")

执行

假设一个 2x2 表,其符号为:

Reference
PredictedPositiveNegative
PositiveAB
NegativeCD

这里使用的公式是:

Sensitivity = A/(A+C)

Specificity = D/(B+D)

Prevalence = (A+C)/(A+B+C+D)

PPV = (Sensitivity * Prevalence) / ((Sensitivity * Prevalence) + ((1-Specificity) * (1-Prevalence)))

NPV = (Specificity * (1-Prevalence)) / (((1-Sensitivity) * Prevalence) + ((Specificity) * (1-Prevalence)))

有关统计数据的讨论,请参阅引用。

参考

Altman, D.G., Bland, J.M. (1994)“诊断测试 1:敏感性和特异性”,《英国医学杂志》,第 308 卷,1552。

也可以看看

其他类指标:accuracy() , bal_accuracy() , detection_prevalence() , f_meas() , j_index() , kap() , mcc() , npv() , ppv() , precision() , recall() , sens()

其他敏感度指标:npv()ppv()sens()

作者

马克斯·库恩

例子

# Two class
data("two_class_example")
spec(two_class_example, truth, predicted)
#> # A tibble: 1 × 3
#>   .metric .estimator .estimate
#>   <chr>   <chr>          <dbl>
#> 1 spec    binary         0.793

# Multiclass
library(dplyr)
data(hpc_cv)

hpc_cv %>%
  filter(Resample == "Fold01") %>%
  spec(obs, pred)
#> # A tibble: 1 × 3
#>   .metric .estimator .estimate
#>   <chr>   <chr>          <dbl>
#> 1 spec    macro          0.886

# Groups are respected
hpc_cv %>%
  group_by(Resample) %>%
  spec(obs, pred)
#> # A tibble: 10 × 4
#>    Resample .metric .estimator .estimate
#>    <chr>    <chr>   <chr>          <dbl>
#>  1 Fold01   spec    macro          0.886
#>  2 Fold02   spec    macro          0.882
#>  3 Fold03   spec    macro          0.899
#>  4 Fold04   spec    macro          0.879
#>  5 Fold05   spec    macro          0.881
#>  6 Fold06   spec    macro          0.873
#>  7 Fold07   spec    macro          0.866
#>  8 Fold08   spec    macro          0.884
#>  9 Fold09   spec    macro          0.867
#> 10 Fold10   spec    macro          0.875

# Weighted macro averaging
hpc_cv %>%
  group_by(Resample) %>%
  spec(obs, pred, estimator = "macro_weighted")
#> # A tibble: 10 × 4
#>    Resample .metric .estimator     .estimate
#>    <chr>    <chr>   <chr>              <dbl>
#>  1 Fold01   spec    macro_weighted     0.816
#>  2 Fold02   spec    macro_weighted     0.815
#>  3 Fold03   spec    macro_weighted     0.839
#>  4 Fold04   spec    macro_weighted     0.803
#>  5 Fold05   spec    macro_weighted     0.812
#>  6 Fold06   spec    macro_weighted     0.795
#>  7 Fold07   spec    macro_weighted     0.790
#>  8 Fold08   spec    macro_weighted     0.814
#>  9 Fold09   spec    macro_weighted     0.795
#> 10 Fold10   spec    macro_weighted     0.801

# Vector version
spec_vec(
  two_class_example$truth,
  two_class_example$predicted
)
#> [1] 0.7933884

# Making Class2 the "relevant" level
spec_vec(
  two_class_example$truth,
  two_class_example$predicted,
  event_level = "second"
)
#> [1] 0.879845
源代码:R/class-spec.R

相关用法


注:本文由纯净天空筛选整理自Max Kuhn等大神的英文原创作品 Specificity。非经特殊声明,原始代码版权归原作者所有,本译文未经允许或授权,请勿转载或复制。