我正在使用4x3设置进行嵌套重采样(在外循环中进行4倍交叉验证,在内循环中进行3倍交叉验证(。目前,我只使用支持向量机(kernlab中的ksvm(。在内部循环中,我正在寻找最佳的调整参数C和西格玛。
调用getBMRPperformances((,然后输出4个单独外部测试数据集的性能。函数getBMRTuneResults((也为我正在使用的度量输出4个值(在我的例子中是cohen的kappa(,但它们与getBMRPerformance((的输出不同,我不知道第二个输出实际是什么。
正如函数名称所示,它输出调优的结果。因此,性能值与调谐(内环(期间计算的性能相对应。
这里特别提到的四个值是外循环特定折叠的最佳性能超参数设置所达到的性能。