换测试集,本身能成为研究贡献吗?

完整解释、原始数值、素材与实验仍可访问;默认翻页不进入此内容。

ImageNet-C控制合成 corruption 的类型与强度ObjectNet控制物体、背景、视角与旋转问:随扰动强度怎样退化?问:熟悉的拍摄线索消失后呢?基准改变了可见的失败;数据集间分数不能无条件横比。基准设计动机 · 类别映射 / 测试预处理 / 指标必须随结果一起提供

ImageNet-C/P的正式基准在ICLR 2019组织了常见corruption与perturbation评价;ImageNet-C更早已有2018前身稿。ObjectNet改变拍摄因素,二者类别映射和输入条件不同,数字不能直接横比。测试设计让旧协议隐藏的问题可以重复检验。接下来回看更早的另一条并行路线:Madry等2017年预印本、ICLR 2018的鲁棒优化,如何在训练时处理明确的威胁集合。这里按问题连接,不是说2019基准催生了更早的方法。

原始说明

ImageNet-C/P的正式基准在ICLR 2019组织了常见corruption与perturbation评价;ImageNet-C更早已有2018前身稿。ObjectNet改变拍摄因素,二者类别映射和输入条件不同,数字不能直接横比。测试设计让旧协议隐藏的问题可以重复检验。接下来回看更早的另一条并行路线:Madry等2017年预印本、ICLR 2018的鲁棒优化,如何在训练时处理明确的威胁集合。这里按问题连接,不是说2019基准催生了更早的方法。 年代核对:ImageNet-C/P正式基准ICLR 2019,arXiv 1903.12261于2019-03-28提交;ImageNet-C有2018-07-04前身稿,前身讨论Icons-50,不应据此把ImageNet-P一并标2018。

robustness

https://objectnet.dev/

1907.07174

2006.16241

Calibration · ICML 2017