Training a classifier with noisy labels typically requires the learner to specify the distribution of label noise, which is often unknown in practice. Although there have been some recent attempts to relax that requirement, we show that the Bayes decision rule is unidentified in most classification problems with noisy labels. This suggests it is generally not possible to bypass/relax the requirement. In the special cases in which the Bayes decision rule is identified, we develop a simple algorithm to learn the Bayes decision rule, that does not require knowledge of the noise distribution.


翻译:训练带有嘈杂标签的分类器通常需要学习者指定标签噪声的分布,这在实践中往往是未知的。虽然最近有一些尝试放松这个要求,但我们证明,在大多数带有嘈杂标签的分类问题中,贝叶斯决策规则是未知的。这表明通常不可能绕过/放宽要求。在贝叶斯决策规则被确定的特殊情况下,我们开发了一个简单的算法来学习贝叶斯决策规则,不需要知道噪声分布。

0
下载
关闭预览

相关内容

【ETH】机器学习数学基础课程笔记, 83页pdf
专知会员服务
67+阅读 · 2021年10月20日
专知会员服务
45+阅读 · 2020年12月18日
专知会员服务
51+阅读 · 2020年12月14日
Transferring Knowledge across Learning Processes
CreateAMind
29+阅读 · 2019年5月18日
强化学习的Unsupervised Meta-Learning
CreateAMind
18+阅读 · 2019年1月7日
无监督元学习表示学习
CreateAMind
27+阅读 · 2019年1月4日
Unsupervised Learning via Meta-Learning
CreateAMind
43+阅读 · 2019年1月3日
A Technical Overview of AI & ML in 2018 & Trends for 2019
待字闺中
18+阅读 · 2018年12月24日
国家自然科学基金
5+阅读 · 2015年12月31日
国家自然科学基金
0+阅读 · 2012年12月31日
国家自然科学基金
0+阅读 · 2009年12月31日
国家自然科学基金
0+阅读 · 2008年12月31日
Arxiv
1+阅读 · 2023年5月31日
VIP会员
相关VIP内容
【ETH】机器学习数学基础课程笔记, 83页pdf
专知会员服务
67+阅读 · 2021年10月20日
专知会员服务
45+阅读 · 2020年12月18日
专知会员服务
51+阅读 · 2020年12月14日
相关资讯
Transferring Knowledge across Learning Processes
CreateAMind
29+阅读 · 2019年5月18日
强化学习的Unsupervised Meta-Learning
CreateAMind
18+阅读 · 2019年1月7日
无监督元学习表示学习
CreateAMind
27+阅读 · 2019年1月4日
Unsupervised Learning via Meta-Learning
CreateAMind
43+阅读 · 2019年1月3日
A Technical Overview of AI & ML in 2018 & Trends for 2019
待字闺中
18+阅读 · 2018年12月24日
相关基金
国家自然科学基金
5+阅读 · 2015年12月31日
国家自然科学基金
0+阅读 · 2012年12月31日
国家自然科学基金
0+阅读 · 2009年12月31日
国家自然科学基金
0+阅读 · 2008年12月31日
Top
微信扫码咨询专知VIP会员