最优间隔分布脊回归

2017 年 8 月 28 日 计算机研究与发展 陈加略, 姜远

 最优间隔分布脊回归  

脊回归(ridge regression, RR)是经典的机器学习算法之一,广泛应用于人脸识别、基因工程等诸多领域.其具有优化目标凸、存在闭合解、可解释性强以及易于核化等优点,但是脊回归的优化目标并没有考虑样本之间的结构关系.监督流形正则化学习是最具代表性的、最成功的脊回归正则化方法之一,其通过最小化每类类内方差来考虑样本之间的类内结构关系,可是单纯地只考虑类内结构仍然不够全面.

以一种全新的视角重新审视最近提出的“最优间隔分布学习”原理,发现了最优间隔分布的目标可以同时优化类内间隔方差和类间间隔方差,从而同时优化了局部的类内结构和全局的类间结构.基于此提出了一种充分考虑数据结构化特征的脊回归算法——最优间隔分布脊回归(optimal margin distribution machine ridge regression, ODMRR)算法,该算法具有RR以及MRRR(manifold regularization ridge regression)的各种优势.最后通过实验验证了该方法具有优越的性能.


全文阅读:http://crad.ict.ac.cn/CN/abstract/abstract3499.shtml

陈加略,姜远. 最优间隔分布脊回归[J]. 计算机研究与发展, 2017, 54(8): 1744-1750. 

登录查看更多
0

相关内容

【经典书】机器学习:贝叶斯和优化方法,1075页pdf
专知会员服务
412+阅读 · 2020年6月8日
【干货书】用于概率、统计和机器学习的Python,288页pdf
专知会员服务
291+阅读 · 2020年6月3日
【CVPR2020】用多样性最大化克服单样本NAS中的多模型遗忘
一文读懂线性回归、岭回归和Lasso回归
CSDN
34+阅读 · 2019年10月13日
博客 | 回归类算法最全综述及逻辑回归重点讲解
AI研习社
13+阅读 · 2018年11月29日
已删除
将门创投
4+阅读 · 2018年6月12日
支持向量机分类实战
全球人工智能
4+阅读 · 2017年10月18日
机器学习(16)之支持向量机原理(二)软间隔最大化
机器学习算法与Python学习
6+阅读 · 2017年9月8日
结合弱监督信息的凸聚类
计算机研究与发展
6+阅读 · 2017年8月30日
基于聚类和决策树的链路预测方法
计算机研究与发展
8+阅读 · 2017年8月25日
关系推理:基于表示学习和语义要素
计算机研究与发展
19+阅读 · 2017年8月22日
Arxiv
21+阅读 · 2019年8月21日
Arxiv
15+阅读 · 2019年6月25日
Implicit Maximum Likelihood Estimation
Arxiv
7+阅读 · 2018年9月24日
Arxiv
19+阅读 · 2018年6月27日
Arxiv
7+阅读 · 2018年5月23日
VIP会员
相关资讯
一文读懂线性回归、岭回归和Lasso回归
CSDN
34+阅读 · 2019年10月13日
博客 | 回归类算法最全综述及逻辑回归重点讲解
AI研习社
13+阅读 · 2018年11月29日
已删除
将门创投
4+阅读 · 2018年6月12日
支持向量机分类实战
全球人工智能
4+阅读 · 2017年10月18日
机器学习(16)之支持向量机原理(二)软间隔最大化
机器学习算法与Python学习
6+阅读 · 2017年9月8日
结合弱监督信息的凸聚类
计算机研究与发展
6+阅读 · 2017年8月30日
基于聚类和决策树的链路预测方法
计算机研究与发展
8+阅读 · 2017年8月25日
关系推理:基于表示学习和语义要素
计算机研究与发展
19+阅读 · 2017年8月22日
相关论文
Arxiv
21+阅读 · 2019年8月21日
Arxiv
15+阅读 · 2019年6月25日
Implicit Maximum Likelihood Estimation
Arxiv
7+阅读 · 2018年9月24日
Arxiv
19+阅读 · 2018年6月27日
Arxiv
7+阅读 · 2018年5月23日
Top
微信扫码咨询专知VIP会员